Proxmox VMs, Storage, usw.

berndy2001

Registered: Feb 2003
Location: Vienna
Posts: 2075

26.02.2025 - 10:23

Hat jemand Erfahrungen mit PBS Cloud Services? Mit ist auf reddit als Werbung remote-backups(.)com in entgegengesprungen, die 100Gb Storage kostenlos anbieten. Weiters habe ich noch tuxis.nl gefunden, mit 150gb.
Erfahrungen damit? Da man Backups ja verschlüsseln kann, sollte es i.O sein?

daisho

Vereinsmitglied
SHODAN

Registered: Nov 2002
Location: 4C4
Posts: 19850

26.02.2025 - 15:36

Ja, ist halt etwas worauf du nicht zählen kannst, d.h. sie können den Dienst halt jederzeit einstellen und die Arbeit bzw. Bandbreite für Upload (falls das ein Thema ist) ist dann umsonst.

Bei 100Gb ev. noch überschaubar, aber wenn man dann mal Wochen/Monate braucht für den Upload ...
Auch schauen ob du dann das Backup auch einigermaßen schnell wieder ziehen kannst (also mal testen).

ZARO

Here to stay

Registered: May 2002
Location: Wien 22
Posts: 999

26.02.2025 - 18:47

Wie weit kommst du mit 100GB? Da ist jede kleinste SSD schon grösser.
Und 10Eur pro 1TB/Monat ist halt nicht auf Dauer recht teuer.

dio

Here to stay

Registered: Nov 2002
Location: Graz
Posts: 4971

26.02.2025 - 18:48

Ich sichere mittlerweile alles bei Backblaze mit pay as you go, find ich ein sehr faires Konzept. Meine verschiedenen virtuellen Homeserver benötigen aktuell etwa 80 GB an Speicher, das deduplizieren funktioniert gut.

berndy2001

Registered: Feb 2003
Location: Vienna
Posts: 2075

27.02.2025 - 14:08

hab momentan so 20gb an lxc´s, also nichts aufregendes.

Zitat
Auch schauen ob du dann das Backup auch einigermaßen schnell wieder ziehen kannst (also mal testen).

guter punkt. remote-backups bekomme ich ~120mbit, bei tuxis ~85mbit.

@dio: backblaze b2? Habe ich früher für normale Backups vom NAS genutzt, bin mittlerweile zu scaleway gewechselt, weil glacier-storage günstiger ist (€0.002/GB/month). Für proxmox ist der pbs aber schon nett, darum die idee die genannten services zu nutzen.

Bearbeitet von berndy2001 am 27.02.2025, 14:10

dio

Here to stay

Registered: Nov 2002
Location: Graz
Posts: 4971

27.02.2025 - 14:14

Vielleicht versteh ichs falsch - willst du den PBS extern hosten? Ich hab eine PBS Instanz zu Hause laufen, lass die Backups aufs NAS speichern, dann laueft restic drueber und es geht ab zu backblaze b2.

berndy2001

Registered: Feb 2003
Location: Vienna
Posts: 2075

27.02.2025 - 18:07

Zitat aus einem Post von dio
willst du den PBS extern hosten

nein, das ist fremd-gehostet. As a service quasi. Man bekommt die Zugangsdaten die man in proxmox einträgt.

Zitat
PBS Instanz zu Hause laufen, lass die Backups aufs NAS speichern, dann laueft restic drueber und es geht ab zu backblaze b2

muss ich mal probieren, die Idee hatte ich noch nicht

creative2k

F this

Registered: Jul 2002
Location: Vienna
Posts: 8564

28.02.2025 - 20:16

Ich spiel mich ja schon bisschen mit TrueNAS Scale und der durchgereichten HBA Controllerkarte. Alles problemlos geklappt, bis auf den Umstand, dass durch den Einbau der Karte mein Proxmox Host meinte er muss dem Netzwerkcontroller eine neue id geben

.

Aber ich bin etwas enttäuscht von der Write Performance. Ich hab ein RaidZ1 erstellt mit 8x24TB und einem VDEV. Ich krieg mit 8 Platten schwankend 250-700MB/s zusammen. (Teste grad mit meinen Bluray Backups)

Also steady 700 hätte ich mir schon erwartet, da kann ja mein Synology stabiler schreiben mit 5x18TB und SHR-1. Frisst ZFS echt so viel Leistung? Mit 8 Kernen hat er sich total angespieben zwischendurch, da hat er größere Pausen gemacht, ich hab ihm jetzt einfach 32 gegeben (64gb ram) und es schwankt noch immer, aber nicht mehr so extrem.

Vllt ist ZFS doch nicht das richtige für mich

.

Ich test jetzt noch bissl rum aber ich dachte nicht, dass das "so schlecht" läuft

. Da brauch ich ja ewig um 50TB umzuziehen

Mir fehlt noch so bisschen das Verständnis warum sequenzielle Übertragungen so lahm sind bei ZFS oder ich hab irgendwas falsch kA. Kompression ist wurscht ob die an oder aus ist. Sync steht auf Standard.

Bearbeitet von creative2k am 28.02.2025, 20:32

spunz

Elder
Elder

Registered: Aug 2000
Location: achse des bösen
Posts: 11341

28.02.2025 - 20:29

Zitat aus einem Post von creative2k
Also steady 700 hätte ich mir schon erwartet, da kann ja mein Synology stabiler schreiben mit 5x18TB und SHR-1. Frisst ZFS echt so viel Leistung?

für 700mb müsstest du schon 3 vdev´s machen.

creative2k

F this

Registered: Jul 2002
Location: Vienna
Posts: 8564

28.02.2025 - 20:42

Zitat aus einem Post von spunz
für 700mb müsstest du schon 3 vdev´s machen.

Ja aber dann knabbern mir die wieder was vom Speicher weg, wenn ich auf Redundanz bei 3 vdevs baue

. Ich bin glaub zu viel vom "klassischen" Raid 5 verwöhnt. Die ZFS features sind ja generell schon sehr gut. Ich schätz ich werds einfach so lassen, merken tu ichs sowieso nur wenn der RAM voll ist. Der Umzug wird halt bissl zach, mal schauen obs übers Wochenende fertig wird

.

creative2k

F this

Registered: Jul 2002
Location: Vienna
Posts: 8564

02.03.2025 - 09:47

Nachtrag: Ich bin auf meine Performance Probleme draufgekommen. Anscheinend mochte TrueNAS meine VM CPU nicht (Qemu x84-64-v4). Ich habs nun zu Host geändert und es läuft fast ohne CPU Last. Ich schätze daher kamen die Performance Probleme.

Also falls wer TrueNAS Scale Virtualisieren will bzw. Performance Probleme hat, stellt mal auf Host um bei der CPU

.

creative2k

F this

Registered: Jul 2002
Location: Vienna
Posts: 8564

09.03.2025 - 11:58

So hab nochmal bisschen die HW aktualisiert und bissl Redundanz reingebracht

Aktuelle Config GH Link:

CPU: AMD Ryzen 9 7950X3D, 16C/32T, 4.20-5.70GHz
Mobo: ASUS TUF Gaming X670E-Plus (90MB1BJ0-M0EAY0)
RAM: 4x Kingston Server Premier DIMM 48GB, DDR5-5600, CL46-45-45, ECC, on-die ECC
SSD 1+2 (System) ZFS Mirror: 2x Kingston DC600M Data Center Series Mixed-Use SSD - 1DWPD 960GB, SED, 2.5" / SATA 6Gb/s
SSD 3+4 (VM Performance PCIe 4.0) ZFS Mirror: 2x Patriot Viper VP4300 2TB, M.2 2280 / M-Key / PCIe 4.0 x4, Kühlkörper (VP4300-2TBM28H)
SSD 5+6 (VM Normal PCIe 3.0) ZFS Mirror: 2x Western Digital Red SN700 NVMe NAS SSD - 1DWPD 1TB, M.2 2280 / M-Key / PCIe 3.0 x4
Netzwerkkarte: TP-Link 10G LAN-Adapter, RJ-45, PCIe 3.0 x4 (TX401)
CPU Kühler: Noctua NH-D15S
Gehäuse: Fractal Design Define XL R2, schwarz, schallgedämmt
Netzteil: Fractal Design Ion+ 2 Platinum 760W ATX 2.52
HDD (Datengrab RaidZ1): 8x Seagate Exos X - X24 24TB, 24/7, 512e/4Kn / 3.5" / SATA 6Gb/s
HBA: 1x LSI Broadcom SAS 9305-16i, PCIe 3.0 x8

Aber toll dass man im AMD CBS Menü ECC von Auto auf Enabled setzen muss damit es aktiviert ist. Wem das eingefallen ist :rolleyes:

creative2k

F this

Registered: Jul 2002
Location: Vienna
Posts: 8564

15.03.2025 - 21:26

Neue Woche, neue Experimente

Ich dachte mir, ich mach mir noch nen kleinen Proxmox Server für PBS und ggf. Container die keine Leistung brauchen und bin über diese HW gestolpert:

ASUS NUC 14 Essential Kit - Mill Canyon - RNUC14MNK2500002 ab € 206,90 (2025) | Preisvergleich Geizhals Österreich

Preisvergleich für ASUS NUC 14 Essential Kit - Mill Canyon - RNUC14MNK2500002 Produktinfo Typ: Mini-PC • Chipsatz: System-on-Chip (SoC) • Sockel: N/A • CPU: Intel N250, 0C+4c/4T, 1.80-3.80GHz, 6M… Barebones Testberichte Günstig kaufen

Link: geizhals.at

Verbrauch recht gering, 2.5GBit Lan, passt ja dachte ich mir… Bis ich beim installieren drauf gekommen bin, dass es eine richtig „tolle“ Realtek Karte ist die verbaut ist, welche nicht unterstützt wurde (hab beim kauf ned drauf geachtet xP). Naja jedenfalls hat mich das ein paar Stunden testen und Nachforschen gekostet, bis die lief

.

Kurzfassung: USB->LAN Adapter angeschlossen, alle Updates gezogen, build essentials gezogen, linux headers gezogen, treiber von der realtek Seite gezogen auf nen usb stick, usb stick gemounted und files lokal kopiert, treiber kompiliert/installiert und schon ging es mit der Onboard Karte. (Klingt jetzt einfach aber für nen Linux Noob wie mich war das schon „umständlich“

, vorallem hätte ich keinen USB->LAN Adapter gehabt hätt ichs glaub aufgegeben :bash:

)

Jedenfalls läuft der Knirps nun Tapfer und ich hoffe auch in weiterer Folge auf Dauer ohne Probleme

Garbage

Elder
The Wizard of Owls

Registered: Jul 2000
Location: GR.ch|TI.ch
Posts: 11475

15.03.2025 - 21:30

Bei der Problem-Historie der Intel i225 und i226 Serie kannst eigentlich eh ganz froh sein, dass da eine Realtek NIC drauf ist.

Viper780

Elder
Er ist tot, Jim!

Registered: Mar 2001
Location: Wien
Posts: 50982

16.03.2025 - 10:06

Die Realtek sind weit verbreitet und sehr beliebt wundert mich dass Proxmox die nicht kennt.

Ich hätte vermutlich gleich zum 8 Core gegriffen.
Was mich bei Alderlake-N / Twinlake am meisten stört ist der Single Channel RAM

berndy2001 Registered: Feb 2003 Location: Vienna Posts: 2075	26.02.2025 - 10:23 Hat jemand Erfahrungen mit PBS Cloud Services? Mit ist auf reddit als Werbung remote-backups(.)com in entgegengesprungen, die 100Gb Storage kostenlos anbieten. Weiters habe ich noch tuxis.nl gefunden, mit 150gb. Erfahrungen damit? Da man Backups ja verschlüsseln kann, sollte es i.O sein?
daisho Vereinsmitglied SHODAN Registered: Nov 2002 Location: 4C4 Posts: 19850	26.02.2025 - 15:36 Ja, ist halt etwas worauf du nicht zählen kannst, d.h. sie können den Dienst halt jederzeit einstellen und die Arbeit bzw. Bandbreite für Upload (falls das ein Thema ist) ist dann umsonst. Bei 100Gb ev. noch überschaubar, aber wenn man dann mal Wochen/Monate braucht für den Upload ... Auch schauen ob du dann das Backup auch einigermaßen schnell wieder ziehen kannst (also mal testen).
ZARO Here to stay Registered: May 2002 Location: Wien 22 Posts: 999	26.02.2025 - 18:47 Wie weit kommst du mit 100GB? Da ist jede kleinste SSD schon grösser. Und 10Eur pro 1TB/Monat ist halt nicht auf Dauer recht teuer.
dio Here to stay Registered: Nov 2002 Location: Graz Posts: 4971	26.02.2025 - 18:48 Ich sichere mittlerweile alles bei Backblaze mit pay as you go, find ich ein sehr faires Konzept. Meine verschiedenen virtuellen Homeserver benötigen aktuell etwa 80 GB an Speicher, das deduplizieren funktioniert gut.
berndy2001 Registered: Feb 2003 Location: Vienna Posts: 2075	27.02.2025 - 14:08 hab momentan so 20gb an lxc´s, also nichts aufregendes. Zitat Auch schauen ob du dann das Backup auch einigermaßen schnell wieder ziehen kannst (also mal testen). guter punkt. remote-backups bekomme ich ~120mbit, bei tuxis ~85mbit. @dio: backblaze b2? Habe ich früher für normale Backups vom NAS genutzt, bin mittlerweile zu scaleway gewechselt, weil glacier-storage günstiger ist (€0.002/GB/month). Für proxmox ist der pbs aber schon nett, darum die idee die genannten services zu nutzen. Bearbeitet von berndy2001 am 27.02.2025, 14:10
dio Here to stay Registered: Nov 2002 Location: Graz Posts: 4971	27.02.2025 - 14:14 Vielleicht versteh ichs falsch - willst du den PBS extern hosten? Ich hab eine PBS Instanz zu Hause laufen, lass die Backups aufs NAS speichern, dann laueft restic drueber und es geht ab zu backblaze b2.
berndy2001 Registered: Feb 2003 Location: Vienna Posts: 2075	27.02.2025 - 18:07 Zitat aus einem Post von dio willst du den PBS extern hosten nein, das ist fremd-gehostet. As a service quasi. Man bekommt die Zugangsdaten die man in proxmox einträgt. Zitat PBS Instanz zu Hause laufen, lass die Backups aufs NAS speichern, dann laueft restic drueber und es geht ab zu backblaze b2 muss ich mal probieren, die Idee hatte ich noch nicht
creative2k F this Registered: Jul 2002 Location: Vienna Posts: 8564	28.02.2025 - 20:16 Ich spiel mich ja schon bisschen mit TrueNAS Scale und der durchgereichten HBA Controllerkarte. Alles problemlos geklappt, bis auf den Umstand, dass durch den Einbau der Karte mein Proxmox Host meinte er muss dem Netzwerkcontroller eine neue id geben . Aber ich bin etwas enttäuscht von der Write Performance. Ich hab ein RaidZ1 erstellt mit 8x24TB und einem VDEV. Ich krieg mit 8 Platten schwankend 250-700MB/s zusammen. (Teste grad mit meinen Bluray Backups) Also steady 700 hätte ich mir schon erwartet, da kann ja mein Synology stabiler schreiben mit 5x18TB und SHR-1. Frisst ZFS echt so viel Leistung? Mit 8 Kernen hat er sich total angespieben zwischendurch, da hat er größere Pausen gemacht, ich hab ihm jetzt einfach 32 gegeben (64gb ram) und es schwankt noch immer, aber nicht mehr so extrem. Vllt ist ZFS doch nicht das richtige für mich . Ich test jetzt noch bissl rum aber ich dachte nicht, dass das "so schlecht" läuft . Da brauch ich ja ewig um 50TB umzuziehen Mir fehlt noch so bisschen das Verständnis warum sequenzielle Übertragungen so lahm sind bei ZFS oder ich hab irgendwas falsch kA. Kompression ist wurscht ob die an oder aus ist. Sync steht auf Standard. Bearbeitet von creative2k am 28.02.2025, 20:32
spunz Elder Elder Registered: Aug 2000 Location: achse des bösen Posts: 11341	28.02.2025 - 20:29 Zitat aus einem Post von creative2k Also steady 700 hätte ich mir schon erwartet, da kann ja mein Synology stabiler schreiben mit 5x18TB und SHR-1. Frisst ZFS echt so viel Leistung? für 700mb müsstest du schon 3 vdev´s machen.
creative2k F this Registered: Jul 2002 Location: Vienna Posts: 8564	28.02.2025 - 20:42 Zitat aus einem Post von spunz für 700mb müsstest du schon 3 vdev´s machen. Ja aber dann knabbern mir die wieder was vom Speicher weg, wenn ich auf Redundanz bei 3 vdevs baue . Ich bin glaub zu viel vom "klassischen" Raid 5 verwöhnt. Die ZFS features sind ja generell schon sehr gut. Ich schätz ich werds einfach so lassen, merken tu ichs sowieso nur wenn der RAM voll ist. Der Umzug wird halt bissl zach, mal schauen obs übers Wochenende fertig wird .
creative2k F this Registered: Jul 2002 Location: Vienna Posts: 8564	02.03.2025 - 09:47 Nachtrag: Ich bin auf meine Performance Probleme draufgekommen. Anscheinend mochte TrueNAS meine VM CPU nicht (Qemu x84-64-v4). Ich habs nun zu Host geändert und es läuft fast ohne CPU Last. Ich schätze daher kamen die Performance Probleme. Also falls wer TrueNAS Scale Virtualisieren will bzw. Performance Probleme hat, stellt mal auf Host um bei der CPU .
creative2k F this Registered: Jul 2002 Location: Vienna Posts: 8564	09.03.2025 - 11:58 So hab nochmal bisschen die HW aktualisiert und bissl Redundanz reingebracht Aktuelle Config GH Link: CPU: AMD Ryzen 9 7950X3D, 16C/32T, 4.20-5.70GHz Mobo: ASUS TUF Gaming X670E-Plus (90MB1BJ0-M0EAY0) RAM: 4x Kingston Server Premier DIMM 48GB, DDR5-5600, CL46-45-45, ECC, on-die ECC SSD 1+2 (System) ZFS Mirror: 2x Kingston DC600M Data Center Series Mixed-Use SSD - 1DWPD 960GB, SED, 2.5" / SATA 6Gb/s SSD 3+4 (VM Performance PCIe 4.0) ZFS Mirror: 2x Patriot Viper VP4300 2TB, M.2 2280 / M-Key / PCIe 4.0 x4, Kühlkörper (VP4300-2TBM28H) SSD 5+6 (VM Normal PCIe 3.0) ZFS Mirror: 2x Western Digital Red SN700 NVMe NAS SSD - 1DWPD 1TB, M.2 2280 / M-Key / PCIe 3.0 x4 Netzwerkkarte: TP-Link 10G LAN-Adapter, RJ-45, PCIe 3.0 x4 (TX401) CPU Kühler: Noctua NH-D15S Gehäuse: Fractal Design Define XL R2, schwarz, schallgedämmt Netzteil: Fractal Design Ion+ 2 Platinum 760W ATX 2.52 HDD (Datengrab RaidZ1): 8x Seagate Exos X - X24 24TB, 24/7, 512e/4Kn / 3.5" / SATA 6Gb/s HBA: 1x LSI Broadcom SAS 9305-16i, PCIe 3.0 x8 Aber toll dass man im AMD CBS Menü ECC von Auto auf Enabled setzen muss damit es aktiviert ist. Wem das eingefallen ist
creative2k F this Registered: Jul 2002 Location: Vienna Posts: 8564	15.03.2025 - 21:26 Neue Woche, neue Experimente Ich dachte mir, ich mach mir noch nen kleinen Proxmox Server für PBS und ggf. Container die keine Leistung brauchen und bin über diese HW gestolpert: ASUS NUC 14 Essential Kit - Mill Canyon - RNUC14MNK2500002 ab € 206,90 (2025) \| Preisvergleich Geizhals Österreich Preisvergleich für ASUS NUC 14 Essential Kit - Mill Canyon - RNUC14MNK2500002 Produktinfo Typ: Mini-PC • Chipsatz: System-on-Chip (SoC) • Sockel: N/A • CPU: Intel N250, 0C+4c/4T, 1.80-3.80GHz, 6M… Barebones Testberichte Günstig kaufen Link: geizhals.at Verbrauch recht gering, 2.5GBit Lan, passt ja dachte ich mir… Bis ich beim installieren drauf gekommen bin, dass es eine richtig „tolle“ Realtek Karte ist die verbaut ist, welche nicht unterstützt wurde (hab beim kauf ned drauf geachtet xP). Naja jedenfalls hat mich das ein paar Stunden testen und Nachforschen gekostet, bis die lief . Kurzfassung: USB->LAN Adapter angeschlossen, alle Updates gezogen, build essentials gezogen, linux headers gezogen, treiber von der realtek Seite gezogen auf nen usb stick, usb stick gemounted und files lokal kopiert, treiber kompiliert/installiert und schon ging es mit der Onboard Karte. (Klingt jetzt einfach aber für nen Linux Noob wie mich war das schon „umständlich“ , vorallem hätte ich keinen USB->LAN Adapter gehabt hätt ichs glaub aufgegeben ) Jedenfalls läuft der Knirps nun Tapfer und ich hoffe auch in weiterer Folge auf Dauer ohne Probleme
Garbage Elder The Wizard of Owls Registered: Jul 2000 Location: GR.ch\|TI.ch Posts: 11475	15.03.2025 - 21:30 Bei der Problem-Historie der Intel i225 und i226 Serie kannst eigentlich eh ganz froh sein, dass da eine Realtek NIC drauf ist.
Viper780 Elder Er ist tot, Jim! Registered: Mar 2001 Location: Wien Posts: 50982	16.03.2025 - 10:06 Die Realtek sind weit verbreitet und sehr beliebt wundert mich dass Proxmox die nicht kennt. Ich hätte vermutlich gleich zum 8 Core gegriffen. Was mich bei Alderlake-N / Twinlake am meisten stört ist der Single Channel RAM

Proxmox VMs, Storage, usw.

Forum Index > Software > Linux and other OS

berndy2001

daisho

ZARO

dio

berndy2001

dio

berndy2001

creative2k

spunz

creative2k

creative2k

creative2k

creative2k

Garbage

Viper780