"Taranis" RAID-6 Array: 54.5TB (War: "Helios" RAID-6: 5.45TB + Update auf ~11TB)

schizo

Produkt der Gesellschaft

Registered: Feb 2003
Location: Vienna
Posts: 2493

19.11.2015 - 15:06

Zitat von Umlüx
ich wär bei meinem schon zufrieden, wenn die mail benachrichtigungen im 3DM2 noch funktionieren würden....

Also bei mir haut das Mail Alerting (3DM2 version 2.11.00.016, API version 2.08.00.017) problemlos mittels SSL hin.

Ich hab aber auch ziemlich bald, nachdem ich das erste mal das Webinterface eines Areca Controllers gesehen hab bereut, dass mir die 100€ Aufpreis dafür zu viel waren.

Ansonsten: ein nettes Raid hast du da mal wieder :cool:

Umlüx

Huge Metal Fan

Registered: Jun 2001
Location: Kärnten
Posts: 8902

19.11.2015 - 15:25

ah. ich bin anscheinend ein bisschen hinten..
wo kriegt man jetzt eigentlich noch eine aktuelle version her?

edit: gefunden... nicht grad einfach nach der Xten übernahme..

edit2: geht bei mir leider immer noch nicht. schade

Bearbeitet von Umlüx am 19.11.2015, 16:13

hctuB

Bloody Newbie

Registered: Feb 2002
Location: Pampa LL
Posts: 2391

19.11.2015 - 16:00

Das interface ist noch so hässlich wie vor 4 Jahren

cooles teil bin froh das ich die Zeit hinter mir habe, als ich soviel in Hardware investiert habe

wergor

connoisseur de mimi

Registered: Jul 2005
Location: graz
Posts: 4027

19.11.2015 - 16:45

ich würde musik auch eher in einem lossless format speichern (mache ich btw auch) als nur ISOs zu machen. ob man beim kopieren auf einen player jetzt die iso ripped oder die z.b. flac files konvertiert macht nicht viel unterschied imho.

GrandAdmiralThrawn

XP Nazi

Registered: Aug 2000
Location: BRUCK!
Posts: 3682

19.11.2015 - 17:32

Und da hats schon geknallt, Array im Init noch degraded, war's ihm doch Mal zu dumm.

Ich hab das Gefühl ich sollt die Disks Mal testweise an ein separates Netzteil hängen...

Edit: 3 Disks weg, Array broken... Bah, das wird noch eine Sau*******e deluxe werden...

Edit 2: Kabarett ist eröffnet! Controllerfirmware nicht mehr hochgekommen (heißt er läßt die Maschine ned mehr booten!), viel rumprobiert, Fazit: Ohne FBM gehts wieder. wtf?!

Mal das halbe RAID auf ein dediziertes Netzteil umgehängt. Initialisier ma halt nochmal von vorne, geht eh um nix!! olololo

(Ich reiß jetzt ein Bier oder 3-4 auf, sonst pack ich das ned mehr, rofl)

Bearbeitet von GrandAdmiralThrawn am 19.11.2015, 18:48

Valera

Here to stay

Registered: Dec 2005
Location: Mint
Posts: 683

19.11.2015 - 21:51

Gerade habe ich GATs Kotenabschätzung meiner Frau gezeigt: Schau mal Schatz, ich bin garnicht soo verrückt! Mach ma jetzt die Servererweiterung?"

Die Reaktion entpricht am ehesten den Rolleyes Smiley: :rolleyes:

GrandAdmiralThrawn

XP Nazi

Registered: Aug 2000
Location: BRUCK!
Posts: 3682

19.11.2015 - 21:58

Ich muß dazu jetzt Mal was sagen - also zur Finanzierung - klar ist das krank, aber es is ja ned so, daß ich da einfach irgendwas mache. Dieser Bau ist jahrelang geplant, und über 3-4 Jahre wurde das entsprechende Budget so nebenher aufgebaut. Nennen wir das Mal "außerordentlichen Haushalt". Der deckt das ab, fertig.

Man muß derartigen Irrsinn ja ned von dem Geld bezahlen, das zum eigentlichen Leben da ist. Ich hab's auch immer so gehalten: Wenn nicht genug Kohle zum "Kernpuffer" extra da ist, dann wird eben NICHTS gekauft, Ende, aus.

Aber najo, es scheint mir (ich will's echt noch ned verschreien) tatsächlich so zu sein, daß ein paar 1€ Teile - namentlich Y-Kabel - einen 8000€ RAID Array weggefickt haben. Also sicher ist das bei weitem noch ned. Aber nach Umhängen des halben Arrays auf ein dediziertes Netzteil schaut das irgendwie alles weit besser aus. Leider haben jetzt mehr als die Hälfte der Disks schon nette Recoverable Read- und Write-Errors im SMART Log deswegen. Tlw. über 50 an der Zahl. So ein Dreck.

Ich denke ich muß mir ein PSU kaufen oder sonstwo her holen und den ganzen Array draufhängen. Schaut echt zunehmend danach aus...

Bearbeitet von GrandAdmiralThrawn am 19.11.2015, 22:01

Cobase

Mr. RAM

Registered: Jun 2001
Location: Linz
Posts: 17885

19.11.2015 - 22:19

Gibt es überhaupt ein NT mit so vielen SATA-Steckern? Mehr als 20 SATA-Stecker wären mir noch nicht untergekommen.

GrandAdmiralThrawn

XP Nazi

Registered: Aug 2000
Location: BRUCK!
Posts: 3682

19.11.2015 - 22:35

Die SAS Bays ham 4P Molex Stecker... Trotzdem gehts nicht, weil die Buchsen am Netzteil selbst alle sind..

Valera

Here to stay

Registered: Dec 2005
Location: Mint
Posts: 683

19.11.2015 - 23:59

ad Geld: Ist eh klar, dass die Finanzierung geplant und durchdacht war/ist. Ist ja jetzt auch nicht besonders krank, (fast) jeder Neuwagenkauf verbrennt mehr Geld im ersten Jahr. Einer unserer Server in der Firma hat 24 Bays, gibt auch welche mit 48.. Siehe zB Backblaze: https://www.backblaze.com/blog/cloud-storage-hardware/ Sind halt für "weniger" Speed ausgelegt.
Krank ist das halt max. für den privaten Bedarf, aber ich hab ZB privat 2TB Daten in der Cloud. Auch nicht normal.

ad Stecker: Natürlich gibts keine Netzteile mit so vielen Steckern aber er hat ja SAS Bays. Selbst das geht sich nicht aus.

Ad Ausfälle: Was mich wundert sind die Ausfälle. Hab mir mal die techn. Daten vom Netzteil angesehen:
+5V 30A
+12V 100A
Eine 3.5" HDD zieht durchschnittlich kaum mehr als 1A pro Spannung. Das sollte sich eigentlich lockerst ausgehen? Hast du sonst noch irgendwelche abnormen Verbraucher?

Ich denke das liegt eher an schlechten Kabelverbindungen - Wackelkontakte? Ist das möglich/geprüft?

edit: Was ich krank finde ist das modden der Bays mit dem feinen Gitter. Ich hätte das pragmatischer gelöst und einfach den Luftstrom umgedreht. Also durch mehrere Lüfter mit Eintrittsfilter und Abdichtung der "einfachen" Löcher einen Überdruck im Gehäuse erzeugt, so das die Luft bei den Bays rauströmen muss. Damit kann kein Staub rein außer bei den Eintrittsfilter. Das ist gängige Vorgangsweise bei E-Schränken in der Industrie.

Bearbeitet von Valera am 20.11.2015, 00:13

GrandAdmiralThrawn

XP Nazi

Registered: Aug 2000
Location: BRUCK!
Posts: 3682

20.11.2015 - 07:42

Das Netzteil wurde extra für dieses Storage ausgewählt, um auch genug +5V Power zu haben, +12V reichen sowieso. Auch, weil mein altes Netzteil sowieso verreckt ist. Noch dazu ist das ein Corsair AX1200i mit Innenleben von Flextronics, viel besser geht's dann schon oft nicht mehr...

Die Y-Stecker die ich nutze hatte ich schon Mal durchgetauscht. Danach hat sich das Verhalten (so will ich meinen es wahrgenommen zu haben) gebessert. Aber jetzt, wo ich die halben Y-Stecker rausgerissen und 2 der Bays per Extra-PSU angeschlossen habe scheints erst richtig stabil geworden zu sein.

Ich will's wie gesagt noch nicht verschreien, etwas definitiveres traue ich mich erst nach tagelangen Tests zu sagen, aber es beginnt danach auszuschaun, als wären's wirklich die 4p Molexweichen gewesen... für's erste.

@Lüftung: Recht hast, hatte ich mir auch überlegt. Aber so wie mein Platzangebot ist, hatte ich Angst daß mich der Rechner dann permanent anbläst, daher hab ich das sein lassen. Klingt nach einem dämlichen Grund, ist aber echt so. :rolleyes:

Für Überdruck hätte ich noch die 140er oben drehen müssen, wollte ich aber auch ned, dann hätt ich oben noch ultrafeine Filter reinpfuschen müssen, weil das was LianLi da reingibt is ja für die Fisch, so grobmaschig. Aber jo, kann man sich schon auch noch überlegen letzten Endes.. Mal schaun.

Umlüx

Huge Metal Fan

Registered: Jun 2001
Location: Kärnten
Posts: 8902

20.11.2015 - 08:00

@lüftung
wenn die 80er schon probleme damit haben luft direkt durch die bays reinzuziehen, dann kannst aber imho gar nicht soviel überdruck im gehäuse haben damits gerade dort auch gescheit rausföhnt? wenn da echt so wenig platz zwischen bay wänden und disks ist, wird dir die luft eher durch sämtliche andere ritzen entfleuchen.

schizo

Produkt der Gesellschaft

Registered: Feb 2003
Location: Vienna
Posts: 2493

20.11.2015 - 17:41

Ich kann mir auch ned vorstellen, dass es am NT liegt. Von der Stärke her sollts auf jeden Fall ausreichen.
Mein ESXi (1*Xeon 1230, 16HDDs, 2 SSDs und Testweise eine HD7950) rennt problemlos mit nem LC-Power 8850II und dessen Qualität ist vermutlich doch etwas unter deinem Corsair. Vom Stromverbrauch dürft das Setup ähnlich wie deines sein.

$yrus

Freizeitjunkie

Registered: Nov 2003
Location: Bundeshauptstadt
Posts: 1167

20.11.2015 - 18:33

Liegt ja vermutlich nicht am NT sondern an den Y-Steckern wegen zu wenig Anschlüssen für beide Arrays

GrandAdmiralThrawn

XP Nazi

Registered: Aug 2000
Location: BRUCK!
Posts: 3682

20.11.2015 - 21:14

OK!!!

Ich möchte hiermit ankündigen, daß ich der Allergeilste auf dem Planeten bin!!!11

Ich steh so auf, und denk mir, jo, ich hol mir ein Bier! Stolper ich ned übers Stromkabel am Boden, voll auf die Schnauze. Dreh ich mich so um und seh... 50% vom RAID haben irgendwie KEINE Elektrizität mehr! Stecker rausgerissen.. awhwhuawuah... soviel zum dedizierten PSU...

Zum Schaden auch noch die eigene Blödheit! Das brauchst! :bash:

Der Storage Admin Pr0! :rolleyes:

schizo Produkt der Gesellschaft Registered: Feb 2003 Location: Vienna Posts: 2493	19.11.2015 - 15:06 Zitat von Umlüx ich wär bei meinem schon zufrieden, wenn die mail benachrichtigungen im 3DM2 noch funktionieren würden.... Also bei mir haut das Mail Alerting (3DM2 version 2.11.00.016, API version 2.08.00.017) problemlos mittels SSL hin. Ich hab aber auch ziemlich bald, nachdem ich das erste mal das Webinterface eines Areca Controllers gesehen hab bereut, dass mir die 100€ Aufpreis dafür zu viel waren. Ansonsten: ein nettes Raid hast du da mal wieder
Umlüx Huge Metal Fan Registered: Jun 2001 Location: Kärnten Posts: 8902	19.11.2015 - 15:25 ah. ich bin anscheinend ein bisschen hinten.. wo kriegt man jetzt eigentlich noch eine aktuelle version her? edit: gefunden... nicht grad einfach nach der Xten übernahme.. edit2: geht bei mir leider immer noch nicht. schade Bearbeitet von Umlüx am 19.11.2015, 16:13
hctuB Bloody Newbie Registered: Feb 2002 Location: Pampa LL Posts: 2391	19.11.2015 - 16:00 Das interface ist noch so hässlich wie vor 4 Jahren cooles teil bin froh das ich die Zeit hinter mir habe, als ich soviel in Hardware investiert habe
wergor connoisseur de mimi Registered: Jul 2005 Location: graz Posts: 4027	19.11.2015 - 16:45 ich würde musik auch eher in einem lossless format speichern (mache ich btw auch) als nur ISOs zu machen. ob man beim kopieren auf einen player jetzt die iso ripped oder die z.b. flac files konvertiert macht nicht viel unterschied imho.
GrandAdmiralThrawn XP Nazi Registered: Aug 2000 Location: BRUCK! Posts: 3682	19.11.2015 - 17:32 Und da hats schon geknallt, Array im Init noch degraded, war's ihm doch Mal zu dumm. Ich hab das Gefühl ich sollt die Disks Mal testweise an ein separates Netzteil hängen... Edit: 3 Disks weg, Array broken... Bah, das wird noch eine Sau*****e deluxe werden... Edit 2*: Kabarett ist eröffnet! Controllerfirmware nicht mehr hochgekommen (heißt er läßt die Maschine ned mehr booten!), viel rumprobiert, Fazit: Ohne FBM gehts wieder. wtf?! Mal das halbe RAID auf ein dediziertes Netzteil umgehängt. Initialisier ma halt nochmal von vorne, geht eh um nix!! olololo (Ich reiß jetzt ein Bier oder 3-4 auf, sonst pack ich das ned mehr, rofl) Bearbeitet von GrandAdmiralThrawn am 19.11.2015, 18:48*
Valera Here to stay Registered: Dec 2005 Location: Mint Posts: 683	19.11.2015 - 21:51 Gerade habe ich GATs Kotenabschätzung meiner Frau gezeigt: Schau mal Schatz, ich bin garnicht soo verrückt! Mach ma jetzt die Servererweiterung?" Die Reaktion entpricht am ehesten den Rolleyes Smiley:
GrandAdmiralThrawn XP Nazi Registered: Aug 2000 Location: BRUCK! Posts: 3682	19.11.2015 - 21:58 Ich muß dazu jetzt Mal was sagen - also zur Finanzierung - klar ist das krank, aber es is ja ned so, daß ich da einfach irgendwas mache. Dieser Bau ist jahrelang geplant, und über 3-4 Jahre wurde das entsprechende Budget so nebenher aufgebaut. Nennen wir das Mal "außerordentlichen Haushalt". Der deckt das ab, fertig. Man muß derartigen Irrsinn ja ned von dem Geld bezahlen, das zum eigentlichen Leben da ist. Ich hab's auch immer so gehalten: Wenn nicht genug Kohle zum "Kernpuffer" extra da ist, dann wird eben NICHTS gekauft, Ende, aus. Aber najo, es scheint mir (ich will's echt noch ned verschreien) tatsächlich so zu sein, daß ein paar 1€ Teile - namentlich Y-Kabel - einen 8000€ RAID Array weggefickt haben. Also sicher ist das bei weitem noch ned. Aber nach Umhängen des halben Arrays auf ein dediziertes Netzteil schaut das irgendwie alles weit besser aus. Leider haben jetzt mehr als die Hälfte der Disks schon nette Recoverable Read- und Write-Errors im SMART Log deswegen. Tlw. über 50 an der Zahl. So ein Dreck. Ich denke ich muß mir ein PSU kaufen oder sonstwo her holen und den ganzen Array draufhängen. Schaut echt zunehmend danach aus... Bearbeitet von GrandAdmiralThrawn am 19.11.2015, 22:01
Cobase Mr. RAM Registered: Jun 2001 Location: Linz Posts: 17885	19.11.2015 - 22:19 Gibt es überhaupt ein NT mit so vielen SATA-Steckern? Mehr als 20 SATA-Stecker wären mir noch nicht untergekommen.
GrandAdmiralThrawn XP Nazi Registered: Aug 2000 Location: BRUCK! Posts: 3682	19.11.2015 - 22:35 Die SAS Bays ham 4P Molex Stecker... Trotzdem gehts nicht, weil die Buchsen am Netzteil selbst alle sind..
Valera Here to stay Registered: Dec 2005 Location: Mint Posts: 683	19.11.2015 - 23:59 ad Geld: Ist eh klar, dass die Finanzierung geplant und durchdacht war/ist. Ist ja jetzt auch nicht besonders krank, (fast) jeder Neuwagenkauf verbrennt mehr Geld im ersten Jahr. Einer unserer Server in der Firma hat 24 Bays, gibt auch welche mit 48.. Siehe zB Backblaze: https://www.backblaze.com/blog/cloud-storage-hardware/ Sind halt für "weniger" Speed ausgelegt. Krank ist das halt max. für den privaten Bedarf, aber ich hab ZB privat 2TB Daten in der Cloud. Auch nicht normal. ad Stecker: Natürlich gibts keine Netzteile mit so vielen Steckern aber er hat ja SAS Bays. Selbst das geht sich nicht aus. Ad Ausfälle: Was mich wundert sind die Ausfälle. Hab mir mal die techn. Daten vom Netzteil angesehen: +5V 30A +12V 100A Eine 3.5" HDD zieht durchschnittlich kaum mehr als 1A pro Spannung. Das sollte sich eigentlich lockerst ausgehen? Hast du sonst noch irgendwelche abnormen Verbraucher? Ich denke das liegt eher an schlechten Kabelverbindungen - Wackelkontakte? Ist das möglich/geprüft? edit: Was ich krank finde ist das modden der Bays mit dem feinen Gitter. Ich hätte das pragmatischer gelöst und einfach den Luftstrom umgedreht. Also durch mehrere Lüfter mit Eintrittsfilter und Abdichtung der "einfachen" Löcher einen Überdruck im Gehäuse erzeugt, so das die Luft bei den Bays rauströmen muss. Damit kann kein Staub rein außer bei den Eintrittsfilter. Das ist gängige Vorgangsweise bei E-Schränken in der Industrie. Bearbeitet von Valera am 20.11.2015, 00:13
GrandAdmiralThrawn XP Nazi Registered: Aug 2000 Location: BRUCK! Posts: 3682	20.11.2015 - 07:42 Das Netzteil wurde extra für dieses Storage ausgewählt, um auch genug +5V Power zu haben, +12V reichen sowieso. Auch, weil mein altes Netzteil sowieso verreckt ist. Noch dazu ist das ein Corsair AX1200i mit Innenleben von Flextronics, viel besser geht's dann schon oft nicht mehr... Die Y-Stecker die ich nutze hatte ich schon Mal durchgetauscht. Danach hat sich das Verhalten (so will ich meinen es wahrgenommen zu haben) gebessert. Aber jetzt, wo ich die halben Y-Stecker rausgerissen und 2 der Bays per Extra-PSU angeschlossen habe scheints erst richtig stabil geworden zu sein. Ich will's wie gesagt noch nicht verschreien, etwas definitiveres traue ich mich erst nach tagelangen Tests zu sagen, aber es beginnt danach auszuschaun, als wären's wirklich die 4p Molexweichen gewesen... für's erste. @Lüftung: Recht hast, hatte ich mir auch überlegt. Aber so wie mein Platzangebot ist, hatte ich Angst daß mich der Rechner dann permanent anbläst, daher hab ich das sein lassen. Klingt nach einem dämlichen Grund, ist aber echt so. Für Überdruck hätte ich noch die 140er oben drehen müssen, wollte ich aber auch ned, dann hätt ich oben noch ultrafeine Filter reinpfuschen müssen, weil das was LianLi da reingibt is ja für die Fisch, so grobmaschig. Aber jo, kann man sich schon auch noch überlegen letzten Endes.. Mal schaun.
Umlüx Huge Metal Fan Registered: Jun 2001 Location: Kärnten Posts: 8902	20.11.2015 - 08:00 @lüftung wenn die 80er schon probleme damit haben luft direkt durch die bays reinzuziehen, dann kannst aber imho gar nicht soviel überdruck im gehäuse haben damits gerade dort auch gescheit rausföhnt? wenn da echt so wenig platz zwischen bay wänden und disks ist, wird dir die luft eher durch sämtliche andere ritzen entfleuchen.
schizo Produkt der Gesellschaft Registered: Feb 2003 Location: Vienna Posts: 2493	20.11.2015 - 17:41 Ich kann mir auch ned vorstellen, dass es am NT liegt. Von der Stärke her sollts auf jeden Fall ausreichen. Mein ESXi (1*Xeon 1230, 16HDDs, 2 SSDs und Testweise eine HD7950) rennt problemlos mit nem LC-Power 8850II und dessen Qualität ist vermutlich doch etwas unter deinem Corsair. Vom Stromverbrauch dürft das Setup ähnlich wie deines sein.
$yrus Freizeitjunkie Registered: Nov 2003 Location: Bundeshauptstadt Posts: 1167	20.11.2015 - 18:33 Liegt ja vermutlich nicht am NT sondern an den Y-Steckern wegen zu wenig Anschlüssen für beide Arrays
GrandAdmiralThrawn XP Nazi Registered: Aug 2000 Location: BRUCK! Posts: 3682	20.11.2015 - 21:14 OK!!! Ich möchte hiermit ankündigen, daß ich der Allergeilste auf dem Planeten bin!!!11 Ich steh so auf, und denk mir, jo, ich hol mir ein Bier! Stolper ich ned übers Stromkabel am Boden, voll auf die Schnauze. Dreh ich mich so um und seh... 50% vom RAID haben irgendwie KEINE Elektrizität mehr! Stecker rausgerissen.. awhwhuawuah... soviel zum dedizierten PSU... Zum Schaden auch noch die eigene Blödheit! Das brauchst! Der Storage Admin Pr0!

"Taranis" RAID-6 Array: 54.5TB (War: "Helios" RAID-6: 5.45TB + Update auf ~11TB)

Forum Index > Hardware > Komponenten > Storage & Memory

schizo

Umlüx

hctuB

wergor

GrandAdmiralThrawn

Valera

GrandAdmiralThrawn

Cobase

GrandAdmiralThrawn

Valera

GrandAdmiralThrawn

Umlüx

schizo

$yrus

GrandAdmiralThrawn