FreeNAS als Backup (was: mSATA oder SATA als externe Platte)

[Marc Stibane]

Ich leite mal passend um, deswegen auch full-quote

Dennoch würde mich geballte Information, wie ein Nicht-Profi einen
Server mit vielleicht ECC, ZFS, etc. installiert, doch
interessieren.

Ich (Software-Entwickler, kein Admin) habe das gerade hinter mir.
Einen HP N54L Microserver (200€) mit 8GB ECC RAM (60€) und ein paar
Kabeln (ca. 40€) versehen, sechs 4TB-Platten angeschlossen und ein
FreeNAS 9.3 (free) auf zwei USB-Sticks (lagen noch rum) installiert.
Ergebnis sind 16TB netto als ZFS raidz2, es können also bis zu 2
Platten (und/oder 1 USB-Stick) ohne Datenverlust ausfallen.
Habe etliches dazu seit 12/2014 (nebenan)hier in d.c.s.m.lokale-netze
geschrieben - schau einfach mal durch (soviel Traffic ist (da)hier ja
nicht).

Ja, danke! Das werde ich beizeiten mal tun. Hast du vielleich einen
Link, wo das ganze procedere mal auf so ca. 10 Seiten (1 Seite für mich
zu wenig, 100 Seiten zuviel :-) ) beschrieben steht?

Einen leider nicht, eher 3 Dutzend...
Ich habe mir etliches zusammensuchen müssen, weil ich 6 Platten
anschließen wollte, per default das N54L-BIOS aber nur 4 Ports für
Platten vorsieht. Ich musste also erst das BIOS patchen - und das
Patchprogramm läuft natürlich unter Windows, sowas habe ich nicht.
Des weiteren habe ich den zpool zweimal erweitert - weil ich nicht sechs
leere Platten hatte, sondern Stück für Stück die Daten umziehen musste.
Ist alles hier (*) nachlesbar...

Insbesondere würden mich Details bzgl. des Backups der NAS-Daten
interessieren

Der N54L mit sechs 4TB-Platten (24TB brutto, 16TB netto) *ist* mein
Backup - mein primäres NAS welches hier 24/7 durchläuft ist ein ReadyNAS
Duo mit zwei 8TB-Platten (Seagate Archive) mit ebenfalls 16TB netto
(ohne Redundanz, wenn eine der beiden Platten ausfällt ist alles weg) -
das braucht viel weniger Strom.

und wie das im einzelnen mit den Berechtigungen geregelt ist.

User einrichten, fertig.

Kennt jemand eine passende newsgroup, wo ich damit nicht so
off-topic wäre?

(*) Hier ;-) (X-Post und F'up passend gesetzt)

[Joe Kotroczo]

Post by Marc Stibane
Ich leite mal passend um, deswegen auch full-quote

Dennoch würde mich geballte Information, wie ein Nicht-Profi einen
Server mit vielleicht ECC, ZFS, etc. installiert, doch
interessieren.

Ich (Software-Entwickler, kein Admin) habe das gerade hinter mir.
Einen HP N54L Microserver (200€) mit 8GB ECC RAM (60€) und ein paar
Kabeln (ca. 40€) versehen, sechs 4TB-Platten angeschlossen und ein
FreeNAS 9.3 (free) auf zwei USB-Sticks (lagen noch rum) installiert.
Ergebnis sind 16TB netto als ZFS raidz2, es können also bis zu 2
Platten (und/oder 1 USB-Stick) ohne Datenverlust ausfallen.
Habe etliches dazu seit 12/2014 (nebenan)hier in d.c.s.m.lokale-netze
geschrieben - schau einfach mal durch (soviel Traffic ist (da)hier ja
nicht).

Ja, danke! Das werde ich beizeiten mal tun. Hast du vielleich einen
Link, wo das ganze procedere mal auf so ca. 10 Seiten (1 Seite für mich
zu wenig, 100 Seiten zuviel :-) ) beschrieben steht?

Einen leider nicht, eher 3 Dutzend...

Hier wäre auch Interesse vorhanden. Ich hatte es vor Jahren mal
versucht, unter FreeNAS 0.7 (?) auch mal was ans Laufen bekommen, dann
seltsame Fehlermeldungen wegen CNIDs, dann unter einer 8er-Version
nochmal versucht und da bereits am Einrichten gescheitert. Wäre mal
wieder Zeit für einen Versuch.

[Marc Stibane]

Post by Joe Kotroczo

Post by Marc Stibane

Ich (Software-Entwickler, kein Admin) habe das gerade hinter mir.
Einen HP N54L Microserver (200€) mit 8GB ECC RAM (60€) und ein paar
Kabeln (ca. 40€) versehen, sechs 4TB-Platten angeschlossen und ein
FreeNAS 9.3 (free) auf zwei USB-Sticks (lagen noch rum)
installiert. Ergebnis sind 16TB netto als ZFS raidz2, es können
also bis zu 2 Platten (und/oder 1 USB-Stick) ohne Datenverlust
ausfallen.

Hast du vielleich einen Link, wo das ganze procedere mal auf so ca.
10 Seiten beschrieben steht?

Einen leider nicht, eher 3 Dutzend...

Hier wäre auch Interesse vorhanden. Ich hatte es vor Jahren mal
versucht, unter FreeNAS 0.7 (?) auch mal was ans Laufen bekommen, dann
seltsame Fehlermeldungen wegen CNIDs, dann unter einer 8er-Version
nochmal versucht und da bereits am Einrichten gescheitert. Wäre mal
wieder Zeit für einen Versuch.

Ist eigentlich gar nicht schwer, wenn man sich entweder auf 5 Platten
beschränkt (spart die Kabelage, nicht aber das BIOS-Flashen) oder eh mit
den vier Platten-Trays auskommt (auspacken, einschalten, geht).

Man muss lediglich den FreeNAS 9.3 Boot-USB-Stick erstellen, was unter
Windows etwas leichter geht als am Mac.

Den N54L (Gen 7, *) bekommt man neu kaum noch, der Nachfolger (HP
Microserver Gen 8, **) hat nur noch 5 SATA Ports.

Die Speed reicht eh aus, in den meisten (sogar deutlich teureren)
Fertig-NAS werden typischerweise noch schwächere Prozessoren verbaut.
Nur kann die CPU kein AES-NI - wenn man die Plattendaten also ohne
Performance-Einbruch verschlüsseln will, braucht man einen Gen 8 mit
Xeon-CPU ***, und der kostet viel Heu.


*) http://geizhals.at/eu/-a878983.html
**) http://geizhals.at/eu/-a962380.html
***) http://geizhals.at/eu/-a1081839.html

[Joe Kotroczo]

Post by Marc Stibane

Post by Joe Kotroczo

Post by Marc Stibane

Ich (Software-Entwickler, kein Admin) habe das gerade hinter mir.
Einen HP N54L Microserver (200€) mit 8GB ECC RAM (60€) und ein paar
Kabeln (ca. 40€) versehen, sechs 4TB-Platten angeschlossen und ein
FreeNAS 9.3 (free) auf zwei USB-Sticks (lagen noch rum)
installiert. Ergebnis sind 16TB netto als ZFS raidz2, es können
also bis zu 2 Platten (und/oder 1 USB-Stick) ohne Datenverlust
ausfallen.

Hast du vielleich einen Link, wo das ganze procedere mal auf so ca.
10 Seiten beschrieben steht?

Einen leider nicht, eher 3 Dutzend...

Hier wäre auch Interesse vorhanden. Ich hatte es vor Jahren mal
versucht, unter FreeNAS 0.7 (?) auch mal was ans Laufen bekommen, dann
seltsame Fehlermeldungen wegen CNIDs, dann unter einer 8er-Version
nochmal versucht und da bereits am Einrichten gescheitert. Wäre mal
wieder Zeit für einen Versuch.

Ist eigentlich gar nicht schwer, wenn man sich entweder auf 5 Platten
beschränkt (spart die Kabelage, nicht aber das BIOS-Flashen) oder eh mit
den vier Platten-Trays auskommt (auspacken, einschalten, geht).
Man muss lediglich den FreeNAS 9.3 Boot-USB-Stick erstellen, was unter
Windows etwas leichter geht als am Mac.
Den N54L (Gen 7, *) bekommt man neu kaum noch, der Nachfolger (HP
Microserver Gen 8, **) hat nur noch 5 SATA Ports.

Einen N36L hätte ich hier rumstehen... 2011 gekauft. 4 Platten müßte ich
mir wieder besorgen.

[Marc Stibane]

Post by Joe Kotroczo
Einen N36L hätte ich hier rumstehen... 2011 gekauft.

der reicht auch...

Post by Joe Kotroczo
4 Platten müßte ich mir wieder besorgen.

... vor allem mit nur 4 Platten. Kein BIOS-Flashen notwendig.

Worauf wartest Du?

[Joe Kotroczo]

Post by Marc Stibane

Post by Joe Kotroczo
Einen N36L hätte ich hier rumstehen... 2011 gekauft.

der reicht auch...

Post by Joe Kotroczo
4 Platten müßte ich mir wieder besorgen.

... vor allem mit nur 4 Platten. Kein BIOS-Flashen notwendig.
Worauf wartest Du?

Hab's gerade testweise mit nur 1 Platte versucht. Installation
gescheitert. Entweder ich bin zu blöd dafür oder die Doku ist Scheiße.

Zum Nachvollziehen:

.iso auf USB-Stick bügeln mit dd - hat funktioniert.
Gebootet.
Im ersten Menü FreeNAS Installer ausgewählt.
Im zweiten Menü Install/Upgrade ausgewählt.
Im dritten Menü die Wahl zwischen der Platte und dem USB-Stick als
"drive where FreeNAS should be installed", ich nehme an Boot Device.
USB-Stick ausgewählt.
Warnung "this will erase all data on da0" bestätigt.
Passwort ausgewählt.
Dann kommt:
gpart: geom 'da0' : Operation not permitted
dd: /dev/da0: Operation not permitted
The FreeNAS installation on da0 has failed. Press any key to continue..


Ich kann jetzt raten daß das Boot Device nicht identisch mit dem Install
Medium sein darf, steht aber so nicht in der Doku und ich bin mir aber
sicher daß man "früher[tm]" das Image einfach auf den Stick bügeln
konnte und dieser dann das Boot Device war. Hmpf.

Also zweiten Stick kaufen?

[Marc Stibane]

Post by Joe Kotroczo

Post by Marc Stibane
Worauf wartest Du?

Hab's gerade testweise mit nur 1 Platte versucht. Installation
gescheitert. Entweder ich bin zu blöd dafür oder die Doku ist Scheiße.
.iso auf USB-Stick bügeln mit dd - hat funktioniert.
Gebootet.
Im ersten Menü FreeNAS Installer ausgewählt.
Im zweiten Menü Install/Upgrade ausgewählt.
Im dritten Menü die Wahl zwischen der Platte und dem USB-Stick als
"drive where FreeNAS should be installed", ich nehme an Boot Device.
USB-Stick ausgewählt.
Warnung "this will erase all data on da0" bestätigt.
Passwort ausgewählt.
gpart: geom 'da0' : Operation not permitted
dd: /dev/da0: Operation not permitted
The FreeNAS installation on da0 has failed. Press any key to continue..

Na klar. Du kannst nicht das Medium plätten von dem der installer gerade
läuft.

Post by Joe Kotroczo
Ich kann jetzt raten daß das Boot Device nicht identisch mit dem Install
Medium sein darf, steht aber so nicht in der Doku und ich bin mir aber
sicher daß man "früher[tm]" das Image einfach auf den Stick bügeln
konnte und dieser dann das Boot Device war. Hmpf.

Seit 9.2.3 oder .4 kann das Boot-Medium ebenfalls ZFS sein, seit 9.3 ist
das default. Der Installer selber ist aber AFAIK ext3.

==> Das Installer-Image gehört nicht auf den Stick, sondern auf CD
gebrannt. Davon bootest Du und lässt den Stick erstellen.

Post by Joe Kotroczo
Also zweiten Stick kaufen?

Oder so. Oder aber Du mountest das .iso in einer VM, bootest davon eine
virtuelle Maschine und lässt diese den Stick erstellen. So habe ich das
auf meinem Retina-MacBook gemacht, das gar kein opt. LW mehr hat.

[Thomas Kaiser]

Post by Joe Kotroczo
Also zweiten Stick kaufen?

Alternativ SD-Card (hat der N36L 'nen SD-Slot?). Und dann muß das
ISO-Image passend für Stick/SD-Card aufbereitet werden. Siehe

<news:***@phg-online.de>
https://groups.google.com/d/msg/de.comp.sys.mac.misc/Xp3DYv_yOnk/29PD99prgFEJ

Bei zwei Sticks empfiehlt es sich, den, wo's System drauf soll, in den
Microserver zu stecken (falls Du einen neukaufst, drauf achten, dass der
schlank/kurz genug ist) und den, von dem man booten will, hinten
dranzustecken (dann klappt's mit der Boot-Reihenfolge problemlos --
zumindest beim N54L). Und bevor man einen Stick oder 'ne SD-Card nutzt,
vorher einen Gesundheits-/Kapazitätscheck einplanen! Lohnt sich, siehe
ab hier:

<news:***@ID-37099.user.uni-berlin.de>
https://groups.google.com/d/msg/de.comp.sys.mac.lokale-netze/CBbXRwLSV0k/rdwSRBB_gyoJ

Gruss,

Thomas

[Joe Kotroczo]

Post by Thomas Kaiser

Post by Joe Kotroczo
Also zweiten Stick kaufen?

Alternativ SD-Card (hat der N36L 'nen SD-Slot?).

Nein.

Post by Thomas Kaiser
Und dann muß das
ISO-Image passend für Stick/SD-Card aufbereitet werden. Siehe

Eh? Ich hab das hier gemacht:
<http://doc.freenas.org/9.3/freenas_install.html#on-os-x>

Post by Thomas Kaiser
Bei zwei Sticks empfiehlt es sich, den, wo's System drauf soll, in den
Microserver zu stecken (falls Du einen neukaufst, drauf achten, dass der
schlank/kurz genug ist) und den, von dem man booten will, hinten
dranzustecken (dann klappt's mit der Boot-Reihenfolge problemlos --
zumindest beim N54L). Und bevor man einen Stick oder 'ne SD-Card nutzt,
vorher einen Gesundheits-/Kapazitätscheck einplanen! Lohnt sich, siehe
https://groups.google.com/d/msg/de.comp.sys.mac.lokale-netze/CBbXRwLSV0k/rdwSRBB_gyoJ

Grad gemerkt daß ich XCode auf diesem MBP nicht installiert habe. Mal
schauen ob ich F3 kompiliert bekomme nachdem ich's installiert habe.

[Thomas Kaiser]

Post by Joe Kotroczo

Und dann muß das ISO-Image passend für Stick/SD-Card aufbereitet
werden. Siehe

<http://doc.freenas.org/9.3/freenas_install.html#on-os-x>

Aha, also der Terz mit Image-Wandlung gar nicht nötig. Keine Ahnung, was
mich da drauf gebracht hat, das zu glauben. Aber ich muß mich dann wohl
mal in der Vergangenheit zu doof angestellt haben, ISO-Images für "CDs"
auf USB-Stick zu bügeln.

[F3]

Post by Joe Kotroczo
Grad gemerkt daß ich XCode auf diesem MBP nicht installiert habe. Mal
schauen ob ich F3 kompiliert bekomme nachdem ich's installiert habe.

Wenn Du mir vertraust:

http://kaiser-edv.de/tmp/JcyTCE/f3-osx-10.9.tgz
(MD5 f3-osx-10.9.tgz: 4a446dc5e9548f48688307ea847a4a35)

Grad gebaut, null getestet.

Gruss,

Thomas

[Joe Kotroczo]

Post by Thomas Kaiser

Post by Joe Kotroczo

Und dann muß das ISO-Image passend für Stick/SD-Card aufbereitet
werden. Siehe

<http://doc.freenas.org/9.3/freenas_install.html#on-os-x>

Aha, also der Terz mit Image-Wandlung gar nicht nötig. Keine Ahnung, was
mich da drauf gebracht hat, das zu glauben. Aber ich muß mich dann wohl
mal in der Vergangenheit zu doof angestellt haben, ISO-Images für "CDs"
auf USB-Stick zu bügeln.
[F3]

Post by Joe Kotroczo
Grad gemerkt daß ich XCode auf diesem MBP nicht installiert habe. Mal
schauen ob ich F3 kompiliert bekomme nachdem ich's installiert habe.

http://kaiser-edv.de/tmp/JcyTCE/f3-osx-10.9.tgz
(MD5 f3-osx-10.9.tgz: 4a446dc5e9548f48688307ea847a4a35)
Grad gebaut, null getestet.

Danke, ich hab's dann noch selbst gebaut bekommen, erstaunlich wie
schnell XCode runterläd wenn man 100Mbit Anschluß hat.

Immerhin weiß ich jetzt welcher der beiden USB Sticks schneller ist. ;-)

[Marc Stibane]

Post by Joe Kotroczo
Immerhin weiß ich jetzt welcher der beiden USB Sticks schneller ist. ;-)

Den nimmst Du für den Installer. Den langsameren dann als Boot-Stick.
FreeNAS schreibt da eh nicht drauf (das System Dataset liegt auf den
Daten-Platten), liest nur einmal beim Booten und läuft danach zum
größten Teil aus dem RAM.

Und anschließend kannst Du den Installer-Stick recyclen.

Wenn Du den Installer stattdessen direkt vom .iso in einer VM bootest,
kannst Du beide Sticks als Boot-Stick bauen, und hättest somit einen in
der Schublade falls der andere ausfällt. Einstecken, reboot, Server
läuft statt erstmal einen neuen Stick besorgen und dann daraus einen
neuen Boot-Stick machen.

Oder aber Du machst es wie ich und lässt FreeNAS selber den Boot-Stick
kopieren, indem Du ein RAID-1 (zraid1) aus dem Boot-Device machst. Dann
läuft der Server sogar weiter wenn einer der beiden USB-Sticks ausfällt.
Neuen besorgen, einstecken, "resilver", und man hat wieder ein RAID-1
ohne downtime.

[Joe Kotroczo]

Post by Thomas Kaiser

Post by Joe Kotroczo

Und dann muß das ISO-Image passend für Stick/SD-Card aufbereitet
werden. Siehe

<http://doc.freenas.org/9.3/freenas_install.html#on-os-x>

Aha, also der Terz mit Image-Wandlung gar nicht nötig. Keine Ahnung, was
mich da drauf gebracht hat, das zu glauben. Aber ich muß mich dann wohl
mal in der Vergangenheit zu doof angestellt haben, ISO-Images für "CDs"
auf USB-Stick zu bügeln.
[F3]

Post by Joe Kotroczo
Grad gemerkt daß ich XCode auf diesem MBP nicht installiert habe. Mal
schauen ob ich F3 kompiliert bekomme nachdem ich's installiert habe.

http://kaiser-edv.de/tmp/JcyTCE/f3-osx-10.9.tgz
(MD5 f3-osx-10.9.tgz: 4a446dc5e9548f48688307ea847a4a35)
Grad gebaut, null getestet.

Jetzt eine dumme Frage meinerseits: wohin legt man sich sowas nachdem
man es gebaut hat? usr/local/bin?

Danke,
Joe

[Thomas Kaiser]

Post by Joe Kotroczo

Post by Thomas Kaiser
[F3]

Post by Joe Kotroczo
Grad gemerkt daß ich XCode auf diesem MBP nicht installiert habe. Mal
schauen ob ich F3 kompiliert bekomme nachdem ich's installiert habe.

http://kaiser-edv.de/tmp/JcyTCE/f3-osx-10.9.tgz
(MD5 f3-osx-10.9.tgz: 4a446dc5e9548f48688307ea847a4a35)
Grad gebaut, null getestet.

Jetzt eine dumme Frage meinerseits: wohin legt man sich sowas nachdem
man es gebaut hat? usr/local/bin?

Zum Beispiel. Ist ein guter Ort, da per Definition/Tradition für eigene
Binaries gedacht. Auf Multi-User-Systemen. Du kannst Dir auch in Dein
Homedir ein Verzeichnis bin legen und die Sachen dort reinwerfen.

Wichtig ist eigentlich nur, dass dieses Verzeichnis mit im $PATH ist,
also dem Ort, wo per default nach Binaries geguckt wird. Drum steht bei
mir in /etc/bashrc

export PATH=${PATH}:/usr/local/bin:/usr/local/helios/bin

(Helios brauchst Du garantiert nicht ;-)

Würdest Du das hingegen in Deinem Homedir verstauen, gehört in die dort
liegende (ggf. anzulegende) bashrc dann eben:

export PATH=${PATH}:${HOME}/bin

Aber der erste Ansatz ist universeller. Und in die bashrc kann man dann
bei entsprechender CLI-Affinität noch weitere Leckerli aufnehmen, bspw.:

alias ls="ls -G"
alias photoshop="open -a /Applications/Adobe\ Photoshop\ CC\ 2014/Adobe\ Photoshop\ CC\ 2014.app"
declare -x PROMPT_COMMAND='echo -n -e "\033]0;$HOSTNAME (${USER}): $PWD\007"'

(Ersteres macht bunte Verzeichnislistings, zweiteres öffnet aus dem
Terminal Dateien in Photoshop, Letzteres sorgt dafür, dass man
Terminal-Fenster leichter auseinanderhalten kann, weil die dann Infos in
der Titelzeile haben). Ist aber alles Kür bzw. reichlich sinnlos, wenn
man nicht andauernd in der Shell unterwegs ist.

Gruss,

Thomas

[Joe Kotroczo]

On 08/05/2015 11:17, Thomas Kaiser wrote:

(...)

Post by Thomas Kaiser
Wichtig ist eigentlich nur, dass dieses Verzeichnis mit im $PATH ist,
also dem Ort, wo per default nach Binaries geguckt wird. Drum steht bei
mir in /etc/bashrc
export PATH=${PATH}:/usr/local/bin:/usr/local/helios/bin

Noch eine dumme Frage: wie editiert man eigentlich bashrc? TextEdit sagt
mir "You don’t own the file “bashrc” and don’t have permission to write
to it." ;-)

[Marc Stibane]

Post by Joe Kotroczo
Noch eine dumme Frage: wie editiert man eigentlich bashrc? TextEdit sagt
mir "You don't own the file "bashrc" and don't have permission to write
to it." ;-)

Terminal.

nano /etc/bashrc

Das ist aber die "globale" Einstellungsdatei - in Deinem Home-Folder
gibt es noch die lokale .bash_profile.

nano ~/.bash_profile

Schau Dir beide an...

[Thomas Kaiser]

Post by Marc Stibane
Ich habe mir etliches zusammensuchen müssen, weil ich 6 Platten
anschließen wollte, per default das N54L-BIOS aber nur 4 Ports für
Platten vorsieht.

Wenn man das nicht will (bspw. weil man ein Setup haben mag, dass man im
Notfall an egal welchem Normal-PC sofort wieder zum Fliegen kriegt,
falls der HP Microserver sterben sollte), dann hat man damit aber genau
gar keinen Aufwand.

Post by Marc Stibane
Des weiteren habe ich den zpool zweimal erweitert - weil ich nicht
sechs leere Platten hatte, sondern Stück für Stück die Daten umziehen
musste. Ist alles hier (*) nachlesbar...

Und auch das fällt weg, wenn man bei Null bzw. frisch startet. Zumindest
mit FreeNAS 9.3 ist das Ganze eher ein Spaziergang denn Spezialaufgabe.

Post by Marc Stibane

und wie das im einzelnen mit den Berechtigungen geregelt ist.

User einrichten, fertig.

Und die, die gemeinsam an Daten arbeiten sollen, in jeweils eine Gruppe
werfen und bei den Share-Optionen eben alle Dateien dieser Gruppe
zuweisen. Für kleine bzw. wenig komplexe Rechteszenarien ist das alles
recht simpel.

Gruss,

Thomas