Home Server - ιδέες και ανυσυχίες

[patch]

μιλάς για δυο σερβερ; εαν ναι το zfs send recv δεν κανει;

[megahead13]

μιλάς για δυο σερβερ; εαν ναι το zfs send recv δεν κανει;

Δες τα προηγούμενα δύο μηνύματά μου (στο τελευταίο έκανα edit και πρόσθεσα πληροφορίες). To zfs send/recv κάνει (το pve-zsync στην ουσία αυτό χρησιμοποιεί), αλλά με το PBS είναι πιο αυτοματοποιημένη η όλη διαδικασία. Το pve-zsync πρέπει να το τρέχεις για κάθε VM, εκτός αν φτιάξεις ένα script και το έχεις στο cron. Κι επειδή βαριόμουν και επειδή όταν έχει κάνει κάποιος άλλος τη δουλειά για μένα δεν κάθομαι να ξαναεφεύρω τον τροχό, έστησα το PBS

[kiriakk]

Παντού ZFS O server μου έχει 4x τετράδες δίσκων. Οι 3x πρώτες ελέγχονται μέσω του OMV και του LSI SAS9207-8i (που κάνω passthrough στο OMV VM) συν ένα Intel RES2SV240 port expander. Οι δίσκοι εδώ είναι 3TB και έχω σετάρει ZFS RAIDZ2 pool (== RAID6) με ένα hot spare.

Η τελευταία τετράδα δίσκων ελέγχεται από την onboard LSI SAS3008 που την έχω γυρίσει σε IT mode, ενώ εδώ τρέχω ένα pool striped mirror (== RAID10) με 2TB δίσκους. Αυτό το pool είναι το datastore για το Proxmox.

To Proxmox τρέχει σε ένα ZFS mirror (== RAID1) με 2x Intel 128GB SSDs στα SATA ports της μητρικής.

H μητρική είναι μία Supermicro X10SRH-CLN4F με έναν Intel Xeon E5-2630L v3 @ 1.80GHz και 64GB ECC DDR4 RAM. Το κουτί είναι αυτό.

ωραία πράματα

[megahead13]

ωραία πράματα

Άσε, έχω βρει τη χαρά μου με το παιχνίδι μου!

Τις τελευταίες μέρες ασχολούμαι με το monitoring αυτών που έχω εγκαταστήσει από πέρσι ήδη. Τελικά έβαλα LibreNMS, αντί για Zabbix που έλεγα. Πολύ καλή λύση που στήνεται αρκετά εύκολα θα έλεγα για όποιον έχει μια σχετική εμπειρία με Linux και monitoring. Πιστεύω ότι είναι κάπως αρνητικό ότι τα περισσότερα, αν όχι όλα, από τα extensions/plugins στηρίζονται σε SNMP extends με scripts (ποτέ δεν ξέρεις τι μπορεί να σπάσει αν πχ κάτι αλλάξει στο output του hddtemp ή του SMART του host που κάνεις monitor, οπότε θα πρέπει να ρυθμίσεις ανάλογα και τα grep μέσα στο script), αντί για API calls ή κάτι αντίστοιχο.

Γενικά όμως πολύ καλό. Μου αρέσει που έχει integration με το Smokeping κι έτσι μπορώ να βλέπω ανά πάσα στιγμή αν η σύνδεσή μου στο Internet έχει πρόβλημα. Ρύθμισα και το Proxmox να στέλνει metrics σε InfluxDB με frontend για τα γραφήματα το Grafana. Και τέλος έτσι για την πλάκα έβαλα και PagerDuty για να με καλεί στο τηλέφωνο σε περίπτωση προβλήματος (εκτός από τα email alerts). To PagerDuty είναι δωρεάν για μέχρι 5 χρήστες

Τα τελευταία που θέλω να κάνω είναι να σετάρω syslog και Graylog, όπως και να ρυθμίσω να κλείνουν όλα όταν σε περίπτωση διακοπής ρεύματος, η μπαταρία του UPS μείνει στο τελευταίο πχ 5-10%.

Κάποια στιγμή θέλω να ανεβάσω φωτό στο homelab subreddit (έχει κάτι τρελαμένους εκεί μέσα που έχουν κάνει τα σπίτια τους μικρά data centre, πχ 1, 2 ), οπότε θα ποστάρω κι εδώ

ΥΓ Πριν από λίγο είδα ότι μόλις σήμερα βγήκε Proxmox 6.3 με αρκετές βελτιώσεις Release notes εδώ. Θα αφήσω 1-2 μήνες πριν κάνω το update. Να βρουν όλα τα bugs πρώτα τα guinea pigs στο forum του Proxmox και μετά

[badweed]

μια πολυ συμπαθητικη και οικονομικη προταση για nas συναντησα ,το ODROID-HC4



- - - Updated - - -

και ενα screenshot , απο το unraid που δοκιμαζω απο τον νοεμβρη .


τα εγραψα και αλλου , αλλα ας περιγραψω λιγο τι μου αρεσε ,
μου αρεσε ο τροπος που χρησιμοποιει τους δισκους για ασφαλεια , με εναν δισκο να αποτελει το parity bit κατα καποιο τροπο , των δεδομενων των αλλων δισκων ετσι ωστε αν ενας δισκος χαλασει , οσους και αν εχει απο τους μεχρι 24 δισκους που παιρνει , να μπορει να το επαναφερει τα δεδομενα , ακομη και αν τον αφαιρεσουμε και τοποθετησουμε εναν αλλον στην θεση του . με περισσοτερους parity νομιζω μπορει να επαναφερει και περισσοτερους δισκους της συστοιχιας.
επισης ,αρκετα σημαντικο , οι δισκοι δεν χρειαζεται να ειναι της ιδιας χωρητικοτητας
και παιρνει και δισκους ως cache που μπορει να μπει ενας ssd , για αμεσοτητα ανταποκρισης στις παγιες δικτυακες λειτουργιας , αλλα και για να μην χρειαζεται να "ξυπνανε" οι δισκοι του array για καθε περιηγηση στον σερβερ

επισης το κυριοτερο που με ενδιεφερε , και ηθελα να το κανω εδω και καμποσα χρονια , ειναι το virtualization , να μπορω να εχω hardware στον σερβερ , που να το αξιοποιω σε μηχανηματα που δεν ειναι ικανα για gaming παραδειγματος χαριν .
δηλαδη να του βαλω μια καλη καρτα και να μπορω να παιξω , ενα παιχνιδι απο εναν κομπιουτερ που εχω στην τηλεοραση και δεν εχει αλλη καρτα γραφικων απο αυτην της μητρικης . (δεν το εχω δοκιμασει ακομη αυτο , αλλα θεωρητικα , γινεται)

μετα εχει και τα dockers, που ειναι και αυτα ενας τυπος virualization , με εφαρμογες που αποτελουνται και απο υποτυπωδες αυτονομα λινουξοειδες λειτουργικα συστημα , που αντιμετωπιζονται και σαν ξεχωριστα μηχανηματα δικτυου , αλλα και περιφερειακνω , οπως πχ tvheadend , pihole και αλλα .

[MitsakosGR]

Γνωρίζει κανένας τι παίζει με τα μεταφορικά στα Odroid; Παλαιότερα που είχα παραγγείλει το είχαν στείλει με courier και κατέληξα να πληρώσω 60€ το μηχάνημα και 70€ μεταφορικά και τελωνείο!

[famous-walker]

Γνωρίζει κανένας τι παίζει με τα μεταφορικά στα Odroid; Παλαιότερα που είχα παραγγείλει το είχαν στείλει με courier και κατέληξα να πληρώσω 60€ το μηχάνημα και 70€ μεταφορικά και τελωνείο!

Καλύτερα από κάποιον Ευρωπαϊκό reseller.
πχ https://www.pollin.de/p/odroid-hc4-811266

[megahead13]

μια πολυ συμπαθητικη και οικονομικη προταση για nas συναντησα ,το ODROID-HC4



- - - Updated - - -

και ενα screenshot , απο το unraid που δοκιμαζω απο τον νοεμβρη .


τα εγραψα και αλλου , αλλα ας περιγραψω λιγο τι μου αρεσε ,
μου αρεσε ο τροπος που χρησιμοποιει τους δισκους για ασφαλεια , με εναν δισκο να αποτελει το parity bit κατα καποιο τροπο , των δεδομενων των αλλων δισκων ετσι ωστε αν ενας δισκος χαλασει , οσους και αν εχει απο τους μεχρι 24 δισκους που παιρνει , να μπορει να το επαναφερει τα δεδομενα , ακομη και αν τον αφαιρεσουμε και τοποθετησουμε εναν αλλον στην θεση του . με περισσοτερους parity νομιζω μπορει να επαναφερει και περισσοτερους δισκους της συστοιχιας.
επισης ,αρκετα σημαντικο , οι δισκοι δεν χρειαζεται να ειναι της ιδιας χωρητικοτητας
και παιρνει και δισκους ως cache που μπορει να μπει ενας ssd , για αμεσοτητα ανταποκρισης στις παγιες δικτυακες λειτουργιας , αλλα και για να μην χρειαζεται να "ξυπνανε" οι δισκοι του array για καθε περιηγηση στον σερβερ

επισης το κυριοτερο που με ενδιεφερε , και ηθελα να το κανω εδω και καμποσα χρονια , ειναι το virtualization , να μπορω να εχω hardware στον σερβερ , που να το αξιοποιω σε μηχανηματα που δεν ειναι ικανα για gaming παραδειγματος χαριν .
δηλαδη να του βαλω μια καλη καρτα και να μπορω να παιξω , ενα παιχνιδι απο εναν κομπιουτερ που εχω στην τηλεοραση και δεν εχει αλλη καρτα γραφικων απο αυτην της μητρικης . (δεν το εχω δοκιμασει ακομη αυτο , αλλα θεωρητικα , γινεται)

μετα εχει και τα dockers, που ειναι και αυτα ενας τυπος virualization , με εφαρμογες που αποτελουνται και απο υποτυπωδες αυτονομα λινουξοειδες λειτουργικα συστημα , που αντιμετωπιζονται και σαν ξεχωριστα μηχανηματα δικτυου , αλλα και περιφερειακνω , οπως πχ tvheadend , pihole και αλλα .

Τα περισσότερα από αυτά που λες (VMs, containers/docker, ssd cache, disk redundancy με parity) τα κάνουν όλα τα λειτουργικά τύπου UNRAID (Synology, OpenMediaVault με ZFS, Free/TrueNAS, κτλ) με κάποιο τρόπο. Από αυτά που έχω διαβάσει το σημαντικό με το UNRAID είναι αυτό που έκανα bold. Το μειονέκτημα είναι ότι πρέπει να το αγοράσεις (μικρό η αλήθεια κόστος).

Προσωπικά μετά το ZFS/CoW filesystems δεν κοιτάω αλλού

[badweed]

Τα περισσότερα από αυτά που λες (VMs, containers/docker, ssd cache, disk redundancy με parity) τα κάνουν όλα τα λειτουργικά τύπου UNRAID (Synology, OpenMediaVault με ZFS, Free/TrueNAS, κτλ) με κάποιο τρόπο. Από αυτά που έχω διαβάσει το σημαντικό με το UNRAID είναι αυτό που έκανα bold. Το μειονέκτημα είναι ότι πρέπει να το αγοράσεις (μικρό η αλήθεια κόστος).

Προσωπικά μετά το ZFS/CoW filesystems δεν κοιτάω αλλού

χωρις να εχω δοκιμασει τα αλλα , ψαχνοντας το ομως μεσα απο τις προδιαγραφες τους , το virtualization του unraid εχει την ιδιοτητα να μπορεις να αναθεσεις καποιο φυσικο hardware που εχεις κουμπωσει στον σερβερ , σε ενα εικονικο μηχανημα , ωστε να τρεχει το περιφερειακο στις πληρης δυνατοτητες του .

με τα filesystems , δεν εχω ασχοληθει σε καποιο βαθος ωστε να αποφασιζω εγω το τι χρειαζομαι

το raid του unraid μου αρεσε πολυ , γιατι δεν σπαταλας χωρο παραπανω απο εναν δισκο , αλλα εχει και τροπο να επιταχυνει ,την λειτουργια των αλλων δισκων μεσω αυτου . (διαβαζοντας parity και τους αλλους δισκους με τον τροπο που θα επανασυνθετε εναν χαλασμενο δισκο , μπορει να υποβοηθησει την αναγνωση απο καποιον δισκο που ηδη λειτουργει προσφεροντας αμεσοτητα και ταχυτητα )

ο τροπος που εχει το raid για διφορετικα μεγεθη δισκων , εχει την μονη απαιτηση , να μπει ο μεγαλυτερος δισκος ως parity (για να επικαλυπτει τα δεδομενα των αλλων )

δεν εχω χρησιμοποιησει synology και openmediavolt , freenas ειχα δοκιμασει πριν πολυ πολυ καιρο οποτε παλι ειναι σαν να μην το ξερω .
ηθελα να κανω καποιες δοκιμες προσφατα αλλα δεν εχω προχωρησει ακομη .

[tiffany]

Εμένα με προβληματίζει το γεγονός πως θέλει USB stick για να τρέξει και όχι κανονικό σκληρό. Πότε δεν τα εμπιστεύομαι πόσο μάλλον για τόσο σημαντικά πράγματα.

[megahead13]

χωρις να εχω δοκιμασει τα αλλα , ψαχνοντας το ομως μεσα απο τις προδιαγραφες τους , το virtualization του unraid εχει την ιδιοτητα να μπορεις να αναθεσεις καποιο φυσικο hardware που εχεις κουμπωσει στον σερβερ , σε ενα εικονικο μηχανημα , ωστε να τρεχει το περιφερειακο στις πληρης δυνατοτητες του.

PCI passthrough λέγεται αυτό και δεν είναι αποκλειστικότητα του UNRAID. Φαντάζομαι KVM χρησιμοποιεί για το virtulisation.

το raid του unraid μου αρεσε πολυ , γιατι δεν σπαταλας χωρο παραπανω απο εναν δισκο , αλλα εχει και τροπο να επιταχυνει ,την λειτουργια των αλλων δισκων μεσω αυτου . (διαβαζοντας parity και τους αλλους δισκους με τον τροπο που θα επανασυνθετε εναν χαλασμενο δισκο , μπορει να υποβοηθησει την αναγνωση απο καποιον δισκο που ηδη λειτουργει προσφεροντας αμεσοτητα και ταχυτητα )

Παρομοίως. Δεν είναι αποκλειστικότητα του UNRAID αυτό.

Για να μην παρεξηγηθώ, δε λέω ότι το UNRAID δεν είναι καλό. Αυτό που λέω είναι πως τις δυνατότητες που αναφέρεις τις έχουν όλοι λίγο, πολύ σήμερα. Η διαφορετικότητα/μοναδικότητα του UNRAID βασίζεται στην υλοποίηση της δικιάς τους τεχνολογίας ας πούμε "RAID", που είναι αρκετά διαφορετική από το κλασσικό RAID ή το ZFS. Αυτό σε κάποιους αρέσει μια και απ' ότι καταλαβαίνω απλοποιεί αρκετά τα πράγματα για τους όχι και τόσο γνώστες του αντικειμένου (αποθηκευτικά συστήματα, file systems, κτλ), αλλά ακόμα και στους πιο γνώστες.

- - - Updated - - -

Εμένα με προβληματίζει το γεγονός πως θέλει USB stick για να τρέξει και όχι κανονικό σκληρό. Πότε δεν τα εμπιστεύομαι πόσο μάλλον για τόσο σημαντικά πράγματα.

Δεν το θεωρώ πρόβλημα. Σε πολλά server συστήματα το λειτουργικό τρέχει σε ένα USB stick ή σε SD cards οι οποίες τρέχουν σε RAID 1 (ή ακόμα και diskless με PXE booting, πρακτική παμπάλαια). Προσωπικά προτιμώ το δεύτερο ή κλασσικούς δίσκους/ssd σε RAID 1 (πιο εύκολοι στην πρόσβαση/αντικατάσταση από τη φάτσα του server σε σχέση με ένα USB stick, SATA DOM (Disk on Module) ή Μ2 καρφωμένα πάνω στην μητρική). Άσε που πια οι μικροί SSD, ίσα για την εγκατάσταση του λειτουργικού, είναι πάμφθηνοι σήμερα.

[griniaris]

Εμένα με προβληματίζει το γεγονός πως θέλει USB stick για να τρέξει και όχι κανονικό σκληρό. Πότε δεν τα εμπιστεύομαι πόσο μάλλον για τόσο σημαντικά πράγματα.

ετσι ημουν και εγω. αλλα πλεον με 6 αγορασμενες αδειες ειμαι υπερευχαριστημενος απο αυτο τον τροπο.

το usb χρησιμοποιειται μονο για το αρχικο μπουτ και την αποθηκευση των ρυθμισεων. αφου μπουταρει ολα τρεχουν απο την μνημη.

μεσα στο gui εχει κουμπι "flash backup" που σου φερνει ενα zip ( 300MB περιπου) .

αν για καποιο λογο δεν ξεκιναει το μηχανημα πχ μετα απο διακοπη ρευματος ριχνεις το backup και ξαναπαιζει κανονικα.
αν παρολα αυτα "σκασει" το stick .... ριχνεις το backup σε νεο στικακι και με μια απλουστατη διαδικασια δηλωνεις το νεο στικακι και παιζει .

τα εχουν προβλεψει ολα. τα εχω δοκιμασει ολα ( πριν μου συμβουν) και ειμαι απολυτα ευχαριστημενος.

[tiffany]

Δε διαφωνώ. Απλά είναι κάτι που δε μου κάθεται καλά.

[minas]

Δε διαφωνώ. Απλά είναι κάτι που δε μου κάθεται καλά.

Σχεδόν όλα τα παραπάνω NAS-oriented λειτουργικά συστήματα έχουν αυτή την προσέγγιση - όχι γιατί γλιτώνεις κόστος με το USB/SDCard, αλλά γιατί μεγιστοποιείς τις θέσεις δίσκων που μπορείς να τοποθετήσεις.
Πάντως το αποθηκευτικό μέσο καθεαυτό (συνήθως) είναι αναλώσιμο, είτε πρόκειται για το λειτουργικό σύστημα, είτε για τα δεδομένα.
Η λογική είναι ότι εάν κάποιο χαλάσει, το αντικαθιστάς και συνεχίζεις να δουλεύεις.

Το unraid καλό και άγιο, και κάποτε ήταν μπροστά από την εποχή του από πλευράς χρηστικότητας και λειτουργιών (γι' αυτό και ζητάει χρήματα άλλωστε).
Παρότι έχω πληρώσει και άδεια στο παρελθόν, από τότε που έκοψε τη δωρεάν έκδοση για έως 3 δίσκους έχω στραφεί αλλού, υπάρχουν προτιμότερες εναλλακτικές.

[ranger]

Το αφήνω αυτό εδώ να υπάρχει...

Πολύ χρήσιμο να έχεις κάπου να τρέχεις τον δικό σου vpn server.
Ειδικά όταν πετάς με αεροπλάνο.
Και το αεροπλάνο έχει WiFi.

Spoiler:

Επί πληρωμή

Φυσικά αναφέρομαι στην ασφάλεια της σύνδεσης, τίποτα άλλο