Bash Script & Maildir

[DVader]

Καλησπέρα σε όλους,

Έχω ένα bash script που κάνει tar.gz όλο το /home folder.... Έπειδή όμως το /home έχει και email χρστών θέλω αυτά να κάνω exclude ...
Ξέρει κανείς πως μπορώ να κάνω αυτό ? Υπάρχει η παράμετρος --exclude και ξέρω πως δουλεύει αλλά δεν θέλω να βάλω ένα ενα όλα τα folders .....
Εϊναι πολλά ...Κανα κολπάκι που να του το πω ποιό γενικά ...Όπου βλέπει π.χ Maildir folders .... Βασικά δεν θέλω τα αρχεία των emails να βάζει στο backup ...Τους φακέλους. που είναι τα folder των email accounts πρέπει να τα παίρνει για μην γίνει break το σύστημα ! Έχει ιδέα κανείς πως το κάνω ?

[KernelPanic]

Μια γρηγορη σκεψη χωρις να μπλέξουμε find και λοιπα utils δοκίμασε: tar -zcvf file.tar --exclude="home/*/Maildir" /home (υποθέτωντας οτι Maildir είναι κοινή ονομασια για τα mail folders καθε χρηστη)

[imitheos]

Μια γρηγορη σκεψη χωρις να μπλέξουμε find και λοιπα utils δοκίμασε: tar -zcvf file.tar --exclude="home/*/Maildir" /home (υποθέτωντας οτι Maildir είναι κοινή ονομασια για τα mail folders καθε χρηστη)

Έτσι όμως δεν θα απορρίψει και τον ίδιο τον κατάλογο Maildir ?

Μια άλλη λύση θα μπορούσε να ήταν --exclude "Maildir/*" ώστε να απορρίψει μόνο τα αρχεία και υποκαταλόγους μέσα στο Maildir και να σώσει τον ίδιο τον κατάλογο Maildir.

Χωρίς όμως να ξέρουμε την δομή των καταλόγων σου DVader μόνο μαντεψιές μπορούμε να κάνουμε.

[DVader]

Έτσι όμως δεν θα απορρίψει και τον ίδιο τον κατάλογο Maildir ?

Μια άλλη λύση θα μπορούσε να ήταν --exclude "Maildir/*" ώστε να απορρίψει μόνο τα αρχεία και υποκαταλόγους μέσα στο Maildir και να σώσει τον ίδιο τον κατάλογο Maildir.

Χωρίς όμως να ξέρουμε την δομή των καταλόγων σου DVader μόνο μαντεψιές μπορούμε να κάνουμε.

Υπάρχει το /home ένας φάκελος που έιναι ο φάκελος του domain. Οπότε στην ουσία κάθε φάκελος είναι ένα domain !
Τώρα αν υποθέσουμε ότι έχουμε το domain mydomain.gr τότε ο κεντρικός του φάκελος θα είναι /home/mydomain. Μέσα εκεί υπάρχει ο homes δηλαδή /home/mydomain/homes..
Για κάθε χρήστη μέσα στο homes υπάρχει ο φακελος του user1 όπου από εκεί κάτω έχει δημιουργήσει την δομή του postfix/dovecot.
Δηλαδή /home/mydomain/homes/user1

Τα αρχεία των emails είναι της μορφής 12341342.2333_0.servername.mydomain.gr

Την δομή δεν την έχω φτιάξει εγώ αλλά το virtualmin ...

Βασικά σκέφτηκα να του πω να κάνει exclude ότι αρχεία είναι της *.servername.mydomain.gr αλλα πω θα το εκφράσω σαν path ?

--exclude /home/*.servername.mydomain.gr αυτό σαν absolute path μου μοιάζει !

Σπαζοκεφαλιά ρε gmt !


- - - Updated - - -

Εγώ τα αρχεία θέλω να μην πάρει ..Τους φακέλους πρέπει διαφορετικά σε περίπτωση Restore δεν θα παίζει το postfix/dovecot γιατί θα λείπουν οι φάκελοι των διευθύνσεων !

Καταλάβατε ?

[pmav99]

Γιατί δεν του λες να κάνει exclude το pattern των αρχείων μονο;

[DVader]

Γιατί δεν του λες να κάνει exclude το pattern των αρχείων μονο;

Όπως ? Σαν παράδειγμα πες το γιατί δεν το έπιασα ?

Στουρν εδώ !

- - - Updated - - -

Κάτι τέτοιο --exclude *.servername.mydomain.gr ?

[pmav99]

Ναι κάτι τέτοιο εννοώ. Τώρα το ακριβές pattern εξαρτάται από το τι θες να κάνεις match αλλά αυτή είναι η ιδέα.

edit

Βασικά κάπως έτσι

/home/*.servername.mydomain.gr

Αν έχεις πχ πολλά domains και δεν θες να ανανεώνεις το script θα πρέπει να κάνεις match κάτι τέτοιο (αφού το μεταφράσεις σε regexep συμβατό με το tar)
http://refiddle.com/2eb1

[DVader]

Ναι κάτι τέτοιο εννοώ. Τώρα το ακριβές pattern εξαρτάται από το τι θες να κάνεις match αλλά αυτή είναι η ιδέα.

edit

Βασικά κάπως έτσι



Αν έχεις πχ πολλά domains και δεν θες να ανανεώνεις το script θα πρέπει να κάνεις match κάτι τέτοιο (αφού το μεταφράσεις σε regexep συμβατό με το tar)
http://refiddle.com/2eb1

Επειδή ναι έχω πολλά domains αν το έβαζα *.servername.mydomain.gr...Δεν θα δούλευε ?

Εχω ψάξει πολλά Sites με θέμα την tar αλλά κανένα δεν λέει πως το pattern που έχει δουλεύει ... Απλά λέει ότι δέχετε pattern στο Exclude !

[imitheos]

Η δομή δεν είναι η κλασική με τους καταλόγους cur, new, κτλ ? Αν ναι, δοκίμασες --exclude 'Maildir/*/*' ?

Βασικά με ενδιαφέρει τι βάθος καταλόγων υπάρχει και αν είναι σταθερό σε όλες τις περιπτώσεις.

Οι μικρές λεπτομέρειες και οι εσωτερικές υλοποιήσεις συνήθως δεν αναφέρονται στην manpage για να μην υπάρχει άσκοπη πληροφορία που γεμίζει την manpage. Για τον λόγο αυτό υπάρχουν οι info pages και εκεί θα βρεις ότι θέλεις για τα patterns. Νομίζω πάντως ότι είναι globbing patterns και δεν μπορείς να δουλέψεις regexps. Ίσως να μην θυμάμαι καλά.

[pmav99]

Ως συνήθως, ο imitheos έχει δίκιο. Globbing παίρνει η tar
http://www.gnu.org/software/tar/manu..._6.html#SEC111

[DVader]

Η δομή δεν είναι η κλασική με τους καταλόγους cur, new, κτλ ? Αν ναι, δοκίμασες --exclude 'Maildir/*/*' ?

Βασικά με ενδιαφέρει τι βάθος καταλόγων υπάρχει και αν είναι σταθερό σε όλες τις περιπτώσεις.

Οι μικρές λεπτομέρειες και οι εσωτερικές υλοποιήσεις συνήθως δεν αναφέρονται στην manpage για να μην υπάρχει άσκοπη πληροφορία που γεμίζει την manpage. Για τον λόγο αυτό υπάρχουν οι info pages και εκεί θα βρεις ότι θέλεις για τα patterns. Νομίζω πάντως ότι είναι globbing patterns και δεν μπορείς να δουλέψεις regexps. Ίσως να μην θυμάμαι καλά.

"Η δομή δεν είναι η κλασική με τους καταλόγους cur, new, κτλ ? Αν ναι, δοκίμασες --exclude 'Maildir/*/*' ?"

Ναι είναι..Δεν το δοκίμασα γιατί δεν το σκέφτηκα αυτό ! Τώρα που το λες θα το βάλω έτσι να δω τι θα κάνει !
Καλά κάτσε να διαβάσω το link να δώ τι εννοείτε globbing patterns και τα λέμε πάλι !

Είπαμε γνωρίζω κάποια πράγματα στο Linux και από Bash scripting αλλά πάντα μα πάντα θα μου λείπουν γνώσεις !

Πάντως ευχαριστω τις βοήθειες σας ! ε...

[imitheos]

Καλά κάτσε να διαβάσω το link να δώ τι εννοείτε globbing patterns και τα λέμε πάλι !

Με μπακάλικα λόγια, globbing είναι μια ευκολία που παρέχουν τα shells (και έχουν υιοθετήσει πολλά προγράμματα). Όταν έχεις πολλά αρχεία που αρχίζουν όλα πχ από DV, μπορείς να γράψεις DV* και αυτό θα σημαίνει όλα τα αρχεία αντί να πρέπει να τα γράψεις ένα-ένα. Το ερωτηματικό ? σημαίνει οποιονδήποτε ένα χαρακτήρα ενώ ο αστερίσκος * οσοδήποτε χαρακτήρες. Επίσης με τις αγκύλες μπορείς να ορίσεις σύνολα δηλαδή το "[a-c]lala" θα ισοδυναμεί με "alala blala clala" (αν φυσικά υπάρχουν τέτοια αρχεία)

Δες το παρακάτω παράδειγμα.

% cd /tmp
% touch f1 f2
% ls f1 f2
f1  f2
% ls f*
f1  f2

% ls 'f*'
/bin/ls: cannot access f*: Δεν υπάρχει τέτοιο αρχείο ή κατάλογος

Όταν λέω ls f*, το κέλυφος κάνει expand το globbing pattern και έτσι είναι σαν να έγραψα "ls f1 f2". Η εντολή ls δηλαδή δεν γνωρίζει ότι εγώ έγραψα κάτι διαφορετικό. Αν χρησιμοποιήσω όμως τα μονά εισαγωγικά, αποτρέπω το κέλυφος από το να κάνει expand αυτό που έχω γράψει και έτσι η εντολή ls βλέπει να έχω γράψει το "f*" και μου λέει ότι δεν υπάρχει τέτοιο αρχείο.

Υπάρχουν όμως εντολές όπως το tar που έχουν υποστήριξη οι ίδιες για globbing οπότε _πρέπει_ να βάλεις τα εισαγωγικά ώστε το tar να λάβει το pattern αυτούσιο αντί να το αλλάξει το κέλυφος όπως σου εξηγεί παρακάτω η info page.

* When you use `--exclude=PATTERN', be sure to quote the PATTERN
parameter, so GNU `tar' sees wildcard characters like `*'. If you
do not do this, the shell might expand the `*' itself using files
at hand, so `tar' might receive a list of files instead of one
pattern, or none at all, making the command somewhat illegal.
This might not correspond to what you want.

For example, write:

$ tar -c -f ARCHIVE.TAR --exclude '*.o' DIRECTORY

rather than:

# _Wrong!_
$ tar -c -f ARCHIVE.TAR --exclude *.o DIRECTORY

* You must use use shell syntax, or globbing, rather than `regexp'
syntax, when using exclude options in `tar'. If you try to use
`regexp' syntax to describe files to be excluded, your command
might fail.

Εδώ αναφέρει και αυτό που είπα ότι δεν μπορείς να χρησιμοποιήσεις regular expression. Με regexp μπορείς να κάνεις τα κέρατα αλλά η σύνταξη είναι πιο πολύπλοκη επειδή υποστηρίζουν τα πάντα ενώ το globbing είναι πολύ απλό όπως είπαμε στην αρχή. Εκτός αυτού υπάρχουν και διαφορές στην σύνταξη τους με πιο γνωστή αυτήν του αστερίσκου.

Όπως είπαμε πριν, ο αστερίσκος σε globbing σημαίνει οσοδήποτε και οποιουσδήποτε χαρακτήρες δηλαδή το a*b θα κάνει match το aab, το acfbb, το afgjhjkfhfb, κτλ. Σε regular expressions ο αστερίσκος σημαίνει οσεσδήποτε εμφανίσεις του προηγούμενου χαρακτήρα δηλαδή το a*b θα κάνει match μόνο τα ab, aab, aaab, κτλ.

[DVader]

Παιδιά επανέρχομαι στο θέμα γιατί δεν έπαιξε .....τελικά

Το έχω βάλει ώς --exclude Maildir/*/* αλλά μπα τα παίρνει πάλι ..

Τι θέλει .....gmt ?

[mrsaccess]

Παιδιά επανέρχομαι στο θέμα γιατί δεν έπαιξε .....τελικά

Το έχω βάλει ώς --exclude Maildir/*/* αλλά μπα τα παίρνει πάλι ..

Τι θέλει .....gmt ?

Το λέει το μήνυμα ακριβώς πάνω από το δικό σου: single quotes.

--exclude 'Maildir/*'

[DVader]

Το λέει το μήνυμα ακριβώς πάνω από το δικό σου: single quotes.

--exclude 'Maildir/*'

Λές να είναι τόσο χαζό λάθοςςςςςςςςς...οεοεοε