Ερώτηση για bash

[tsigarid]

Εγώ εννοούσα το /etc/inputrc που έχει τις ρυθμίσεις της εκάστοτε διανομής μια και είπες ότι άλλαξες λειτουργικό αλλά και το .inputrc κάνει δουλειά.

Δεν μπορώ να αλλάξω το /etc/inputrc, δεν έχω root privileges, δεν μιλάω για προσωπικό υπολογιστή αλλά για supercomputer.

Από περιέργεια και μόνο, επειδή ορισμένα nodes είναι ακόμα στο παλιό λειτουργικό, συνέκρινα το παλιό με το νέο /etc/inputrc. Το νέο έχει πολλές νέες ρυθμίσεις σχετιζόμενες με το screen, και αυτό:

set enable-meta-key off

Κατά τα άλλα είναι ακριβώς ίδια, οπότε δεν καταλαβαίνω γιατί άλλαξε η συμπεριφορά. Καμία ιδέα; Και πάλι, είναι από περιέργεια μπας και μάθω κάτι παραπάνω, το πρόβλημά μου έχει λυθεί.

[imitheos]

Δεν μπορώ να αλλάξω το /etc/inputrc, δεν έχω root privileges, δεν μιλάω για προσωπικό υπολογιστή αλλά για supercomputer.

Από περιέργεια και μόνο, επειδή ορισμένα nodes είναι ακόμα στο παλιό λειτουργικό, συνέκρινα το παλιό με το νέο /etc/inputrc. Το νέο έχει πολλές νέες ρυθμίσεις σχετιζόμενες με το screen, και αυτό:

set enable-meta-key off

Κατά τα άλλα είναι ακριβώς ίδια, οπότε δεν καταλαβαίνω γιατί άλλαξε η συμπεριφορά. Καμία ιδέα; Και πάλι, είναι από περιέργεια μπας και μάθω κάτι παραπάνω, το πρόβλημά μου έχει λυθεί.

Το meta το απενεργοποιούν όλοι νομίζω ώστε να παίζει το 8bit που ανέφερα πριν. Πλέον δεν παίζει ρόλο γιατί όλοι έχουν UTF-8 locales και γιατί κανείς δεν δουλεύει κονσόλα (ttyN όχι τερματικό μέσω X). Παλαιότερα όμως είχαν εφευρεθεί διάφορες μαγκιές λόγω των περιορισμών που υπήρχαν στην κονσόλα. Μία από αυτές ήταν να χάνεις την δυνατότητα του meta σαν modifier αλλά να χρησιμοποιείς εκείνο το bit για να έχεις 8bit και να μπορείς να γράφεις αγγλικά + μία άλλη γλώσσα. Άλλη μαγκιά για παράδειγμα ήταν όταν έγραφες συχνά σε δύο άλλες γλώσσες πέραν των αγγλικών, να μπορείς να φορτώσεις font με 512 χαρακτήρες αντί για 256 αλλά έτσι έχανες την δυνατότητα να έχεις "εφέ" (όπως πχ blinking text) γιατί χρησιμοποιούσες εκείνα τα "bits" για τους έξτρα χαρακτήρες.

Τώρα γιατί να υπάρχει διαφορετική συμπεριφορά με ίδιο inputrc δεν γνωρίζω. Το ZSH δεν χρησιμοποιεί readline οπότε έχω αιώνες να ασχοληθώ με inputrc. Τα μόνα που μου έρχονται στο μυαλό (με σειρά πιθανότερο -> λιγότερο πιθανό) είναι:
α) Να εισάγεται κάποιο 2ο αρχείο με include στα /etc/inputrc οπότε να διαφοροποιείται εκεί κάποια ρύθμιση
β) Κάποιες ρυθμίσεις της readline μπορείς να τις αλλάξεις και μέσα από τα αρχεία ρύθμισης του bash οπότε να αλλάζει κάτι σε bashrc, profile, κτλ
γ) Μήπως, όπως πχ το cryptsetup και κάποια άλλα προγράμματα, η readline ή το bash υποστηρίζουν κατά το χτίσιμο να αλλάξεις κάποια "defaults" οπότε χωρίς να υπάρχει καταχώριση στο /etc/inputrc, στο παλιό λειτουργικό να ήταν default On (κατά συνέπεια να σου παίζει σωστά τόσο καιρό) και στο καινούριο να είναι default Off.

[tsigarid]

Το meta το απενεργοποιούν όλοι νομίζω ώστε να παίζει το 8bit που ανέφερα πριν. Πλέον δεν παίζει ρόλο γιατί όλοι έχουν UTF-8 locales και γιατί κανείς δεν δουλεύει κονσόλα (ttyN όχι τερματικό μέσω X). Παλαιότερα όμως είχαν εφευρεθεί διάφορες μαγκιές λόγω των περιορισμών που υπήρχαν στην κονσόλα. Μία από αυτές ήταν να χάνεις την δυνατότητα του meta σαν modifier αλλά να χρησιμοποιείς εκείνο το bit για να έχεις 8bit και να μπορείς να γράφεις αγγλικά + μία άλλη γλώσσα. Άλλη μαγκιά για παράδειγμα ήταν όταν έγραφες συχνά σε δύο άλλες γλώσσες πέραν των αγγλικών, να μπορείς να φορτώσεις font με 512 χαρακτήρες αντί για 256 αλλά έτσι έχανες την δυνατότητα να έχεις "εφέ" (όπως πχ blinking text) γιατί χρησιμοποιούσες εκείνα τα "bits" για τους έξτρα χαρακτήρες.

Τώρα γιατί να υπάρχει διαφορετική συμπεριφορά με ίδιο inputrc δεν γνωρίζω. Το ZSH δεν χρησιμοποιεί readline οπότε έχω αιώνες να ασχοληθώ με inputrc. Τα μόνα που μου έρχονται στο μυαλό (με σειρά πιθανότερο -> λιγότερο πιθανό) είναι:
α) Να εισάγεται κάποιο 2ο αρχείο με include στα /etc/inputrc οπότε να διαφοροποιείται εκεί κάποια ρύθμιση
β) Κάποιες ρυθμίσεις της readline μπορείς να τις αλλάξεις και μέσα από τα αρχεία ρύθμισης του bash οπότε να αλλάζει κάτι σε bashrc, profile, κτλ
γ) Μήπως, όπως πχ το cryptsetup και κάποια άλλα προγράμματα, η readline ή το bash υποστηρίζουν κατά το χτίσιμο να αλλάξεις κάποια "defaults" οπότε χωρίς να υπάρχει καταχώριση στο /etc/inputrc, στο παλιό λειτουργικό να ήταν default On (κατά συνέπεια να σου παίζει σωστά τόσο καιρό) και στο καινούριο να είναι default Off.

Ευχαριστώ!

[shadowman]

να ρωτήσω κάτι:

έχω λάβει ένα αρχείο csv που περιέχει 2 στήλες με πολλά δεδομένα με δεκαδικούς αριθμούς που χωρίζουν το ακέραιο μέρος του αριθμού από το δεκαδικό με τελεία (αμερικάνικο σύστημα) αντί με κόμμα που είναι το ελληνικό. Αντί να κάτσω 1 προς 1 ένα να τα διορθώνω, μπορώ με κάποιο τρόπο να μετατρέψω γρήγορα τα δεδομένα με τα εργαλεία του bash;
Πρέπει μάλλον να γίνει και μια τρίτη μετατροπή: τα στοιχεία χωρίζονται μεταξύ τους με (, ) κόμμα...


δείτε το σαν άσκηση αν θέλετε...
το έφτιαξα με μετατροπή σε ods και αλλαγή locale σε En_US

[astbox]

Για δώσε ένα δείγμα.

[shadowman]

Για δώσε ένα δείγμα.

η πρώτη γραμή δεδομένων, χωρίζονται με κόμμα τα στοιχεία:

field1text,field2text,2018-08-20T22:08:27.381Z,0.0100000000000000,0.0680975200000000,textfield,,15721270,textfield

[astbox]

Μετά την μετατροπή θα εισάγεις πουθενά τα δεδομένα; Πρέπει να βάλεις και αυτάκια σε κάθε field. Αν αλλάξεις απλά την τελεία τότε θα προσθέσεις δύο πεδία ακόμα και τα δεδομένα δεν θα γίνουν σωστά parse.

[MitsakosGR]

Τα text field ειναι μέσα σε εισαγωγικά υποχρεωτικά ή μόνο αν περιέχουν κόμμα;

[shadowman]

-τα στοιχεία θα επεξεργαστούν με libreoffice calc και τώρα έτσι όπως είναι δεν γίνονται πράξεις με ελληνικό locale αφού οι δεκαδικοί είναι με τελεία αντί για κόμμα.
-δεν περιέχουν εισαγωγικά τα text fields, απλώς έχουν μια λέξη ή ένα αλφαριθμητικό.

[MitsakosGR]

-τα στοιχεία θα επεξεργαστούν με libreoffice calc και τώρα έτσι όπως είναι δεν γίνονται πράξεις με ελληνικό locale αφού οι δεκαδικοί είναι με τελεία αντί για κόμμα.
-δεν περιέχουν εισαγωγικά τα text fields, απλώς έχουν μια λέξη ή ένα αλφαριθμητικό.

sed 's/,/;/g' -i test.csv                                                                                                                                                                               :(
sed 's/\./,/g' -i test.csv

Αλλάζει το "," με ";" και στη συνέχεια τη "." με ",".

[astbox]

Heh με πρόλαβες, πάρτε και την δικιά μου noob αηδία

sed 's/,/","/g' foo.csv | sed 's/$/"/g' | sed 's/^/"/g' | sed 's/\./\,/2' | sed 's/\./\,/2' > bar.csv

Βάζει πρώτα εισαγωγικά και αλλάζει την τελεία στο 2ο και 3ο αποτέλεσμα.

[shadowman]

ευχαριστώ και τους 2
θα τα δοκιμάσω

[tsigarid]

sed, so last year... Εγώ τέτοιες μετατροπές τις κάνω στο vim:

:1,$s/,/;/g
:1,$s/./,/g

[astbox]

Εγκρίνω αλλά technically που λένε στο χωριό ζήτησε one liner .
Απέλπιδα προσπάθεια να δώσω αξία στη μπούρδα μου.

[imitheos]

Εγκρίνω αλλά technically που λένε στο χωριό ζήτησε one liner .
Απέλπιδα προσπάθεια να δώσω αξία στη μπούρδα μου.

Πέρα από το αν γίνεται γρηγορότερα με διαφορετικό κώδικα όπως αυτόν του MitsakouGR, δεν χρειάζεται να τρέχεις πολλές φορές το sed μέσω pipes. Το sed (τουλάχιστον το gnu αλλά νομίζω όλα τα υποστηρίζουν) υποστηρίζει πολλαπλά "scripts" με την παράμετρο -e.

% cat foo.csv 
field1text,field2text,2018-08-20T22:08:27.381Z,0.0100000000000000,0.0680975200000000,textfield,,15721270,textfield

% sed 's/,/","/g' foo.csv | sed 's/$/"/g' | sed 's/^/"/g' | sed 's/\./\,/2' | sed 's/\./\,/2'
"field1text","field2text","2018-08-20T22:08:27.381Z","0,0100000000000000","0,0680975200000000","textfield","","15721270","textfield"

% sed -e 's/,/","/g' -e 's/$/"/g' -e 's/^/"/g' -e 's/\./\,/2' -e 's/\./\,/2' foo.csv 
"field1text","field2text","2018-08-20T22:08:27.381Z","0,0100000000000000","0,0680975200000000","textfield","","15721270","textfield"