Freitag, 30. Januar 2009
MySQL - Die Größe aller Datenbanken auflisten
Datenbanken rechnen gerne und sind dabei effizient, MySQL ist da keine Ausnahme.
Wäre es nicht interessant, in der Bash auf die Schnelle eine Liste aller (lokalen) Datenbanken incl. ihrer Größe zu bekommen, in MB, ordentlich gerundet und zwar ohne die interaktive MySQL Shell zu öffnen?
Na klar!
Damit ließe sich z.B. die Größe einer Datenbank automatisiert überwachen.
Wäre es nicht interessant, in der Bash auf die Schnelle eine Liste aller (lokalen) Datenbanken incl. ihrer Größe zu bekommen, in MB, ordentlich gerundet und zwar ohne die interaktive MySQL Shell zu öffnen?
Na klar!
mysql -u root -pPasswort -e 'select table_schema,round(sum(data_length+index_length)/1024/1024,4) from information_schema.tables group by table_schema;'
Etwas sprechendere Tabellenheader wären auch nicht schlecht:mysql -u root -pPasswort -e 'select table_schema "Database",round(sum(data_length+index_length)/1024/1024,4) "Size (MB)" from information_schema.tables group by table_schema;'
Das Ergebnis schaut dann ungefähr so aus:+--------------------+-----------+ | Database | Size (MB) | +--------------------+-----------+ | copper | 0.0491 | | gallery2 | 0.1633 | | information_schema | 0.0039 | | joomla | 0.6255 | | mysql | 0.2599 | | redaxo | 0.0715 | | wiki | 2.5833 | | wordpress | 0.3367 | | xoops | 0.3042 | +--------------------+-----------+Oder die Größe einer bestimmten Datenbank (hier "wiki"), diesmal ohne Tabellenheader:
mysql -u root -pPasswort -N -e 'select round(sum(data_length+index_length)/1024/1024,4) from information_schema.tables where table_schema="wiki";'
Ergebnis:+--------+ | 2.5833 | +--------+Voraussetzung: mindestens MySQL 5.0.irgendwas (2?).
Damit ließe sich z.B. die Größe einer Datenbank automatisiert überwachen.
Mittwoch, 28. Januar 2009
Zahlenkolonnen formatieren mit (g)awk
(G)awk kann Zahlenkolonnen schick formatieren, sodass z.B. die Kommastellen sauber untereinander platziert werden. Die Ausgangsdatei, datei.txt, hat folgenden Inhalt:
13.5 556.987 14.56 13.1 15.356 345.2 416.106 2.7 17.1 3.99 18.41 4.342 139.14 345.2 20.21 20.1 621.18 4.5 22.01 77.2 23.1 94.627Das sieht nicht so toll aus... Mit Müh und Not kann man zwei Spalten mit Fließkommazahlen erkennen, jeweils durch ein Leerzeichen getrennt. Gawk wirds richten:
"Zahlenkolonnen formatieren mit (g)awk" vollständig lesen
Samstag, 17. Januar 2009
Tipps und Beispiele für "find"
Find ist ein Wunderwuzi unter den Shellprogrammen. Der Name ist Programm, mit find wird gefunden, nicht einfach nur gesucht.
Ein einfaches Beispiel:
Wo in meinem Homeordner liegt die Datei "test.pdf"?
Irgendwo in eurem Homeordner, irgendein Name, vor ein paar Minuten...
~ -- rekursiv in meinem Homeordner
-type f -- eine Datei (kein Ordner...)
! -path '*/.*' -- ohne Dateien oder Ordner, die mit Punkt beginnen.
-mmin -10 -- nicht älter als 10 Minuten
-ls -- lange Anzeige (wie ls -l)
Das war noch lange nicht alles...
Ein einfaches Beispiel:
Wo in meinem Homeordner liegt die Datei "test.pdf"?
find ~ -name test.pdf
Ihr habt vor ein paar Minuten eilig etwas gespeichert, habt aber den Namen der Datei und den Pfad sofort vergessen.Irgendwo in eurem Homeordner, irgendein Name, vor ein paar Minuten...
find ~ -type f ! -path '*/.*' -mmin -10 -ls
Die Optionen im Einzelnen:~ -- rekursiv in meinem Homeordner
-type f -- eine Datei (kein Ordner...)
! -path '*/.*' -- ohne Dateien oder Ordner, die mit Punkt beginnen.
-mmin -10 -- nicht älter als 10 Minuten
-ls -- lange Anzeige (wie ls -l)
Das war noch lange nicht alles...
"Tipps und Beispiele für "find"" vollständig lesen
Dienstag, 6. Januar 2009
URL decode und encode in der Bash
Die Bash hat selbst kein urldecode oder urlencode. Das kann aber recht einfach nachgebaut werden. Ist php installiert, hilft der Umweg über den Aufruf der PHP-Funktionen mit "php -r" (=direktes Ausführen von PHPcode in der Shell ohne Apache o.ä.).
Beispiel zum Encodieren:
Beispiel zum Decodieren:
Das funktioniert, ist aber nicht besonders komfortabel. Wir wissen uns aber zu helfen:
Beispiel zum Encodieren:
echo $( php -r "echo urlencode('Start: #1, Zeichen {13/24} Ende();');"; )
Ergebnis: Start%3A+%231%2C+Zeichen+%7B13%2F24%7D+Ende%28%29%3BBeispiel zum Decodieren:
echo $( php -r "echo urldecode('Start%3A+%231%2C+Zeichen+%7B13%2F24%7D+Ende%28%29%3B');"; )
Ergebnis: Start: #1, Zeichen {13/24} Ende();Das funktioniert, ist aber nicht besonders komfortabel. Wir wissen uns aber zu helfen:
"URL decode und encode in der Bash" vollständig lesen
Montag, 5. Januar 2009
Softwaretipp: SynfigStudio
Synfig ist ein vektorbasiertes 2D-Animationsprogramm für Linux, Windows und Mac (GPL). Trotz der noch recht niedrigen Versionsnummer (aktuell 0.61.09) und den kleinen Kinderkrankheiten gibt es schon längst eine eingeschworene Nutzergemeinde. Mit Recht, wie ich finde.
Zu Hause ist das Projekt auf www.synfig.org/Main_Page.
Was mir an Synfig so gefällt:
Wenn ich z.B. möchte, dass sich ein Objekt von links nach rechts bewegt und sich dabei dreht, muss ich nur den Anfangs- und Endzustand festlegen. Die Übergänge dazwischen werden automatisch berechnet und zwar fließender, als ich das mit händischem Pixelschubsen jemals erreichen könnte.
Zu Hause ist das Projekt auf www.synfig.org/Main_Page.
Was mir an Synfig so gefällt:
- Der Einstieg ist nicht schwer. Hat man sich erst an das Konzept mit Layers, Timeline und Keyframes gewöhnt, gibt es schnell Erfolgserlebnisse. Trotz dieser Userfreundlichkeit ist der Funktionsumfang des Programmes beachtlich.
- Das Programm ist gut dokumentiert, es gibt Tutorials aller Art.
- Animationen brauchen deutlich weniger Arbeitsschritte, als z.B. mit Gimp. Wo mit anderen Programmen dutzende Bilder nötig sind, erledigt Synfig den Job mit einem Layer.
- Alles funktioniert mit einem Tool. Bilderimport, Animation, Export als Film (z.B. avi) oder Bilderserie. Nur vertonen muss man noch extern, offensichtlich ist da aber etwas geplant, den Menüpunkt gibt es schon.
- Obwohl ein Animationsprogramm, ist Synfig relativ ressourcenschonend. Auf meinem schwachen Rechnerlein ist das ein nicht unwichtiger Punkt.
- Synfig ist vielseitig. Eine Foto Slideshow als Film mit Zwischentexten und Überblendungen? Kein Problem (nur so als Beispiel).
Wenn ich z.B. möchte, dass sich ein Objekt von links nach rechts bewegt und sich dabei dreht, muss ich nur den Anfangs- und Endzustand festlegen. Die Übergänge dazwischen werden automatisch berechnet und zwar fließender, als ich das mit händischem Pixelschubsen jemals erreichen könnte.
Sonntag, 28. Dezember 2008
Rechnen in der Shell
In der Linux Shell (Bash) gibt es einige Möglichkeiten, Rechenoperationen (auch in Skripten) auszuführen. Ich habe mir drei heraus gepickt, die üblicherweise auf jedem Linuxsystem schon vorhanden sind, und werde sie an Hand von Beispielen vergleichen.
Einfache Rechenoperationen mit Ganzzahlen kann die Bash auch selbst ausführen.
Negative Zahlen und Variablen sind auch kein Problem.
Für einfache Berechnungen ist das ausreichend, wenn es genauer sein soll, ist eine andere Methode erforderlich.
- bash builtin
- bc
- (g)awk
Einfache Rechenoperationen mit Ganzzahlen kann die Bash auch selbst ausführen.
echo $(( (23-2)*2/3 ))
Zu beachten: die doppelten runden Klammern bedeuten "hier wird gerechnet".Negative Zahlen und Variablen sind auch kein Problem.
var=34; echo $(( $var/-3 ))
Fließkommazahlen oder Rundung kennt die Bash aber nicht. Alles, was hinter dem (nicht vorhandenen) Komma käme, wird einfach abgeschnitten. Jede Zahl wird zum Integer.Für einfache Berechnungen ist das ausreichend, wenn es genauer sein soll, ist eine andere Methode erforderlich.
"Rechnen in der Shell" vollständig lesen
Freitag, 26. Dezember 2008
Sed ersetzt das Kommazeichen
Folgendes Problem: Ich möchte eine csv-Datei in z.B. OpenOffice importieren, um Spaltensummen zu berechnen. Leider verwendet die csv-Datei den Punkt statt dem Beistrich als Kommazeichen und hintendran steht auch noch das Prozentzeichen. Globales Ersetzen des Punktes ist keine Lösung, weil ja auch in anderen (Text-) Spalten Punkte vorkommen.( Die "Mb" Spalte ist egal.) Da greife ich zu sed.
Eine Beispielzeile des Textes:
Die Basis für das Ganze ist sed's "substitute", also s (=ersetzen).
Bei meinem Problem geht es nur um Punkte, die von Zahlen eingeschlossen sind. Vorne sind es nie mehr als drei Stellen, es ist aber mindestens eine.
Nun will ich aber nur den Punkt ersetzen, die Zahlen aber selbstverständlich mitnehmen. Sed kennt dazu Platzhalter (\1, \2 usw.), die sich auf einen Ausdruck in Runden Klammern beziehen.
Die Regex (Regular Expresssion)
In der csv-Datei haben alle Zahlen zwei Nachkommastellen. Die passende Regex schaut so aus:
Regex 1 = 1 bis 3-stellige Zahl
\. = ein (wörtlicher) Punkt
Regex 2 = 2-stellige Zahl (Nachkommastellen)
% = ein Prozentzeichen (wird wegfallen)
\1 = Referenz auf die erste Regex
, = der Beistrich (ersetzt den Punkt)
\2 = Referenz auf die zweite Regex
Sinnvollerweise wird das sed-Kommando in einer Pipe verwendet, z.B.
Das Ergebnis (vgl. Beispielzeile oben):
Eine Beispielzeile des Textes:
389 0.79% 1.25 Mb 0.21% /gimp1.2/zuschneiden.htmlDas passende sed-Kommando lautet so:
sed 's/\([0-9]\{1,3\}\)\.\([0-9]\{2\}\)%/\1,\2/g'
Horror, nicht? Ich werde das jetzt ein bisschen aufdröseln.Die Basis für das Ganze ist sed's "substitute", also s (=ersetzen).
sed 's/das/jenes/g'
Das bedeutet, sed ersetzt "das" durch "jenes", und zwar global (g) im gesamten Dokument.Bei meinem Problem geht es nur um Punkte, die von Zahlen eingeschlossen sind. Vorne sind es nie mehr als drei Stellen, es ist aber mindestens eine.
[0-9]\{1,3\}
Dieser Ausdruck steht für eine ein- bis dreistellige Zahl. Zu beachten, die geschwungenen Klammern müssen mit Backslash escaped werden.Nun will ich aber nur den Punkt ersetzen, die Zahlen aber selbstverständlich mitnehmen. Sed kennt dazu Platzhalter (\1, \2 usw.), die sich auf einen Ausdruck in Runden Klammern beziehen.
Die Regex (Regular Expresssion)
...\([0-9]\{1,3\}\)...
...kann also, da es der erste Ausdruck in runden Klammern ist, als \1 mitgenommen werden. Der nächste Ausdruck in runden Klammern wäre \2, usw. Auch die runden Klammern müssen durch Backslash escaped werden. Genau so übrigens der Punkt, damit auch wirklich der wörtliche Punkt und nicht "ein beliebiges Zeichen" gemeint ist.In der csv-Datei haben alle Zahlen zwei Nachkommastellen. Die passende Regex schaut so aus:
\([0-9]\{2\}\)
Ein weiteres Merkmal ist das Prozentzeichen hintendran, das ich bei der Gelegenheit auch gleich loswerden möchte. Ich nehme es zum Suchbegriff dazu, allerdings außerhalb der runden Klammern, damit es nicht mitgenommen wird.
s/ \([0-9]\{1,3\}\) \. \([0-9]\{2\}\) % / \1,\2 /g Punkt Prozent Regex 1 Regex 2 Referenz 1 Referenz 2 BeistrichZusammenfassung:
Regex 1 = 1 bis 3-stellige Zahl
\. = ein (wörtlicher) Punkt
Regex 2 = 2-stellige Zahl (Nachkommastellen)
% = ein Prozentzeichen (wird wegfallen)
\1 = Referenz auf die erste Regex
, = der Beistrich (ersetzt den Punkt)
\2 = Referenz auf die zweite Regex
Sinnvollerweise wird das sed-Kommando in einer Pipe verwendet, z.B.
cat allurls.csv | sed 's/\([0-9]\{1,3\}\)\.\([0-9]\{2\}\)%/\1,\2/g' > neuedatei.csv
Das ersetzt die unerwünschten Punkte durch Beistrich, entfernt die Prozentzeichen und speichert das Ergebnis in einer neuen Datei.Das Ergebnis (vgl. Beispielzeile oben):
389 0,79 1.25 Mb 0,21 /gimp1.2/zuschneiden.html
« vorherige Seite
(Seite 8 von 11, insgesamt 74 Einträge)
» nächste Seite