Leben des wolf-u.li » MySQL http://wolf-u.li This and That. Thu, 29 Jul 2010 15:42:22 +0000 http://wordpress.org/?v=2.9.2 en hourly 1 PHP-Bug des Jahres: Fehlende MySQL-Integration? http://wolf-u.li/2961/php-bug-des-jahres-fehlende-mysql-integration/ http://wolf-u.li/2961/php-bug-des-jahres-fehlende-mysql-integration/#comments Tue, 05 May 2009 17:04:08 +0000 Uli http://wolf-u.li/?p=2961 Soeben bin ich bei php.net über einen bug gestoßen, bei dem ich deutlich grinsen musste. Konkret geht es um Bug #48139, in dem sich der Ersteller beschwert, dass er nach 12 Stunden Suche immer noch keine Integration von MySQL in PHP geschafft hatte. Leider ist er in seiner etwas rüden Sprache ein wenig ungenau, was genau bei ihm fehlschlägt, aber insgesamt scheint sein PHP (übrigens ungefähr das einzige PHP, welches sich so verhält) keine der für MySQL benötigten .dlls zu laden. Hier der Screenshot des Bugs (nicht dass der mal abhanden kommt):

PHP-Bug 48139

PHP-Bug 48139

© 2005-2009 by Uli Wolf – This Content is distributed under the Creative Commons License
This feed is for personal, non-commercial use only.
The use of this feed on other websites without attribution to the author and notification of the author breaches copyright. If this content is not in your news reader, it makes the page you are viewing an infringement of the copyright. (Digital Fingerprint: d2a576b5311479d89eff39b7ca886f6b)
]]> http://wolf-u.li/2961/php-bug-des-jahres-fehlende-mysql-integration/feed/ 1 SysCP 1.4.2 und 1.4.2.1 wurden released http://wolf-u.li/2905/syscp-142-und-1421-wurden-released/ http://wolf-u.li/2905/syscp-142-und-1421-wurden-released/#comments Tue, 21 Apr 2009 13:49:14 +0000 Uli http://wolf-u.li/?p=2905 Für das Administrationstool SysCP ist im letzten Monat die neue Version 1.4.2 und kurz später mit ein paar weiteren Bugfixes 1.4.2.1 erschienen. Leider hat in der Zwischenzeit ein Teammitglied das Projekt verlassen, weshalb der, mit 1.4 eingeführte, Installer für den Application Packaging Standard, leider derzeit ohne Maintainer ist.

Die konkreten Änderungen für 1.4.2:

  • Double menuentries for Billing was shown (bug 1003)
  • APS menu now shows up again (bug 1002)
  • PHPMyAdmin/WebMail/WebFTP links in menu now show up again (bug 1061)
  • PHP Configuration is again editable (bugs 1024, 1029, 1031)
  • Several language mistakes in english language file were corrected (bug 1070)
  • Protected areas with lighttpd work again (bug 1050)
  • Awstats configuration page show all configs (bug 1001)
  • Added missing line break to nss-mysql.cnf (bug 1026)
  • Database query error by searching for ticket on categories page (bug 1073)
  • Resellers weren’t able to manage instances of their customers (bug 1088)
  • Autoresponder cron script didn’t ran because of short tags (bug 1045)
  • Autoresponder didn’t remove the cron lockfile if module was disabled (bug 1091)

Die Änderungen für 1.4.2.1:

  • Domain adding was case-insensitive, allowing same domain to be added multiple times (1057)
  • Domain panel pagination is faulty, shows too many pages (bug 1157)
  • Adding one-letter-subdomains didn’t work (bug 1064)
  • Wildcards are agin allowed in IP/Port configuration (bug 1115)
  • When adding IP/Port combination: Listen Statement not set (bug 1190)
  • Added Debian Lenny 5.0 Configfiles
  • Unable to add one-letter-subdomains (bug 1064)
  • It is not possible to add a forward as subdomain (bug 1015)
  • Admin messages always bounced because of switched email/name (bug 1160, 1040)
  • E-Mail-Accounts with IDN-Domains now work again (you have to change your configuration) (bug 1170)
  • Mail qouta in “email_quota_used” is not changed if mail account is deleted (bug 1107)
  • Customer can disable mail quota (bug 1100)
  • Number for email forwarders for customers not possible to set to unlimited (bug 1158)
  • Fixed lots of warnings in php code (bug 1044, 1048, 1141)
  • In new installations default dir for customers is now /var/customers (bug 1191)
  • Dropdown list of path is not sorted alphabetically (bug 1008)
  • Updated languagefiles (bug 1124, 1153, 1099)
  • Many alias fixes in awstats/webalizer (bug 1077, 1076, 1155, 1118, 1121)
  • Many fixes in the configfiles (bug 1167, 1164, 1192, 1069, 1085, 1161, 1030, 1103)
  • Keep default language when changed by user (bug 1119)
© 2005-2009 by Uli Wolf – This Content is distributed under the Creative Commons License
This feed is for personal, non-commercial use only.
The use of this feed on other websites without attribution to the author and notification of the author breaches copyright. If this content is not in your news reader, it makes the page you are viewing an infringement of the copyright. (Digital Fingerprint: d2a576b5311479d89eff39b7ca886f6b)
]]> http://wolf-u.li/2905/syscp-142-und-1421-wurden-released/feed/ 0 Zend_DB: Datenbankverbindungen mit Zeichensatz UTF-8 http://wolf-u.li/2893/zend_db-datenbankverbindungen-mit-zeichensatz-utf-8/ http://wolf-u.li/2893/zend_db-datenbankverbindungen-mit-zeichensatz-utf-8/#comments Sat, 11 Apr 2009 23:48:18 +0000 Uli http://wolf-u.li/?p=2893 Ein leidiges Problem im Webdevelopment sind die verschiedenen Zeichensätze. Viele Anbieter von Datenbanken setzen latin-1 als Standard, was gerade bei Seiten, die sich voll international ausrichten wollen, ein wenig Probleme bereiten kann. Oft führt das zu defekten Ausgaben. In diesem Beitrag möchte ich ein paar Lösungen für das Problem aufzeigen und zum Schluss die Lösung anhand des Zend Framework kurz zeigen.

Für die Extension mysql kann man natürlich einfach mittels:

PLAIN TEXT
CODE:
  1. mysql_set_charset('utf8');

die Verbindung nach dem Verbindungsaufbau auf UTF-8 umstellen. pdo_mysql ist nicht viel komplizierter:

PLAIN TEXT
CODE:
  1. $db = new PDO(
  2.     "mysql:host=localhost;dbname=DEINEDATENBANK",
  3.     'DEINNUTZERNAME', 'DEINPASSWORT',
  4.     array(PDO::MYSQL_ATTR_INIT_COMMAND => "SET NAMES utf8")
  5. );

Leider gibt das Probleme, wenn das verwendete Framework für die Datenbankverbindung Lazy-Connection verwendet bei dem die Verbindung zum Server zu Beginn der Laufzeit definiert, jedoch erst bei ersten eingehenden Query geöffnet wird.
Da ich gerne mit Zend Framework und pdo_mysql arbeite, gibt es einen trick, wie man trotzdem die Verbindung auf UTF-8 umschalten kann:

PLAIN TEXT
CODE:
  1. $params = array(
  2.     'host' => 'localhost',
  3.     'username' => 'DEINNUTZERNAME',
  4.     'password' => 'DEINPASSWORT',
  5.     'dbname' => 'DEINEDATENBANK',
  6.     'driver_options' => array(PDO::MYSQL_ATTR_INIT_COMMAND => 'SET NAMES UTF8;');
  7. );
  8. $db = Zend_Db::factory('PDO_MYSQL', $params);

Dies kann natürlich im Konfigurationsteil noch etwas verfeinert werden, aber ich denke, die Idee ist klar.

UPDATE:
In Zend_Application könnte die INI-Config so aussehen:

PLAIN TEXT
CODE:
  1. [production]
  2. resources.db.adapter = "pdo_mysql"
  3. resources.db.params.host = "localhost"
  4. resources.db.params.username = "DEINNUTZERNAME"
  5. resources.db.params.password = "DEINPASSWORT"
  6. resources.db.params.dbname = "DEINEDATENBANK"
  7. resources.db.params.driver_options.1002 = "SET NAMES UTF8;"
  8. resources.db.isDefaultTableAdapter = true

Update #2:
Zend Framework 1.8 bringt für alle unterstützten Datenbankadapter mittlerweile charset-support mit sich, der wie folgt aussieht:

PLAIN TEXT
CODE:
  1. [production]
  2. resources.db.adapter = "pdo_mysql"
  3. resources.db.params.host = "localhost"
  4. resources.db.params.username = "DEINNUTZERNAME"
  5. resources.db.params.password = "DEINPASSWORT"
  6. resources.db.params.dbname = "DEINEDATENBANK"
  7. resources.db.params.charset = utf8
  8. resources.db.isDefaultTableAdapter = true

© 2005-2009 by Uli Wolf - This Content is distributed under the Creative Commons License
This feed is for personal, non-commercial use only.
The use of this feed on other websites without attribution to the author and notification of the author breaches copyright. If this content is not in your news reader, it makes the page you are viewing an infringement of the copyright. (Digital Fingerprint: d2a576b5311479d89eff39b7ca886f6b)
]]> http://wolf-u.li/2893/zend_db-datenbankverbindungen-mit-zeichensatz-utf-8/feed/ 1 phpMyAdmin: Linker Frame zeigt “Keine Datenbanken” obwohl korrekte Rechte vorhanden http://wolf-u.li/2457/phpmyadmin-linker-frame-zeigt-keine-datenbanken-obwohl-korrekte-rechte-vorhanden/ http://wolf-u.li/2457/phpmyadmin-linker-frame-zeigt-keine-datenbanken-obwohl-korrekte-rechte-vorhanden/#comments Sun, 18 Jan 2009 12:26:55 +0000 Uli http://wolf-u.li/?p=2457 Ich habe gestern mal meine phpmyadmin-Installation komplett entfernt und alles neu installiert, da ich selbst bei fehlenden Rechten immer den Datenbanknamen im linken Frame angezeigt bekommen habe. Daraufhin wurde links im Frame gar nichts mehr angezeigt, sondern nur noch der Text "Keine Datenbanken".
Die Lösung war einfach: Ich hatte in einem Anfall geistiger Umnachtung in der my.cnf des MySQL-Servers den Punkt

skip-show-database

eingetragen, was dazu führte, dass phpmyadmin die Datenbanken natürlich nicht mehr anzeigen konnte. Diese Zeile geändert auf (auskommentiert):

#skip-show-database

und schon liefs wieder wie gewünscht ;)

© 2005-2009 by Uli Wolf - This Content is distributed under the Creative Commons License
This feed is for personal, non-commercial use only.
The use of this feed on other websites without attribution to the author and notification of the author breaches copyright. If this content is not in your news reader, it makes the page you are viewing an infringement of the copyright. (Digital Fingerprint: d2a576b5311479d89eff39b7ca886f6b)
]]> http://wolf-u.li/2457/phpmyadmin-linker-frame-zeigt-keine-datenbanken-obwohl-korrekte-rechte-vorhanden/feed/ 0 Passwort eines Benutzers in MySQL ändern http://wolf-u.li/1973/passwort-eines-benutzers-in-mysql-aendern/ http://wolf-u.li/1973/passwort-eines-benutzers-in-mysql-aendern/#comments Tue, 07 Oct 2008 08:07:28 +0000 Uli http://wolf-u.li/?p=1973 Nur ein kurzer Beitrag, weil das Thema hier grad durch die Reihen ging.

Das Passwort von MySQL-Nutzern kann man standardmäßig über zwei Wege ändern. Entweder in der MySQL-Konsole:

PLAIN TEXT
CODE:
  1. UPDATE user SET Password = PASSWORD( 'YOURPASSWORD' ) WHERE User = 'YOURUSER' AND Host = 'YOURHOST';
  2. FLUSH PRIVIEGES;

Wobei YOURUSER,YOURPASSWORD und YOURHOST durch die gewünschten Werte zu ersetzen sind. Wenn alle Hosts eines Nutzers geändert werden sollen, dann kann man die Bedingung AND Host='YOURHOST' entfernen.

Die andere Möglichkeit ist über den mysqladmin:

PLAIN TEXT
CODE:
  1. mysqladmin --user=YOURUSER --password=YOUROLDPASSWORD password YOURPASSWORD"

Wobei YOURUSER und YOURPASSWORD durch die gewünschten Werte zu ersetzen sind und YOUROLDPASSWORD das bisherige Passwort sein muss.

© 2005-2009 by Uli Wolf - This Content is distributed under the Creative Commons License
This feed is for personal, non-commercial use only.
The use of this feed on other websites without attribution to the author and notification of the author breaches copyright. If this content is not in your news reader, it makes the page you are viewing an infringement of the copyright. (Digital Fingerprint: d2a576b5311479d89eff39b7ca886f6b)
]]> http://wolf-u.li/1973/passwort-eines-benutzers-in-mysql-aendern/feed/ 4 phpMyAdmin auf dem Conceptronic CH3SNAS bzw. D-Link DNS-323 installieren http://wolf-u.li/1640/phpmyadmin-auf-dem-conceptronic-ch3snas-bzw-d-link-dns-323-installieren/ http://wolf-u.li/1640/phpmyadmin-auf-dem-conceptronic-ch3snas-bzw-d-link-dns-323-installieren/#comments Fri, 11 Jul 2008 07:28:50 +0000 Uli http://wolf-u.li/?p=1640 phpMyAdmin ist eines der am häufigst verwendeten Administrationstools für MySQL-Datenbanken. Leider hat auf meinem CH3SNAS phpMyAdmin nicht auf Anhieb funktioniert. Der Trick ist jedoch recht einfach.

Diese Anleitung bezieht sich auf das fun_plug der Version 0.5.
Die Anweisungen können aber auch mit früheren Versionen funktionieren.

Natürlich muss zunächst das fun_plug und MySQL sowie PHP installiert werden.

Nun muss man den aktuellen phpMyAdmin herunterladen. Diesen gibt es auf Sourceforge zum Download. Aktuell ist momentan (05.02.2010) beispielsweise die Version 3.2.5.

PLAIN TEXT
CODE:
  1. cd /srv/www/pages/
  2. wget http://switch.dl.sourceforge.net/sourceforge/phpmyadmin/phpMyAdmin-3.2.5-all-languages.tar.gz
  3. tar xfz phpMyAdmin-3.2.5-all-languages.tar.gz
  4. rm phpMyAdmin-3.2.5-all-languages.tar.gz
  5. mv phpMyAdmin-3.2.5-all-languages phpmyadmin

Nachdem man das aktuelle Paket im Webroot des lighttpd entpackt hat, kann man sich an die Konfiguration machen. Am schnellsten geht dies über die Konsole. Editiere die Datei config.inc.php im Verzeichnis phpmyadmin, sodass diese wie unten aussieht:

PLAIN TEXT
CODE:
  1. /* Servers configuration */
  2. $i = 0;
  3.  
  4. /* Server localhost */
  5. $i++;
  6. $cfg['Servers'][$i]['host'] = 'localhost';
  7. $cfg['Servers'][$i]['extension'] = 'mysql';
  8. $cfg['Servers'][$i]['connect_type'] = 'tcp';
  9. $cfg['Servers'][$i]['compress'] = false;
  10. $cfg['Servers'][$i]['auth_type'] = 'http';

Hinweis: Die PHP-Tags (<?php und ?>) sind natürlich nicht zu vergessen

Und schon ist phpMyAdmin über http:///phpmyadmin/ zu erreichen. Passwort und Nutzername sind oft während der Einrichtung gesetzt worden, zumeist ist der Nutzername "root".

Bei der Konfiguration ist folgendes zu bemerken:

  • Authentifizierungsmethode: http, da cookie ohne die PHP-Extension mcrypt phpMyAdmin stark verlangsamt.
  • Wenn der Fehler: #2002 - Der Server antwortet nicht. (evtl. ist auch der Socket des lokalen MySQL-Servers socket nicht korrekt konfiguriert) auftritt, muss der Servername von localhost auf 127.0.0.1 gesetzt werden, damit phpMyAdmin connecten kann. Achtung: Dann muss aber auch "skip-networking" von MySQL deaktiviert sein.

Changelog des Eintrags:

  • 09.10.2008: Überarbeitung passend zum Update des lighttpd & MySQL-Eintrags.
  • 23.11.2008: Neue Versionsnummer 3.0.1.1
  • 17.01.2009: Neue Versionsnummer 3.1.1
  • 05.02.2010: Neue Versionsnummer 3.2.5
© 2005-2009 by Uli Wolf - This Content is distributed under the Creative Commons License
This feed is for personal, non-commercial use only.
The use of this feed on other websites without attribution to the author and notification of the author breaches copyright. If this content is not in your news reader, it makes the page you are viewing an infringement of the copyright. (Digital Fingerprint: d2a576b5311479d89eff39b7ca886f6b)
]]> http://wolf-u.li/1640/phpmyadmin-auf-dem-conceptronic-ch3snas-bzw-d-link-dns-323-installieren/feed/ 73 PHP und MySQL auf dem Conceptronic CH3SNAS bzw. D-Link DNS-323 installieren http://wolf-u.li/1425/php-und-mysql-auf-dem-conceptronic-ch3snas-bzw-d-link-dns-323-installieren/ http://wolf-u.li/1425/php-und-mysql-auf-dem-conceptronic-ch3snas-bzw-d-link-dns-323-installieren/#comments Sat, 05 Jul 2008 22:42:58 +0000 Uli http://wolf-u.li/?p=1425 Diese Anleitung bezieht sich auf das fun_plug der Version 0.5.
Die Anleitung für 0.3 und 0.4 befindet sich hier.

Nach meinem Artikel über die Installation von PHP5.2 zusammen mit dem Webserver lighttpd gehe ich nun einen Schritt weiter. Es geht konkret um die Installation von MySQL5.1 inklusive PHP5.2 zusammen mit dem Webserver lighttpd auf dem NAS.

Voraussetzung für die Installation ist die Einrichtung des fun_plug in der Version 0.5, welche hier oder hier (USB-Stick-Version) zu finden ist. Für alle Listings in diesem Beitrag gilt: Wenn man auf "Plain Text" klickt, gehts kopieren leichter ;) Und wenn Pfade abgeändert werden sollen, bitte selbstständig anpassen.

Der Macher des fun_plug, fonz, hat die Pakete lighttpd, PHP und MySQL in seinem Repository dem Update vom 24. August bereitgestellt. Der Webserver lighttpd wird bereits mit dem fun_plug installiert (jedoch nicht aktiviert), die beiden Pakete für PHP und MySQL müssen noch auf das NAS heruntergeladen werden. Dazu muss man das Repository von fonz und mir wie gewohnt syncronisieren.

Wenn man (so wie im ffp0.5-Tutorial beschrieben) bereits früher einmal das PHP von fonz installiert hat, so muss man dieses mittels "funpkg -u" nun upgraden.

Normalerweise wird man die beiden Pakete wie folgt installieren, zusätzlich benötigt man curl:

PLAIN TEXT
CODE:
  1. funpkg -i /ffp/pkg/packages/mysql-*.tgz funpkg -i /ffp/pkg/additional/*/curl-*.tgz funpkg -i /ffp/pkg/additional/*/php-*.tgz

Alle Webdienste werden in Zukunft das Verzeichnis /srv/ als Datenablageort nutzen. Da es unklug wäre, diese Speicherort auf dem kleinen RAM des NAS zu erzeugen, werden wir nun erstmal einen Link zu einem Verzeichnis auf der Festplatte oder dem USB-Stick erstellen. In meinem Beispiel werde ich /srv auf meinem USB-Stick linken. Dazu öffnet man die Datei /ffp/etc/fun_plug.init und fügt am Ende folgendes ein:

PLAIN TEXT
CODE:
  1. # create custom link to the server-folder
  2. ln -s /mnt/HD_a2/usbstorage/srv/ /srv

Den letzten Befehl führen wir nun auch gleich auf der Konsole aus, damit der Link erstellt wird. Zunächst erstellen wir jedoch das Verlinkte Verzeichnis:

PLAIN TEXT
CODE:
  1. mkdir /mnt/HD_a2/usbstorage/srv/
  2. ln -s /mnt/HD_a2/usbstorage/srv/ /srv

Der Webserver lighttpd muss noch konfiguriert werden, damit auch dieser auf die richtigen Verzeichnisse zugreift. Ein Beispiel für eine Config liefert fonz bereits mit; diese wird nun genutzt. Ich lasse mittels sed die Pfade korrekt ersetzen.

PLAIN TEXT
CODE:
  1. cp /ffp/etc/examples/lighttpd.conf-with-php /ffp/etc/lighttpd.conf
  2. sed -i 's!/mnt/HD_a2/!/srv/!g' /ffp/etc/lighttpd.conf

Damit php auch weiß, was erlaubt oder verboten ist, muss eine php.ini im Verzeichnis /ffp/etc/ liegen. Diese kann man entweder wie die lighttpd.conf aus dem Verzeichnis /ffp/etc/examples kopieren oder direkt eine verbesserte (Siehe Kommentare) herunterladen:

PLAIN TEXT
CODE:
  1. wget http://wolf-u.li/download-manager.php?id=16 -O /ffp/etc/php.ini

Und die my.cnf von MySQL darf natürlich nicht fehlen:

PLAIN TEXT
CODE:
  1. cp /ffp/etc/examples/mysql/my-small.cnf /ffp/etc/my.cnf

Nun befinden sich die drei wichtigen Dateien php.ini (Konfiguration von PHP), lighttpd.conf (Konfiguration für den Webserver) sowie my.cnf (Konfiguration des MySQL-Servers) im Verzeichnis /ffp/etc/
Prinzipiell sollten alle Configs mal durchgesehen werden, ob die Werte so okay sind.

Der Webroot des Webservers ist direkt auf /srv/www/ gelegt, dort muss man nun die entsprechenden Verzeichnisse erstellen:

PLAIN TEXT
CODE:
  1. mkdir -p /srv/tmp/
  2. mkdir -p /srv/www/logs
  3. mkdir -p /srv/www/pages

Die MySQL-Datenbank muss noch initialisiert werden mittels der folgenden Befehle:

PLAIN TEXT
CODE:
  1. mysql_install_db
  2. sh /ffp/start/mysqld.sh start
  3. /ffp/bin/mysql_secure_installation

Dort wird nun nach dem Passwort gefragt: "Enter current password for root (enter for none):" Bei einer neuen Installation ist dieses einfach leer!

Nun kann man den Webserver mal starten:

PLAIN TEXT
CODE:
  1. sh /ffp/start/lighttpd.sh start

Sollte dieser schon laufen, muss der Befehl start durch restart ersetzt werden.

Sollte alles glatt gehen, so kann man die Pakete im fun_plug dauerhaft aktivieren:

PLAIN TEXT
CODE:
  1. chmod a+x /ffp/start/lighttpd.sh
  2. chmod a+x /ffp/start/mysqld.sh

Kleiner Hinweis am Rand: Der Webserver startet bis jetzt auf Port 8080. Möchte man diesen auf Port 80 (also den regulären HTTP-Port) legen, so muss man folgende Befehle ausführen:

PLAIN TEXT
CODE:
  1. sed -i '/server.port/ s/^/#/' /ffp/etc/lighttpd.conf
  2. chmod a+x /ffp/start/kickwebs.sh

Dies bewirkt, dass der interne Webserver für die Weboberfläche gekillt wird, anschließend startet lighttpd und legt sich auf Port 80. Der interne Webserver ist ein paar Minuten später dann auf Port 81 wieder verfügbar.

Standardmäßig sind in meiner PHP.ini derzeit die untenstehenden Extensions aktiviert. Danke an Peter für den Hinweis!

Einzelne Extensions kann man problemlos auch deaktivieren oder eventuell auch neue hinzufügen (bitte per Kommentar melden, wenn eine fehlt!). Welche momentan überhaupt verfügbar sind, bekommt man mittels "ls -al /ffp/lib/php/extensions/no-debug-non-zts-20060613/" heraus. Dann sucht man den Punkt "Dynamic Extensions" in der /ffp/etc/php.ini und kommentiert dort die Extensions ein oder aus. Beispielhaft hier mbstring aktiviert:

PLAIN TEXT
CODE:
  1. extension=mbstring.so

Momentan sind folgende verfügbar und aktiviert:

calendar
ctype
ftp
gd
mbstring
mysql
pdo
pdo_mysql
pdo_sqlite
sqlite
tokenizer
zlib

Changelog des Eintrags:
09.10.2008 - 01:30

  • Update: Umstieg auf fonz' Pakete.
  • Umstellung des Webroots auf /srv/
  • Cleanup der php.ini
  • Anpassung aller Pfade
© 2005-2009 by Uli Wolf - This Content is distributed under the Creative Commons License
This feed is for personal, non-commercial use only.
The use of this feed on other websites without attribution to the author and notification of the author breaches copyright. If this content is not in your news reader, it makes the page you are viewing an infringement of the copyright. (Digital Fingerprint: d2a576b5311479d89eff39b7ca886f6b)
]]> http://wolf-u.li/1425/php-und-mysql-auf-dem-conceptronic-ch3snas-bzw-d-link-dns-323-installieren/feed/ 136 Einfaches MySQL-Backup mit Pruning und Verschlüsselung mittels bash & rsync http://wolf-u.li/1291/einfaches-mysql-backup-mit-pruning-und-verschluesselung-mittels-bash-rsync/ http://wolf-u.li/1291/einfaches-mysql-backup-mit-pruning-und-verschluesselung-mittels-bash-rsync/#comments Mon, 02 Jun 2008 19:47:32 +0000 Uli http://wolf-u.li/?p=1291 Vor einiger Zeit habe ich für meine Server ein MySQL-Backup-Script geschrieben, welches alle Datenbanken einzeln in verschlüsselte Dateien dumpt und diese per rsync auf einen Server oder in ein anderes Verzeichnis kopiert. Warum eigentlich mit Verschlüsselung wird sich nun der ein oder andere fragen? Nun mein Serveranbieter legt zu meinem Root-Server einen Backup-Space bei, der wahlweise per FTP, Rsync oder Samba erreichbar ist. Da ich einige Features von rsync, wie beispielsweise abgleich eines lokalen Verzeichnisses mit einem entfernten (auch mit Löschen von Dateien, wenn diese am Ausgangsort nicht mehr existieren), schätze, habe ich mich für diesen Weg entschieden. Vielleicht ist dieses Script nicht das eleganteste, aber es funktioniert seit etlichen Monaten bestens und etliche Restores haben auch schon bewiesen, dass es nötig ist.

Zunächst das Script, unten folgen die Erklärungen und Anweisungen zur Benutzung:

PLAIN TEXT
CODE:
  1. #!/bin/bash
  2. BACKUPPATH="/YOURDIR/";
  3. DELOLDERTHAN=$(date --date '-10 Days' +%s);
  4. MYSQLUSER="YOURLUSER";
  5. MYSQLPASS="YOURPASSWORD";
  6. RSYNCCOMAND="/usr/bin/rsync -qravm --force --delete-after $BACKUPPATH rsync://YOURREMOTESERVER/YOURREMOTEDIR/"
  7. CRYPTPASS="YOURCRYPTPASSWORD";
  8. #########################################################
  9. ##############DO NOT CHANGE ANYTHING BELOW###############
  10. #########################################################
  11. TODAY=$(date +%s);
  12. WORKDIR=$BACKUPPATH$TODAY"/";
  13. DBLIST=$WORKDIR"/backup.list";
  14. MD5FILE=$WORKDIR"/backup.md5";
  15. TIMESTAMPFILE=$WORKDIR"/backup.timestamp";
  16.  
  17. if [ "$1" = "-h" ];then
  18.         echo "Uli's Backup Script V0.5";
  19.         echo "Copyright 2008 by Ulrich Wolf <m [AT] il [DOT] wolf-u [DOT] li>";
  20.         echo "Parameters:";
  21.         echo "-v Verbose Output with Parameter";
  22.         echo "-f Force Overwrite of Backupdirectory";
  23.         exit 0;
  24. fi
  25. #########################################################
  26. echo "==================================================";
  27. echo -n "Anlegen des Backupverzeichnisses $TODAY";
  28. if ([ -e $WORKDIR ] && [ "$1" != "-f"]); then
  29.         echo "...[fail]";
  30.         if [ "$1" != "-f"]; then
  31.                 echo "Directory already exists. Quitting...";
  32.                 exit 1;
  33.         fi
  34. fi
  35. mkdir -p $WORKDIR
  36. echo "...[done]";
  37. echo "Backup "$(date '+%F %T')> $TIMESTAMPFILE
  38. mysqlshow -u$MYSQLUSER -p$MYSQLPASS | awk '{print $2}' | sed -e '/^[ ]*$/d' | grep -v Databases | sort>$DBLIST;
  39. DBANZAHL=$(wc -l $DBLIST | cut -d' ' -f 1);
  40. echo "MySQL-Datenbanken werden gesichert - Anzahl: $DBANZAHL";
  41. echo -n "Backup running";
  42. if [ "$1" = "-v" ];then
  43.         for ((i = 0; i <$DBANZAHL; i++)); do
  44.                 echo -n '_';
  45.         done;
  46.         echo -n $'_\r';
  47. fi
  48. COUNT=0;
  49. for x in `cat $DBLIST`; do
  50.         mysqldump --opt -u$MYSQLUSER -p$MYSQLPASS $x | gzip -c | /usr/bin/openssl aes-256-cbc -salt -pass pass:$CRYPTPASS> $WORKDIR$x.sql.gz.aes;
  51.         let "COUNT += 1"
  52.         if [ "$1" = "-v" ];then
  53.                 echo -n "#";
  54.                 sleep 1;
  55.         fi
  56. done;
  57. echo "...[done]";
  58. echo "Backup: $COUNT/$DBANZAHL erfolgreich";
  59. echo -n "MD5:";
  60. md5sum $WORKDIR*>$MD5FILE;
  61. echo "...[done]";
  62. echo "==================================================";
  63. echo "Purging old Backups";
  64. VERZEICHNISSE=$(ls -gGl $BACKUPPATH| grep ^d| tr -s [:blank:] " " |cut -d' ' -f 7);
  65. for dir in $VERZEICHNISSE
  66. do
  67.         if [ $dir -lt $DELOLDERTHAN ];then
  68.                 echo "Deleting "$BACKUPPATH$dir;
  69.                 rm -R $BACKUPPATH$dir;
  70.         fi;
  71. done
  72. echo "MySQL-Backup abgeschlossen";
  73. echo "==================================================";
  74. echo -n "Executing Rsync";
  75. RSYNC=$($RSYNCCOMAND);
  76. ER=$?;
  77. if [ $? = 0 ] ; then
  78.         echo "...[done]";
  79. else
  80.         echo "...[fail]";
  81.         echo $RSYNC;
  82. fi
  83. echo "==================================================";

Das Script beginnt mit diversen Configs:

  • BACKUPPATH="/YOURDIR/";
    Zu Ändern: Konfiguriert das lokale Backupverzeichnis
  • DELODERTHAN=$(date --date '-14 Days' +%s);
    Für versierte Nutzer: Anzahl der Tage, die ein Backup besteht, bitte nur die Zahl ändern, andere Werte auf eigene Gefahr.
  • MYSQLUSER="YOURLUSER";
    MySQL-Nutzer für den Zugriff auf alle Datenbanken
  • MYSQLPASS="YOURPASSWORD";
    MySQL-Passwort für den Nutzer mit Zugriff auf alle Datenbanken
  • RSYNCCOMAND="/usr/bin/rsync -qravm --force --delete-after $BACKUPPATH rsync://YOURREMOTESERVER/YOURREMOTEDIR/"
    Rsync-Zielserver
  • CRYPTPASS="YOURCRYPTPASSWORD";
    Verschlüsselungspasswort im Klartext

Sollte das Pruning fehlschlagen, so liegt es an der Zeile:

PLAIN TEXT
CODE:
  1. VERZEICHNISSE=$(ls -gGl $BACKUPPATH| grep ^d| tr -s [:blank:] " " |cut -d' ' -f 7);

Evtl muss hinten die Zahl verändert werden. Das Pruning arbeitet bei mir relativ einfach: es werden alle Verzeichnisse untereinander aufgelistet und anschließend wird jede geprüft, ob es veraltet ist. Wenn ja, dann wird es gelöscht und eine entsprechende Meldung ausgegeben.

Natürlich kann man das Script bestens im Cron laufen lassen, ich bekommen täglich zwei Mails dazu und gut is ;)

Restore geht ganz einfach:
Die Dateien sind ja nun als *.sql.gz.aes abgelegt. Für den Restore benötigt man nun das Plaintext-SQL-File, welches mit folgendem Befehl zu bekommen ist:

PLAIN TEXT
CODE:
  1. openopenssl enc -d -aes-256-cbc -in INPUTFILE -pass pass:YOURCRYPTPASSWORD|gunzip> OUTPUTFILE

Wobei YOURCRYPTPASSWORD durch das oben gesetzte Passwort zu ersetzen ist. INPUTFILE ist das gesicherte Archiv mit der Datenbank und OUTPUTFILE ist das Plaintext-SQL-File.

Bei Fragen einfach melden ;)

© 2005-2009 by Uli Wolf - This Content is distributed under the Creative Commons License
This feed is for personal, non-commercial use only.
The use of this feed on other websites without attribution to the author and notification of the author breaches copyright. If this content is not in your news reader, it makes the page you are viewing an infringement of the copyright. (Digital Fingerprint: d2a576b5311479d89eff39b7ca886f6b)
]]> http://wolf-u.li/1291/einfaches-mysql-backup-mit-pruning-und-verschluesselung-mittels-bash-rsync/feed/ 2 Eine kleine MySQL-Klasse für PHP http://wolf-u.li/787/eine-kleine-mysql-klasse-fuer-php/ http://wolf-u.li/787/eine-kleine-mysql-klasse-fuer-php/#comments Fri, 07 Dec 2007 22:53:11 +0000 Uli http://wolf-u.li/787/eine-kleine-mysql-klasse-fuer-php/ Ich habe mir eine kleine MySQL-Klasse für PHP gebastelt, die mittlerweile schon von einigen Kumpels für ihre eigenen Projekte kopiert wurde. Die Klasse besteht aus einer Config-Datei und der Datenbankklasse selbst. Ich bin mir sicher, dass man einige Dinge besser machen könnte, diese Klasse ist aber für viele Anwendungsbereich vollkommen ausreichend. Verbesserungsvorschläge sind willkommen!

Hier zunächst der Download der beiden untenstehenden Dateien in einem Zip-Archiv: wolf-uli-database-class.zip

Show ▼

Wie kann man also nun die Klasse verwenden? Zunächst braucht man entweder das Zip-Archiv oder man nimmt die vorstehende Datenbankklasse, welche man als db.php im Webserververzeichnis ablegt. Nun legt man im gleichen Verzeichnis eine beliebige PHP-Datei an, welche mit dem folgenden Inhalt gefüllt wird:
Show ▼

Wie man sieht, wird zunächst eine Verbindung mit der Datenbank aufgebaut, anschließend wird ein Query abgesetzt und dieser verarbeitet. Zuletzt wird die Verbindung geschlossen.

Bei Fragen einfach melden. Ich übernehme keine Verantwortung für entstehende Schäden und Datenverluste :P Diese Klasse wurde nach bestem Wissen und Gewissen geschrieben.

© 2005-2009 by Uli Wolf - This Content is distributed under the Creative Commons License
This feed is for personal, non-commercial use only.
The use of this feed on other websites without attribution to the author and notification of the author breaches copyright. If this content is not in your news reader, it makes the page you are viewing an infringement of the copyright. (Digital Fingerprint: d2a576b5311479d89eff39b7ca886f6b)
]]> http://wolf-u.li/787/eine-kleine-mysql-klasse-fuer-php/feed/ 3 MySQL-Tuning per my.cnf und Analyse-Skript http://wolf-u.li/728/mysql-tuning-per-mycnf-und-analyse-skript/ http://wolf-u.li/728/mysql-tuning-per-mycnf-und-analyse-skript/#comments Fri, 03 Aug 2007 11:37:13 +0000 Uli http://wolf-u.li/728/mysql-tuning-per-mycnf-und-analyse-skript/ 276-mysql-tuning-nach-toomany-connections.jpgHeute morgen hats mich erwischt...der MySQL5-Server hatte ein kleines Problem...
Aufgrund der gestiegenen Last auf dem neuen Server hat die Anzahl der Queries die Anzahl der max_connections erreicht. Was heisst das konkret? Queries, welche nach dem Überschreiten dieser Zahl gesetzt werden, werden nicht ausgeführt, sondern mit dem Fehler "Too many Connections (localhost)" abgewiesen.

Wie kann man nun den MySQL-Server ein wenig tunen?

Es gibt hierzu ein Skript von Day32, welches bei mir hervorragende Dienste geleistet hat:

PLAIN TEXT
CODE:
  1. cd /usr/src/
  2. wget http://www.day32.com/MySQL/tuning-primer.sh
  3. sh tuning-primer.sh

Tuning primer gibt nun eine Menge Vorschläge und Ratschläge aus, um den MySQL-Server ein bisschen zu tunen. Bei mir wars vor allem die Variable max_connections, welche per Default auf 100 steht, die nun ein wenig zu niedrig war.

Um dies zu ändern öffnet man die Datei my.cnf (bei mir unter /etc/mysql/) und fügt in der Sektion [mysqld] folgenden Wert hinzu (Bitte Anzahl der gleichzeitigen Verbindungen selbst wählen, ich habe mal 500 eingetragen):

PLAIN TEXT
CODE:
  1. max_connections       = 250

Achtung: Bei mir trat ein Fehler auf, wenn ich vor und nach dem '=' keine Leerzeichen gesetzt hatte. Ausserdem wird für jede Connection Ram benötigt, tuning-primer meckert aber dann schon ;)

Nun kann man entweder den Server neu starten, oder man setzt es temporär bis zum Neustart mit einem Query in die Datenbank:

PLAIN TEXT
CODE:
  1. mysql -u root -p
  2. mysql> set GLOBAL max_connections=250;
  3. mysql> exit;

Man kann das schnell prüfen, in dem man vor dem exit; folgenden Befehl in die Datenbank absetzt:

PLAIN TEXT
CODE:
  1. show variables like 'max_connections';

Weitergehende Informationen bekommt man beim Hersteller im Handbuch.

Danke an dieser Stelle an Alex (dem ich den Fehler nicht glauben wollte) und PaGo (für den Screenshot, ich hab da noch geschlafen :) )

© 2005-2009 by Uli Wolf - This Content is distributed under the Creative Commons License
This feed is for personal, non-commercial use only.
The use of this feed on other websites without attribution to the author and notification of the author breaches copyright. If this content is not in your news reader, it makes the page you are viewing an infringement of the copyright. (Digital Fingerprint: d2a576b5311479d89eff39b7ca886f6b)
]]> http://wolf-u.li/728/mysql-tuning-per-mycnf-und-analyse-skript/feed/ 0