Loadbalancing für MySQL (-Slaves)

30.12.2008 | 17:04:38

Dieser Artikel im Blog eines Kollegen hat mich dazu veranlasst mir den verwendeten Algorithmus mal ein wenig näher anzusehen und zu überarbeiten - und ihn zumindest in Sachen Speicherbedarf zu verbessern. Heraus gekommen ist folgendes:

function getSlave($cluster)
{
        // gibt es nur einen Server im Array, wird dieser zurückgeliefert
        if(count($databaseClusters[$cluster]) == 1) {
                return "master";
        }
        else {
                $sum = 0;
                foreach($databaseClusters[$cluster] as $slave) {
                        $sum += $slave["prio"];
                }
                $randomVal = rand(0, $sum);
                if($randomVal < $sum / 2) {
                        $i = 0;
                        $tmpSum = 0;
                        while($tmpSum < $randomVal) {
                                  $tmpSum += $databaseClusters[$cluster]["slave$i"]["prio"];
                                  $i++;
                        }
                }
                else {
                        $i = count($databaseClusters[$cluster]);
                        $tmpSum = $sum;
                        while($tmpSum < $randomVal) {
                                $tmpSum -= $databaseClusters[$cluster]["slave$i"]["prio"];
                                $i--;
                        }
                }
 
                return "slave$i";
        }
}

Herausgekommen ist dadurch zwar eine längere aber im Allgemeinen speicherschonendere Methode um Datenbankqueries zu verteilen. Um weitere Informationen zu erhalten lest bitte bei meinem Kollegen weiter.

SVN mit JavaHL unter Windows

19.12.2008 | 17:55:41

Im Rahmen einiger privater, als auch in Projekten für meinen Arbeitgeber setze ich in eclipse Subclipse für die Versionsverwaltung ein. Bisher war das an meinem Windows-PC nur in Verbindung mit dem (viel zu langsamen) SVNKIT möglich. Um das schnellere JavaHL einzusetzen muss man leider ein klein wenig “tricksen”. Hier nun eine kurze Anleitung wie es dennoch möglich ist:

1. Installation von subclipse wie auf subclipse.tigris.org beschrieben

2. Herunterladen und installieren von tortoisesvn (zu finden hier: tortoisesvn.net)

3. Nach dem Systemneustart (tortoisesvn erfordert diesen leider scheinbar) die Datei [Laufwerk]:\Dokumente und Einstellungen\[Aktueller Benutzername]\Anwendungsdaten\Subversion\config bearbeiten (Achtung: die doppelten Backslashes sind wichtig!):

3.1 nach “[tunnels]” suchen
3.2 darunter einfügen (Mit public/private-key): ssh = [Laufwerk]:\\Programme\\TortoiseSVN\\bin\\TortoisePlink.exe -i “[Laufwerk]:\\[Pfad zum Keyfile]“
—-> sollte kein Key verfügbar sein, einfach den Parameter “-i” mit allem was danach kommt weg lassen
3.3 speichern und schließen ;-)

4. In eclipse in “Window” -> “Preferences” -> “Team” -> “SVN” unter “SVN Interface” JavaHL auswählen und darunter (”Configuration Location”) “Use Directory” auswählen. Dort dann den Pfad zur Subversion-Config eintragen (s. Punkt 2), abschließend auf “Apply” und/oder “Ok” klicken und fertig. Ab jetzt könnt ihr JavaHL verwenden.

Hinweise zur Erstellung des Key-Files:
Hierfür bietet sich insbesondere das Tool “PUTTYgen” das beim Putty dabei ist an - hat man bereits einen unter Linux erstellten Public/Private-Key kann man den hier in das unter Windows benötigte Format umwandeln. Putty gibt es unter anderem hier: PUTTY-Download

Diese Beschreibung sollte so auf allen eclipse-Plattformen (wie zum Beispiel auch Aptana Studio) ab eclipse-Version 3.2 funktionieren - wahrscheinlich auch schon früher.

You will find the english version below.

In einem Projekt, an dem ich für meine Firma im Moment arbeite, hatten wir das Problem, dass wir in einer AJAX-Anwednung den Zurück-Button benutzbar halten mussten. Die Varianten diese Funktionalität bereit zu stellen waren entweder eine eigene Lösung zu finden oder eine schon fertige (möglichst in allen gängigen Browsern lauffähige) Bibliothek zu verwenden. Die Wahl fiel, auf Grund unterschiedlicher Widrigkeiten - allen voran die mangelnde Erfahrung mit Projekten dieser Art, sehr schnell auf eine fertige Lösung. Ich wusste bereits von einer Variante, die das xajax-Framework verwendet, jedoch haben wir diese nicht verwendet - eine weitere Vorraussetzung war, dass die Bibliothek sich problemlos im Zusammenspiel mit dem “Prototype JavaScript Framework” integrieren lassen musste. Die Wahl fiel dann letztlich auf die “Real Simple History” RSH Bibliothek.

Aus dieser Wahl ergab sich jedoch, nach einigem Testen, ein Problem: sie ist in ihrer aktuell verfügbaren Version (0.6) nur bis Safari 3.0.x lauffähig. Da sich der Safari ab Version 3.1.x ähnlich verhält wie der Firefox, musste die “Browserweiche” in RSH ein wenig umgearbeitet werden. Letztlich habe ich also an der Stelle, an der die jeweiligen Browser heraus gefiltert werden, für den Safari ab Version 3.1 noch eine weitere Aufteilung geschaffen. Mit dieser Änderung war die Bibliothek dann voll für unsere Zwecke einsetzbar. Die Änderungen findet ihr direkt im Anschluss an die englische Version dieses Beitrages. Da ich nur die rsh.js angepasst habe, werde ich auch nur diese hier zum Download anbieten. Zur vollständigen Version gehts hier: http://code.google.com/p/reallysimplehistory/

English version:

Last week, as I was working for an actual project of LOTUM GmbH. We had to provide the back-button functionality also in an AJAX-based website. The 2 choices we had, were to develop everything ourselves or use an allready tested open source-library. We decided for the second one an at least found the “Really Simple History” (RSH) library.

The problem was, that this library only worked fine with Safari until version 3.0.x. So I had to change the browser-detection a little bit, after all, Safari works like Firefox since Version 3.1.0 and only this point had to be changed. Now the adapted version runs for Safari in all versions since 2.0.3. Because I only altered the rsh.js, I will only provide this file here. In the code snippet afterwards you will find my changes, too. For full version have a look at: http://code.google.com/p/reallysimplehistory/

/* original */
/*set user-agent flags*/
var UA = navigator.userAgent.toLowerCase();
var platform = navigator.platform.toLowerCase();
var vendor = navigator.vendor || "";
if (vendor === "KDE") {
	this.isKonqueror = true;
	this.isSupported = false;
} else if (typeof window.opera !== "undefined") {
	this.isOpera = true;
	this.isSupported = true;
} else if (typeof document.all !== "undefined") {
	this.isIE = true;
	this.isSupported = true;
} else if (vendor.indexOf("Apple Computer, Inc.") > -1) {
	this.isSafari = true;
	this.isSupported = (platform.indexOf("mac") > -1);
} else if (UA.indexOf("gecko") != -1) {
	this.isGecko = true;
	this.isSupported = true;
}
/* new version */
/*set user-agent flags*/
var UA = navigator.userAgent.toLowerCase();
var platform = navigator.platform.toLowerCase();
var vendor = navigator.vendor || "";
if (vendor === "KDE") {
	this.isKonqueror = true;
	this.isSupported = false;
} else if (typeof window.opera !== "undefined") {
	this.isOpera = true;
	this.isSupported = true;
} else if (typeof document.all !== "undefined") {
	this.isIE = true;
	this.isSupported = true;
} else if (vendor.indexOf("Apple Computer, Inc.") > -1) {
	var safariVersion = navigator.appVersion.substr(navigator.appVersion.indexOf("Safari")-6, 3);
	if (safariVersion < 3.1) {
		this.isSafari = true;
		this.isSupported = (platform.indexOf("mac") > -1);
	}
	else
	{
		this.isGecko = true;
		this.isSupported = true;
	}
} else if (UA.indexOf("gecko") != -1) {
	this.isGecko = true;
	this.isSupported = true;
}

Die angepasste Version von rsh.js / The adapted version of rsh.js

CIFS - Der Ersatz von SMBFS

26.09.2008 | 20:59:25

Sicher, es ist schon eine Weile her, dass SMBFS ersetzt wurde, allerdings ist es mir erst gestern wirklich aufgefallen. Problem war (auf Grund verschiedener Widrigkeiten) ein “downgrade” von Debian Lenny (5.0) auf Debian Etch (4.0). Inzwischen liefen die zu bearbeitenden Webserver mit dem Kernel von Lenny, den wir (ein Kollege und ich) nicht mehr austauschen wollten. Nachdem wir einige fehlerhaft gemountete Netzlaufwerke ausgemacht hatten (allesamt SMBFS) versuchten wir dieses Problem zu beheben. Geäußert hatte sich dies mit der folgenden Meldung:

ERROR: smbfs filesystem not supported by the kernel
Please refer to the smbmnt( manual page
smbmnt failed: 255)

Verwirrt dabei hatte mich, dass SMBFS installiert war und im eigentlich “kein” Grund dafür bestand, dass dieses Problem überhaupt bestand. Nach ein bisschen googlen habe ich dann herrausgefunden, dass smbfs inzwischen “deprecated” ist und daher ein anderes - mindestens gleichwertiges - Dateisystem verwendet werden sollte. Die Lösung lautete einfach “cifs” statt “smbfs” in der Datei “/etc/fstab” zu verwenden. Schließlich ließen sich dann die zuvor mit smbfs gemounteten Verzeichnisse wieder anstandslos mounten.

Was lange wärt …

04.09.2008 | 21:09:36

… wird endlich gut. Das gilt auch für meine Bachelorarbeit die ich im Rahmen dieses Artikels nun endlich veröffentlichen möchte. Was, trotz schon lange erfolgter Freigabe, immer wieder hinaus geschoben wurde. Benotet wurde sie (insgesamt) mit einer 2,3.

Kurz zum Thema der Arbeit: es ging um die Usability von sogenannten Web2.0-Seiten. Im Rahmen der Arbeit habe ich geprüft, in wie weit die wichtigsten Richtlinien - hierzu zählen unter anderem 2 ISO-Normen und ein Bundesgesetz - mit dem JBoss Richfaces Framework umsetzbar sind. Interessant dürfte der Inhalt der Arbeit aber auch allgemein, wenn es um das Design und die Entwicklung von Internet- und Intranetanwendungen geht. Das genaue Thema lautete: “Umsetzbarkeit der Standards zur Dialoggestaltung und Barrierefreiheit mit
JBoss Richfaces”

Hier nun kurz zusammen gefasst der Inhalt der Arbeit:

1. Teil: Zusammenfassung und Erklärung der wichtigsten Begriffe in der Software-Ergonomie

2. Teil: Erklärung der Anforderungen aus den Normen und Gesetzen zur Software-Ergonomie und Barrierefreiheit, sowie die Umsetzbarkeitsstudie

3. Teil: Zusammenfassung der Ergebnisse aus Teil 3

4. Teil: Fazit und Ausblick

Für die Unterstützung auf meinem Weg bis hin zum abgeschlossenem Studium, möchte ich meinem (nunmehr) ehemaligen Arbeitgeber, der Deutschen Telekom AG (Telekom Training GmbH) und hier speziell meiner Betreuerin auf Seiten der TT sowie meinen Kollegen bei meinem Einsatzbetrieb (T-Systems) in Weinheim danken. Auch wenn es während dieser Zeit nicht immer schön war, möchte ich sie doch zum allergrößten Teil nicht missen. Weiterhin gilt mein Dank meinen Eltern und meiner Freundin, die mich während der ganzen Zeit nicht nur moralisch unterstützt haben.

Hier nun also der versprochene Download-Link! (klick hier)

Die Arbeit steht unter der Creative-Commons-Lizenz, es dürfen Veränderungen an ihr vorgenommen und sie darf weiterverbreitet werden. Einschränkungen:

1. Mein Name (als Urheber) darf nicht aus dem Text entfernt werden
2. Änderungen müssen veröffentlicht und ebenfalls unter der CC-Lizenz veröffentlicht werden, des weiteren würde ich mich freuen über Änderungen in Kenntnis gesetzt zu werden
3. Die kommerzielle Nutzung des Inhaltes dieser Arbeit ist nur unter den in 1. und 2. genannten Bedingungen gestattet

Designarbeiten endlich abgeschlossen

13.07.2008 | 02:10:59

Nachdem ich, wie unschwer zu bemerken war, über einen viel zu langen Zeitraum nicht dazu gekommen bin das Design fertig zu stellen, ist es jetzt endlich geschafft. Getestet habe ich es unter Opera (9.5), Firefox (3.0), und Internet Explorer (6.0 und 7.0). Sollten noch Fehler auffallen, so bitte ich, mir diese zu melden - ob das per Kommentar oder per E-Mail (steht im Impressum) geschieht soll mir gleich sein.

Das neue Design ist komplett ohne JavaScript “bedienbar” und sowohl bezüglich CSS als auch (X)HTML validierbar (hier die Links: (X)HTML, CSS ). Des weiteren sollte das Blog jetzt weitestgehend barrierefrei sein.

Bevor ich hier wieder mehr schreiben werde, muss ich jetzt allerdings erst mit meinem privaten Projekt fertig werden (das ich im Moment leider wieder alleine entwickeln darf), den aktuellen Stand dazu findet ihr auf http://www.bytwo.de

Windows XP Prof (32Bit) und 4GB RAM

16.05.2008 | 22:55:59

Meiner einer hat sich die Woche zwei neue RAM-”Riegel” gekauft in der Hoffnung jetzt auch die Leistung des Rechners effektiv steigern zu können - ursprünglich waren es mal 2GB RAM jetzt sollten es 4GB werden. Der RAM ist in Ordnung und wird auch im BIOS erkannt. Einziges Problem: Bei mir läuft bisher noch die 32 Bit Variante von Win XP Prof - und die schafft maximal 3GB RAM. Theoretisch möglich mit einem 32Bit-System sind übrigens 4GB - nur Windows kann das eben nicht. Jetzt muss ich mir überlegen ob ich das System gegen eine 64Bit-Variante austausche - weil ohne Windows geht leider aus mehreren Gründen noch nicht.

Sollte ich es nicht machen, hätte ich das Geld für den zusätzlichen RAM umsonst ausgegeben - schauen wir mal was weiter wird. Übrigens muss selbst für die (problemlose) Arbeit mit 3GB RAM noch eine Veränderung an der boot.ini vornehmen: ein /3GB anhängen, das habe ich zumindest beim Googlen heraus bekommen.

Zend-Mitbegründer Zeev Suraski hat im Interview mit golem.de einige recht interessante Aussagen gemacht - die wichtigsten werde ich hier kurz zusammen fassen und für den Rest, verweise ich einfach auf den (1.) Teil des Artikels bei Golem. Ich werde mich bei der Zusammenfassung eher auf die Probleme mit der Einstellung von PHP4 bzw. bei der Migration von PHP5 auf 6 eingehen. Zu den Fragen über die Zusammenarbeit Zends mit Microsoft und IBM sowie die PHP Development Tools (PDT) und Zend Studio verweise ich wiederum auf den Artikel von Golem. Weiterlesen »

(wie immer) Schäuble. Dass diese Sperren zumindest schwierig, wenn nicht komplett unmöglich sind, scheint ihm aber, genau wie Herrn Frattini, der diesen Vorschlag ursprünglich gemacht hat, komplett zu entgehen. Dies berichtete heise bereits gestern Abend. Über die Bestimmungen wann und wie eine Website denn nun zu sperren sei, hat sich aber meiner Meinung nach nicht nur Schäuble bisher keine Gedanken gemacht. Weiterlesen »

Sie ist recht informativ und hier zu lesen.