Nach längerer Zeit des Stillstands kehrt findo.de nun in komplett technisch überarbeiteter Form zurück. Die letzten Monate waren vor allem geprägt durch technische Probleme und vor allem Performanceprobleme. Durch die Integration einer neuen Volltext-Technologie und der grundlegenden Überarbeitung aller Scripts  ist findo.de nun wieder Konkurrenzfähig. In den nächsten Wochen werden einige neue Funktionen und Verbesserungen freigeschaltet.

Einige alte, fast schon in Vergessenheit geratene Funktionen von findo - z.B. die Trendanalyse - sind jetzt wieder da. Wir werden auch die Reports aus der zweiten Version von findo renovieren und dann wieder freischalten.

findo indiziert mittlerweile deutlich mehr als 30.000 Nachrichten pro Tag und verarbeitet hunderdtausende Suchanfragen pro Tag. Dafür ist ein erheblicher technischer und zeitlicher Aufwand notwendig um all die Services kostenlos zur Verfügung zu stellen. Die Werbung - und vor allem auch das geplante neue Keyword-Advertising System - sind jetzt der erste Schritt.

Durch das schnelle Wachstum des Index müssen diverse Konfigurationen und Strukturen optimiert werden, sodass das Gesamtsystem besser skaliert. Darüber hinaus werden einige Bugfixes eingespielt und einige neue Index-Versionen eingespielt. Die meisten Arbeiten zielen darauf ab das Dateisystem zu entlasten.

Die Funktion "ähnliche Artikel" wurde noch einmal ein wenig verbessert und auf der Startseite integriert. Auch die Übersichtsseite der ähnlichen Artikel wurde erweitert und wartet nun mit neuen Informationen auf.

Besonders positiv ist jedoch die Gesamtperformance des Systems die sich nach einigen Verbesserungen vor allem im Backend merkbar macht. Die Datenbank-Abfragen konnten durch verschiedenste Versionierungs- und Caching-Funktionen deutlich reduziert werden. Auch die Suchperformance konnte durch einige Umstellungen in den Queries verbessert werden.

Auf der Webseite wirkt sich vor allem die Einführung eines Memory-Caching Systems (APC) aus. Dadurch können zwischengespeicherte Elemente oder Anfragen schneller bereitgestellt werden als bei einem Datenbank oder Datei basierten Caching Verfahren.

Nach nunmehr 14 Tagen Nachrichten-Dauerfeuer sind die Olympischen Sommerspiele 2008 zu Ende gegangen. Zurück bleiben Eindrücke verschiedenster Art: Von Bild-Manipulationen bei der Eröffnungsfeier, heimlichem Playback oder angeblich falschen Altersangaben bei chinesischen Turnerinnen sowie dem dann doch nicht "ganz" freien Internet für die Journalisten - spektakulär waren die Spiele. Die staatliche Nachrichten-Maschinerie Xinhua scheint mit Ihrer "journalistischen" Arbeit zufrieden zu sein und kommentierte dies mit "wir haben das Vertrauen der Welt erfüllt". Sicherlich eine Einschätzung die einmal mehr unterstreicht, dass es wohl zwei Olympische Spiele gegeben hat: jene für China, und jene aus der Sicht der restlichen Welt.

Auch bei findo hat Olympia Spuren hinterlassen:

• Mehr als 55.000 indizierte Nachrichten
• 2.000 Nachrichten über Michael Phelps
• 1.000 Nachrichten zum Thema Doping + Olympia
• und vieles mehr ...

Die neue Serverstruktur wird ein bisschen später aktiv geschaltet als geplant. Wir denken jedoch, dass es morgen oder übermorgen soweit ist. Dann sollte die Performance deutlich besser werden.

Die höhere Anfragelast liegt auch daran, dass die Personensuchmaschine Yasni.de derzeit deutlich mehr Anfragen erhält aufgrund der derzeitigen Datenhandel-Debatte. findo.de ist seit einigen Monaten als Partner bei Yasni integriert.

Durch die neue Software Version der Grid-Clients werden nun der interne Traffic, die Datenbank-Load und vor allem die einzelnen Aktualisierungen deutlich reduziert. Dies wird durch ein mehrfach abgestufte Versionsberechnung der Inhalte realisiert. Dadurch können Differenzen und damit neue Inhalte leichter und vor allem verteilt berechnet werden. Ergebnis: Der Datenbank Master erhält wirklich nur Pakete die eindeutig neu sind und gespeichert werden müssen.

Darüber hinaus werden wir zeitnah auf die schlechte Performance reagieren: Anfang der Woche wird ein weitere Server geschaltet und vor allem die Struktur umgestellt. Mehr dazu in den nächsten Tagen.

Ein weiteres Beispiel dieser Kategorie:

"Russische Marine versenkt georgisches Kriegsschiff"
berichtet die Augsburger Allgemeine und kennzeichnet die Nachricht als dpa-Meldung.
Zum gleichen Zeitpunkt berichtet die Schwäbische Zeitung:
"Russische Marine versenkt georgische Schiffe" und kennzeichnet den Artikel ebenfalls als dpa-Meldung.

AFP berichtet unterdessen "nach offiziellen Angaben", dass ein georgisches Kriegsschiff versenkt wurde. Interessant ist, dass die Augsburger Allgemeine eine Stunde vorher ebenfalls als dpa-Meldung meldet: "Russische Kriegsmarine versenkt georgische Raketenträger" - auch aus "eigenen Angaben" der russischen Marine.

In diesem Fall verändern 2 Buchstaben die komplette Wahrnehmung, mal sehen was am Ende richtig war.

Nachdem die Performance nun einigermaßen stabilisiert werden konnte und die Datenbank nunmehr wieder 9 Mio Queries pro Tag recht zuverlässig verarbeitet, haben wir nun die erste Stufe des Suchergebnis-Clustering freigeschaltet.

Dieses Verfahren wertet auf derzeit noch einfache aber performante Weise inhaltliche Ähnlichkeiten aus und gruppiert die Nachrichten im Suchergebnis.

Beispiel: Beijing