Was wird eigentlich durchsucht?

Die einfachste Möglichkeit ist die Suche im Filesystem, ähnlich wie schon im Kapitel Dokumente auf dem eigenen PC finden beschrieben. Vorteil ist die weitgehende Wartungsfreiheit, denn es gibt keinen Index, der aktualisiert werden muss. Dieser Möglichkeit sind aber in Puncto Dokumentenzahl, Abrufhäufigkeit und damit Geschwindigkeit Grenzen gesetzt. Zudem stellt sich wie bei allen volltextdurchsuchenden Systemen die Frage der Gewichtung der Suchtreffer und damit Relevanz der Suchergebnisse. Eine indexbasierte Suche mit definierten Suchworten im Meta-Tag kann diese Probleme elegant lösen und somit in vielen Fällen eine sinnvollere Alternative sein. Der Haken: Der Arbeitsaufwand der Erstellung der Meta-Tags ist nicht zu unterschätzen (eine dennoch lohnenswerte Arbeit, denn die großen Suchmaschinen wissen mit Meta-Tags auch einiges anzufangen); je nach Häufigkeit von Änderungen ist auch ein oftmaliges Update des Index notwendig.

Einen internen oder externen Crawler brauchen Sie, wenn Sie einen Index der zu durchsuchenden Seiten erstellen wollen.

Die Qual der Wahl

Je nach geforderter Leistung, Zahl der zu durchsuchenden Seiten, zur Verfügung stehendem Budget und persönlichen oder verfügbaren Kenntnissen haben Sie die Wahl: Frei erhältliche Software mit Basisfähigkeiten ist oft umständlich zu installieren und zu konfigurieren, bietet aber die Möglichkeit, die Leistung exakt auf die eigenen Bedürfnisse abzustimmen. Kommerziell vertriebene Produkte sind oft weniger flexibel einsetzbar, dafür aber leichter zu administrieren. Oder universell einsetzbar, prima zu administrieren und sehr teuer. Es bleibt meist nichts anderes übrig, als ausführlich zu vergleichen. Nach oben sind fast keine Grenzen gesetzt; AltaVista bietet für 99.999 Dollar eine exakte Kopie der Software an, mit der Compaq seinen Suchservice betreibt. Nur für die Software, wohlgemerkt, der Preis für ein paar Dutzend Hochleistungs-Alpha-Rechner geht extra.

Eine Reihe Adressen von Herstellern verschiedener Softwarelösungen finden Sie auf der nächsten Seite.