Mehrdeutigkeit

Suchanfragen sind oft unpräzise. So kann die Suchmaschine nicht selbstständig entscheiden, ob beim Begriff Laster nach einem LKW oder einer schlechten Angewohnheit gesucht werden soll (semantische Korrektheit). Umgekehrt sollte die Suchmaschine nicht zu stur auf dem eingegebenen Begriff bestehen. Sie sollte auch Synonyme einbeziehen, damit der Suchbegriff Rechner Linux auch Seiten findet, die statt Rechner das Wort Computer enthalten.

Grammatik

Viele mögliche Treffer gehen verloren, weil der Nutzer nach einer bestimmten grammatikalischen Form eines Suchbegriffes sucht. So findet die Suche nach dem Begriff Auto zwar alle im Suchindex enthaltenen Seiten, die diesen Begriff enthalten, nicht aber jene mit dem Begriff Autos. Manche Suchmaschinen erlauben die Suche mittels Wildcards, mit denen sich dieses Problem teilweise umgehen lässt (z. B. berücksichtigt die Suchanfrage Auto* auch den Begriff Autos oder Automatismus), allerdings muss der Nutzer die Möglichkeit auch kennen. Weiterhin wird oft Stemming verwendet, dabei werden Wörter auf ihren Grundstamm reduziert. So ist einerseits eine Abfrage nach ähnlichen Wortformen möglich (schöne Blumen findet so auch schöner Blume), außerdem wird die Anzahl der Begriffe im Index reduziert. Eine weitere Möglichkeit ist der Einsatz statistischer Verfahren, mit denen die Suchmaschine die Anfrage z. B. durch das Auftauchen verschiedener verwandter Begriffe auf Webseiten danach bewertet, ob mit der Suche nach Auto reparieren auch die Suche nach Autos reparatur oder Automatismus repariert gemeint gewesen sein könnte.

Satzzeichen

Fachbegriffe und Produktbezeichnungen zu deren Eigennamen ein Satzzeichen gehört (z. B. Apples Webservice .Mac oder C/net) können bei den gängigen Suchmaschinen nicht effektiv gesucht und gefunden werden. Lediglich für ein paar sehr häufige Begriffe (z. B. .Net, C#, oder C++) wurden Ausnahmen geschaffen .

Datenmenge

Das Web wächst schneller als die Suchmaschinen mit der derzeitigen Technik indizieren können. Dabei ist der den Suchmaschinen unbekannte Teil  das so genannte Deep Web – noch gar nicht eingerechnet.

Aktualität

Viele Webseiten werden häufig aktualisiert, was die Suchmaschinen zwingt, diese Seiten nach definierbaren Regeln (Robots) immer wieder zu besuchen. Dieses ist auch notwendig, um zwischenzeitlich aus der Datenbasis entfernte Dokumente zu erkennen und nicht länger als Ergebnis anzubieten. Das regelmäßige Herunterladen der mehreren Milliarden Dokumente, die eine Suchmaschine im Index hat, stellt große Anforderungen an die Netzwerkressourcen (Traffic) des Suchmaschinenbetreibers.

Spam

Mittels Suchmaschinen-Spamming versuchen manche Website-Betreiber, den Ranking-Algorithmus der Suchmaschinen zu überlisten, um eine bessere Platzierung für gewisse Suchanfragen zu bekommen. Sowohl den Betreibern der Suchmaschine als auch deren Kunden schadet dieses, da nun nicht mehr die relevantesten Dokumente zuerst angezeigt werden.

Technik

Suchen auf sehr großen Datenmengen so umzusetzen, dass die Verfügbarkeit hoch ist (trotz Hardware-Ausfällen und Netzengpässen) und die Antwortzeiten niedrig (obwohl oft pro Suchanfrage das Lesen und Verarbeiten mehrerer 100 MB Index-Daten erforderlich ist), stellt große Anforderungen an den Suchmaschinenbetreiber. Systeme müssen sehr redundant ausgelegt sein, zum einen auf den Computern vor Ort in einem Rechenzentrum, zum anderen sollte es mehr als ein Rechenzentrum geben, das die komplette Suchmaschinenfunktionalität anbietet.

Recht

Suchmaschinen werden meistens international betrieben und bieten somit Benutzern Ergebnisse von Servern, die in anderen Ländern stehen. Da die Gesetzgebungen der verschiedenen Länder unterschiedliche Auffassungen davon haben, welche Inhalte erlaubt sind, geraten Betreiber von Suchmaschinen oft unter Druck, gewisse Seiten von ihren Ergebnissen auszuschließen. Die deutschen Internet-Suchmaschinen wollen jugendgefährdende Seiten durch die Freiwillige Selbstkontrolle aus ihren Trefferlisten streichen.

Eine weitere feinere Aufgliederung geht auf datenspezifische Eigenschaften ein, die nicht alle Dokumente innerhalb einer Gattung teilen. Bleibt man beim Beispiel Text, so kann bei Usenet-Beiträgen nach bestimmten Autoren gesucht werden, bei Web-Seiten im HTML-Format nach dem Dokumententitel.

Je nach Datengattung ist als weitere Funktion eine Einschränkung auf eine Untermenge aller Daten einer Gattung möglich. Dieses wird im Allgemeinen über zusätzliche Suchparameter realisiert, die einen Teil der erfassten Daten ausschließt. Alternativ kann sich eine Suchmaschine darauf beschränken, von Anfang an nur passende Dokumente aufzunehmen. Beispiele sind etwa eine Suchmaschine für Weblogs (statt für das komplette Web) oder Suchmaschinen, die nur Dokumente von Universitäten verarbeiten, oder ausschließlich Dokumente aus einem bestimmten Land, in einer bestimmten Sprache oder einem bestimmten Dateiformat. Eine Suchmaschine für das semantische Web ist Swoogle.

Die wesentlichen Bestandteile bzw. Aufgabenbereiche einer Suchmaschine sind:

• Erstellung und Pflege eines Indexes (Datenstruktur mit Informationen über Dokumente),
• Verarbeiten von Suchanfragen (Finden und Ordnen von Ergebnissen) sowie
• Aufbereitung der Ergebnisse in einer möglichst sinnvollen Form.

In der Regel erfolgt die Datenbeschaffung automatisch, im WWW durch Webcrawler, auf einem einzelnen Computer durch regelmäßiges Einlesen aller Dateien in vom Benutzer spezifizierten Verzeichnissen im lokalen Dateisystem.

So musste BMW Anfang 2006 kurzfristig hinnehmen, dass das Internetangebot des Automobilkonzernes komplett aus Google entfernt wurde, weil eine Reihe von automatisch weiterleitenden Brückenseiten erstellt wurden. Nachdem BMW die beanstandeten Seiten entfernt hatte, wurde bmw.de wieder in den Google-Index aufgenommen.

Ethische Suchmaschinenoptimierung (engl. white hat search engine optimization) verzichtet auf verbotene Praktiken wie den Einsatz von Brückenseiten oder einer Linkfarm und befolgt die Direktiven der einzelnen Suchmaschinen. Ziel dabei ist es, Bestrafungen durch die Suchmaschinen, wie einen Ausschluss aus dem Index oder die Herabstufung in den Suchergebnisseiten, zu vermeiden.

Methoden, die nicht relevante Webseiten auf vordere Plätze der Ergebnisseiten von Suchmaschinen bringen, werden als Suchmaschinen-Spamming bezeichnet; sie verstoßen gegen Regeln, die Suchmaschinen zum Schutz vor Manipulationen ihrer Suchergebnisse aufstellen. Ethisch einwandfreie Suchmaschinenoptimierung vermeidet Spamming. Fälle, die von den Suchmaschinenbetreibern aufgedeckt werden, haben oftmals den Bann der betreffenden Seite zur Folge.

So musste BMW Anfang 2006 kurzfristig hinnehmen, dass das Internetangebot des Automobilkonzernes komplett aus Google entfernt wurde, weil eine Reihe von automatisch weiterleitenden Brückenseiten erstellt wurden. Nachdem BMW die beanstandeten Seiten entfernt hatte, wurde bmw.de wieder in den Google-Index aufgenommen.

Ethische Suchmaschinenoptimierung (engl. white hat search engine optimization) verzichtet auf verbotene Praktiken wie den Einsatz von Brückenseiten oder einer Linkfarm und befolgt die Direktiven der einzelnen Suchmaschinen. Ziel dabei ist es, Bestrafungen durch die Suchmaschinen, wie einen Ausschluss aus dem Index oder die Herabstufung in den Suchergebnisseiten, zu vermeiden.

Google Richtlinien

Um dennoch das enorme Gestaltungspotential animierter Startseiten oder ganzer Internetauftritte in Flash ohne Ranking-Verlust zu ermöglichen, optimieren einige Programmierer ihre Seiten daher mit Hilfe von automatisierten Umleitungen, in deren Verlauf die für die Suchmaschinen lesbaren Texte in Form kurzer HTML-Phrasen zu finden sind, die aber beim Bildaufbau im Browser des Anwenders aufgrund der Geschwindigkeit einer automatischen Domain-Weiterleitung nicht erscheinen. Diese Technik, mit so genannten Brückenseiten, widerspricht den Richtlinien der meisten Suchmaschinen. Derartig „optimierte“ Zielseiten werden, sobald sie bemerkt werden, von Suchmaschinenbetreibern ausgeschlossen.

Mittlerweile genügt es nicht mehr alleine, die Relevanz von Webseiten zu erhöhen. Ein gutes Listing und eine gute Sichtbarkeit in Suchmaschinen sowie die Quantität und Qualität der eingehenden Links auf eine Website (Backlinks) sollten mit in Betracht gezogen werden. Diesen Bereich der Suchmaschinenoptimierung nennt man „OffPage-Optimierung“.

Um die eigene Website einmal auf Ihr Potenzial hin zu untersuchen, stellen einige Internetagenturen kostenlose Online-Tools bereit. Sie sind recht einfach zu bedienen und zeigen die Stärken und Schwächen der eigenen Internetpräsenz auf. Oftmals genügt es schon, bestimmte Eigenschaften der Website ein klein wenig zu verändern, um sich in Suchmaschinen auf einer viel besseren Platzierung wiederzufinden.

Ein weiterer Schritt ist die Auswahl der wichtigsten Suchworte. Hierzu kann man sich frei verfügbarer Datenbanken, wie der Keyword-Datenbank oder dem Metager Web-Assoziator, bedienen.

Die Metatags, welche man im Headbereich einer Homepage einarbeiten kann, verlieren dabei immer mehr an Bedeutung. Um korrekte Suchergebnisse gewährleisten zu können, werden diese von großen Suchmaschinen wie Google kaum noch beachtet. Wichtig ist viel Text in der betreffenden Internetpräsenz, um möglichst viele Keywordphrasen und somit bessere Suchmaschinenergebnisse gewährleisten zu können. Besonders bedeutsam sind außerdem die Wörter, die im Seitentitel (Title-Tag), in ausgewiesenen Überschriften (H1-, H2-Tags usw.), in Textlinks (auch solchen, die auf die betreffende Seite verweisen) sowie innerhalb der URL vorkommen.