Das Problem sind die hohen Investitionen

Googles Index besteht aus vielen Milliarden Dokumenten. Diese müssen nicht nur einmal erfasst werden, sondern bedürfen auch regelmäßiger Updates, um den Index stets auf dem aktuellen Stand zu halten. Für diese Aufgabe betreibt Google zahlreiche Rechenzentren weltweit und investiert Milliarden von Dollar. Um ein mindestens gleichwertiges Produkt in Europa zu etablieren, müssten riesige Summen investiert werden, die bereits für eine erste Version im dreistelligen Millionenbereich lägen. Für ein einzelnes Unternehmen wäre das nicht zu schaffen, zumal der anschließende Erfolg alles andere als gewiss wäre. Dazu kommt, dass die Entwicklung stetig weitergeht: Nach dem Aufbau eines aus heutiger Sicht aktuellen Indexes wären die internationalen Konkurrenten bereits auf einer neuen Entwicklungsstufe. Zukünftige Entwicklungen müssten also bereits bei der Planung eines neuen Indexes berücksichtigt werden. All das befindet sich außerhalb der Möglichkeiten einzelner Unternehmen. Eine mögliche Alternative ist daher ein mit Hilfe von öffentlichen Mitteln erstellter Index, der dann allen Interessierten aus dem privaten, öffentlichen und wirtschaftlichen Bereich zur Verfügung gestellt wird.

Web-Index nach dem B2B-Modell

Stattdessen schwebt den Initiatoren die Bildung eines Index vor, auf den interessierte Firmen und Entwickler in einem B2B-Modell gegen eine Gebühr zugreifen können. Sie könnten die Daten für ihre eigenen Anwendungen nutzen und neue, innovative Geschäftsmodelle aufbauen. Dabei ist ein großes Spektrum von Möglichkeiten denkbar, von allgemeinen oder auch speziellen, themengebundenen Kartendiensten und Preisvergleichsportalen über die Analyse von Linkstrukturen bis hin zu Trendbarometern und KI-Programmen. Gleichzeitig könnten sich aber auch ganz neue Kategorien von Anwendungen entwickeln. Ein solcher Index würde eine staatliche Anschubfinanzierung benötigen, am besten durch die EU oder eine Kooperation mehrerer europäischer Länder. Eine einzelne Organisation oder ein einzelner Staat könnte ein solches Projekt kaum finanzieren, denn die Kosten gehen vermutlich in die Milliarden: Zigtausende von Rechnern wären nötig, um die Indexdaten zu speichern, es müssten Rechenzentren gebaut, es müsste Software entwickelt und es müssten die organisatorischen Strukturen geschaffen werden. Immerhin würde durch die Vermarktung nach einiger Zeit auch ein Return on Investment beginnen. Doch rechnen die Initiatoren damit, dass das Projekt zumindest die ersten fünf Jahre auf staatliche Fördergelder angewiesen wäre. Bei einer staatlichen Finanzierung besteht natürlich die Gefahr, dass die geldgebenden Länder versuchen, die Suchergebnisse oder ihr Ranking in ihrem Sinne zu beeinflussen.

Chance gegen Google?

Haben solche Projekte gegen Google überhaupt eine Chance? Sie zeigen, dass es Alternativen außerhalb der Silicon-Valley-Rhetorik gibt, meint Mager. Notwendig seien in allen Fällen langfristige Finanzierungen und öffentliche Förderungen. Früher sei der Zugang zu Wissen auch über öffentlich finanzierte Bibliotheken organisiert worden, sagt Mager. Ohne Suchmaschinen könne das Web nicht genutzt werden, sie gehören zur Basisinfrastruktur.

Aufbau eines freien Suchindex beginnen

Technische Expertise und große finanzielle Investitionen stellen Prämissen für den Aufbau eines europäischen Suchindex dar. Der Index sollte möglichst alle Inhalte des Web umfassen und allen Zugriff ermöglichen. Des Weiteren sollte er am besten durch die EU finanziert, jedoch staatsfern und unabhängig organisiert werden, um einseitige politische Einflussnahme zu vermeiden.

Indexierung im Internet ist teuer

Andreas Wiebe, Gründer des in der Schweiz ansässigen Internet-Suchunternehmens SwissCows möchte, dass Europa die Datenzentren baut, die für die Unterstützung vollständig europäischer Suchmaschinen benötigt werden. Die Indexierung der Milliarden von Webseiten sei "eine gigantische Aufgabe, die ein sehr großes Rechenzentrum sechs oder sieben Jahre in Anspruch nehmen würde und enorme Mengen an Computerleistung, Strom und Geld erfordern würde", sagt er. Google und Bing haben die Kapazität, ebenso Chinas Baidu und Russlands Yandex, weiß Wiebe, aber "niemand sonst hat die Kapazität. Aus diesem Grund bieten die meisten Suchunternehmen lediglich eine Maske über den Suchergebnissen von Google oder Bing an".

Yep: Ahrefs bringt eigene Suchmaschine auf den Markt

Laut den Betreibern hat Yep bereits mehr als 1.000 Server für die Suchmaschine eingerichtet, auf denen mehr als 100 Petabyte an Daten gespeichert sind. Yep betreibt damit eine eigene Infrastruktur, anstatt auf Cloud-Lösungen zu setzen. Ahrefs ist kein Neuling auf dem Gebiet der Suchmaschinen. Um seine Backlinkdatenbank aufzubauen, crawlt das Unternehmen Millionen von Webseiten und analysiert die Verlinkungen zwischen diesen Seiten. Der dazu genutzte Crawlter trägt den Namen AhrefsBot. Gut möglich, dass sich im Zuge des Aufbaus von Yep in den Logfiles der Websites zukünftig häufiger Besuche des AhrefsBots zeigen werden. Ob Yep eine Chance hat, mit Google ernsthaft in Konkurrenz zu treten, bleibt fraglich. Google hat inzwischen eine Infrastruktur sowie einen Datenschatz eingebaut, die nur mit immensem Aufwand erstellt werden konnten.

Nicht aufgeben, bevor wir angefangen haben!

Auch wenn der Aufbau viel Rechenkapazität sowie hoher finanzieller und personeller Investitionen bedarf: Es lohnt sich! Wirtschaft und Wettbewerb, aber auch digitale Souveränität und Demokratie können durch einen europäischen Suchindex gestärkt werden.

Christian Kroll sagt dazu:

Aus Christians Sicht wäre die Entwicklung eines eigenen Suchalgorithmus für Ecosia unmöglich. Insbesondere vor dem Hintergrund, dass bei Google wohl über die Hälfte der Mitarbeiter mit der Verfeinerung und Weiterentwicklung des Algorithmus beschäftigt sind.
Zum Vergleich:
Google beschäftigt weltweit ca. 139.995 Mitarbeiter (2021), Ecosia hat nur ca. 80 Mitarbeiter (2020).

Der Aufbau eines solchen Index würde natürlich Jahre in Anspruch genommen. Die hierfür nötigen Investitionen in ein Rechenzentrum wären erst einmal immens. Dennoch würde die Wirtschaft und die Internetnutzer davon profitieren: Mehr Wettbewerb und eine Durchbrechung der Monopolstellung Googles könnten zu mehr Innovation bei den Internetdienstleistern, kreativeren Start-Ups, neuen Geschäftsmodellen und vor allem zu mehr Datenschutz für die europäischen Bürger führen.

Der Index ist die Datenbank der Webseiten, die bei einer Suche im Web abgefragt werden. Um eine gute Suchmaschine zu betreiben, muss der Index viele Milliarden Dokumente umfassen und schnell abfragbar sein.
Um einen solchen Index aufzubauen, bedarf es einerseits einer hohen technischen Expertise, andererseits aber auch großer finanzieller Investitionen. Insbesondere der letzte Punkt ist es, der interessierte und technisch versierte Anbieter daran hindert, tatsächlich eigene Suchmaschinen aufzubauen. Im Klartext: Der Aufbau eines eigenen Web-Index ist schlicht zu teuer. Das sieht man auch daran, dass neben Google eigentlich nur Microsoft einen weltweiten Index betreibt. Und hinzu kommt, dass tatsächlich nur Google damit Geld verdient; Microsoft hat in den letzten Jahren mit seiner Suchmaschine – die ja gerade erst aufgrund des eigenen Index so teuer im Betrieb ist – Verluste in Milliardenhöhe geschrieben.