Apache Lucene
Apache Lucene ist eine Programmbibliothek zur Volltextsuche. Lucene ist freie Software und ein Projekt der Apache Software Foundation.
| Apache Lucene | |
|---|---|
 | |
| Basisdaten | |
| Entwickler | Apache Software Foundation |
| Erscheinungsjahr | 30. März 2000 |
| Aktuelle Version | 9.10.0[1] (20. Februar 2024) |
| Betriebssystem | Plattformunabhängig |
| Programmiersprache | Java |
| Kategorie | Programmbibliothek |
| Lizenz | Apache-Lizenz, Version 2.0[2] |
| deutschsprachig | nein |
| lucene.apache.org/core/ | |
Lucene wird (erst direkt, seit 2014 via Elasticsearch) von der Wikipedia verwendet. Ein Beispiel für die Leistungsfähigkeit und Skalierbarkeit von Lucene liefert insbesondere Twitter.[3]
Geschichte
Lucene wurde von Doug Cutting[4] entwickelt und war seit 1997 zunächst über SourceForge erhältlich.[5] Der Name Lucene ist der zweite Vorname von Doug Cuttings Ehefrau.[6]
2001 wurde Lucene ein Teil des Jakarta-Projekts und 2005 ein Hauptprojekt der Apache Software Foundation. Aus dem Projekt Apache Lucene gehen gelegentlich separat weitergeführte Projekte hervor.
Im Juni 2021 wurde die Funktionalität der Indri(software) SearchEngine Lucene hinzugefügt, was das Ende des ursprünglichen Projekts bedeutet und den Nachfolger Lucindri hervorgebracht hat.[7][8][9][10][11]
Auf Lucene basierende Projekte
- Lucene Core
- Der Kern des Projekts Lucene, Lucene Core oder kurz Lucene, früher auch Lucene Java genannt, ist eine Programmbibliothek, die in der Programmiersprache Java verfasst ist. Lucene erstellt einerseits einen Index aus Dateien, der etwa ein Viertel des Volumens der indexierten Dateien hat.[12] Zum anderen liefert Lucene anschließend Suchergebnisse mit Rangliste, wofür mehrere Suchalgorithmen zur Verfügung stehen.
- Lucene.Net
- Lucene.Net ist eine Übersetzung von Lucene in die Programmiersprache C# mit Anpassung der Programmierschnittstelle an das .Net-Framework.
- Lucy
- Lucy ist eine Portierung von Lucene in die Programmiersprache C für Sprachanbindungen dynamischer Programmiersprachen wie Perl.
- PyLucene
- PyLucene ist eine Erweiterung von Python um einen Wrapper mit Java-Laufzeitumgebung für Lucene.[13]
- Droids
- Droids ist ein Framework für Bots/Webcrawler. Das Droids Projekt wurde zum 1. November 2015 eingestellt.[14]
- Solr
- Solr ist eine auf Lucene beruhende eigenständige Implementierung eines Suchservers.[15] Solr wurde ursprünglich von CNET entwickelt und Solar genannt.[16] Der Name war eine Abkürzung für Search on Lucene and Resin.[17] Der Download von Solr umfasst als Beispiel eine Konfiguration mit Jetty. Solr enthält eine REST-ähnliche API.[18] Solr kommuniziert über das Hypertext Transfer Protocol. Mittels HTTP POST können verschiedenste Dateiformate von XML über JSON bis PDF erfasst und auch Dokumente erstellt werden.[19] Abfragen erfolgen mittels HTTP GET.
- Tika
- Tika gehörte früher zum Projekt Lucene, wird von Solr genutzt und ist ein Parser. Er extrahiert Metadaten oder strukturierten Text aus einer Reihe von Dokumentformaten mittels spezialisierter (möglichst ohnehin existierender) Bibliotheken wie Apache PDFBox oder Apache POI, die einheitlich über Tika angesprochen werden und automatisch ausgewählt werden können.
Außerhalb des Projekts wurden weitere Derivate von Lucene erstellt.[20]
Funktionsweise
Lucene verwendet das Tf-idf-Maß und Vektorraum-Retrieval zur Bewertung von Suchtreffern.[21]
Literatur
- Manfred Hardt, Fabian Theis: Suchmaschinen entwickeln mit Apache Lucene. Entwickler.Press, 2004.
- Erik Hatcher et al.: Lucene in Action. Manning, 2005 (über Lucene 1.4), 2nd ed. 2010 (über Lucene 3.0).
- Florian Hopf: Flexible Suche mit Lucene. In: Java aktuell. Ausgabe 4-2013, S. 31 ff.
Weblinks
- www.lucenetutorial.com – englischsprachige Einführung
- Christian Meder, Andrew Kenworthy: Apache Solr und ElasticSearch: Auf der Suche nach dem heiligen Gral. ( vom 8. März 2016 im Internet Archive) In: jaxenter.de, 6. August 2012
