Solr und Website-Indizierung zur Erstellung einer Website-Suche

Question

Ich habe versucht, eine "Site-Suche" auf einer einfachen http-Site zu erstellen.

Ich habe eine Website, nennen wir sie www.mycompany.com, die rein aus HTML besteht.

Gibt es eine einfache Möglichkeit, die gesamte Website mit Solr zu indizieren, um eine Volltextsuche mit Solr als Suchmaschine zu erstellen?

Ich habe ein bisschen gegoogelt und konnte nichts Spezielles zu diesem Typ finden: A tun Do B ... Gewinn!

Lassen Sie mich auch wissen, wenn ich bin ein bisschen aus mit dem, was ist solr für :P

Vielen Dank im Voraus.

Answer 1

Solr ist nur für die Indizierung und Suche von Text gedacht, es verfügt nicht über einen Crawler, da dies nicht in den Rahmen des Projekts fällt.

Sehen Sie sich jedoch an Niederländisch der ein Crawler ist und anfangs nicht allzu schwer einzurichten ist.

Nutch und Solr können integriert werden wenn Sie eine Solr-spezifische Funktion für die Suche im Index benötigen.

Answer 2

$ bin/solr create -c corename
$ bin/post -c corename https://siteurl.com -recursive 2 -delay 1

Dies würde einen grundlegenden Index der Website, aber es wäre nicht die beste sein. Wenn Sie etwas Einfaches wollen, dann ist es das. Es kann gemacht werden.

Ich glaube, das funktioniert nur mit Solr 5+.

Answer 3

Zwei weitere Optionen, die Sie sich ansehen sollten, sind Überall kriechen y Heritrix