Pro-Linux

Pro-Linux Diskussions- und Hilfeforum
Aktuelle Zeit: 17. Nov 2018 8:12

Alle Zeiten sind UTC+01:00




Ein neues Thema erstellen  Auf das Thema antworten  [ 3 Beiträge ] 
Autor Nachricht
 Betreff des Beitrags: Suchmaschinensoftware
BeitragVerfasst: 23. Sep 2005 9:43 
Ich bin auf der Suche nach einer Suchmaschinensoftware, die tatsächlich Seiten im Internet crawlt (also nicht nur lokal/Intranet wie praktisch alle bei Freshmeat angebotenen) und evtl. sogar die robots.txt beachtet?

Bevor mir jetzt jemand gut gemeinte Ratschläge zum Traffic gibt: es geht um eine sehr spezielle Suchmaschine, ich habe nicht vor, Google Konkurrenz zu machen.


Nach oben
   
 Betreff des Beitrags:
BeitragVerfasst: 23. Sep 2005 15:18 
Hi,

wenn du nur bestimmte Seiten indizieren willst, dann kannst du diese ja mit httrack (http://www.httrack.com/) herunterladen und dann mit htdig (http://www.htdig.org/) indizieren.

Nicht gerade die tollste Loesung, sollte aber funktionieren.

Gruss,
Alex


Nach oben
   
 Betreff des Beitrags:
BeitragVerfasst: 24. Sep 2005 12:41 
Nein, es ist etwas komplizierter: es sollen schon praktisch alle Inet-Seiten indizierbar sein, inklusive enthaltener Links (also wie bei einer "richtigen" Suchmaschine). Die Anpassung, dass letztenendes nur Seiten, die bestimmten Kriterien entsprechen, genommen werden, würde ich selber machen (wollen).


Nach oben
   
Beiträge der letzten Zeit anzeigen:  Sortiere nach  
Ein neues Thema erstellen  Auf das Thema antworten  [ 3 Beiträge ] 

Alle Zeiten sind UTC+01:00


Wer ist online?

Mitglieder in diesem Forum: 0 Mitglieder und 0 Gäste


Sie dürfen keine neuen Themen in diesem Forum erstellen.
Sie dürfen keine Antworten zu Themen in diesem Forum erstellen.
Sie dürfen Ihre Beiträge in diesem Forum nicht ändern.
Sie dürfen Ihre Beiträge in diesem Forum nicht löschen.
Sie dürfen keine Dateianhänge in diesem Forum erstellen.

Suche nach:
Gehe zu:  
cron
Powered by phpBB® Forum Software © phpBB Limited
Deutsche Übersetzung durch phpBB.de