This program can feed appointed pages to search engines. It can recognize the spider by checking user agent information. You can manage the information of the search engines, to modify, add or delete.
Suchmaschinen steuern über die Datei robots.txt!
hellorobots 1.0 erlaubt Ihnen schnell und einfach die Suchmaschinensteuerungsdatei robots.txt z ...
Yahoo BOSS
Mit BOSS stellt Yahoo eine sehr flexible Such-API zur Verfügung, die im Gegensatz zur Google API auch kaum Einschränkungen unterlieg ...
Dass die Betreiber der Suchmaschine Google meist einmal monatlich die Datenbank aktualisieren, dürfte sich herumgesprochen haben. Vermutlich ist ...
Gr8 Multiple Search Script allows you to search same keyword in multiple sites on single window you don't need to open all sites just using tabs ...
UdmSearch is a full-featured SQL-based free search engine software for intranet and internet servers.
PHPCrawl is a class for crawling/spidering Websites. It supports URL- and Content-Type-filtering, cookie- handling, limiter-options, and other fea ...
Das Independent Media Center (http://de.indymedia.org) bietet eine große Masse an aktuellen News zu den verschiedensten Bereichen. Mit dem Script ...
