robots.txt class

Give this class the contents of a robots.txt file or the URL to it and it will parse it for you. As an option you can give it the name or your robot/spider/crawler and it will return only the section that applies to your case. Works through proxies with the help of Snoopy (see script for more details).

Rezensionen

Es sind noch keine Kommentare vorhanden.

Hier Kannst Du einen Kommentar verfassen


Bitte gib mindestens 10 Zeichen ein.
Wird geladen... Bitte warte.
* Pflichtangabe
ANG GES G P
class that caches dynamic content. easy to use an integrate into current scripts.
ANG GES G P
DX0 is a PHP library that generates Dynamic HTML specific to the visitor's browser. DX0 focuses on generating tight, compact DHTML. DX0 allows cla ...
ANG GES G P
This class builds completely an HTML Form based in a description of the fields, it's ideal to avoid writing one form any new table you have to f ...
ANG GES G P
Mit dieser Klasse,können Sie ganz leicht ein komplettes Verzeichnis mit Bildern verkleinern oder vergrößern lassen.Die neuen Größen müssen a ...
ANG GES G P
ProgressClass stellt eine PHP-Klasse für die dynamische Anzeige und Veränderung eines Fortschrittsbalkens zur Verfügung. In einem Fenster im Wi ...
ANG GES G P
Conversion of php sessions class to use Oracle instead of MySQL
ANG GES G P
hdYouTube ist ein auf PHP basierendes Skript, mit dem man aus einem HTML Formular ein Video in seinen YouTube Account laden kann. So kann man z.B. ...
ANG GES G P
A rule based system for taking data associated with a database result id and pushing through specified templates. Allows for significant reuse o ...
658 x angesehen
0 x gemerkt
Details zur Anzeige
ANG GES G P
Anfrage stellen

Du bist nicht als Benutzer angemeldet. Bitte gebe Deinen Namen und E-Mailadresse an!

Wird geladen... Bitte warte.
Details zur Anbieter

toon.goedhart@