Der Agent Name ist der Name des Spiders oder Robots, der die Internetseiten für die Suchmaschinen durchsucht, um deren Inhalte zu indexieren. Ein Spider ist ein Programm mit dessen Hilfe die Suchmaschinenbetrieber das Internet durchforsten.

In den LogFiles einer Domain kann man den Agent Name herauslesen und einige Statistikprogramme nutzen diese Technik um dem Webseitenbesitzer Informationen über seine Webseite bereit zustellen.

Wenn ein Spider eine Seite indexiert hat so bezeichnet man diese Seite als gespiderd.