User-agent: { nom du robot }

But de la commande
Définit le robot à qui s'adresse la commande

Syntaxe :

 User-agent: { nom du robot }  L' ordre concerne un robot précis
   
 User-agent:*  L' ordre concerne tous les robots.

Exemple :
User-agent: Atomz
User-agent:*

Voici quelques "user-agent" de moteurs de recherche
 

user-agent  Nom 
192.comAgent  192.comAgent
http://www.192.com
 
BotLink  ABCdatos
http://www.abcdatos.com/
 
ahoy  Ahoy! Homepage
http://www.cs.washington.edu/research/projects/WebWare1/www/ahoy/about/index.htm
 
aipbot  Aipbot
http://www.aipbot.com
 
ia_archiver  Alexa Web Search
http://www.alexa.com
 
ATN_Worldwide  All That Net
http://www.allthatnet.com
 
arks  Aniruddha Choudhury
http://www.dpsindia.com/
 
anthill  Anthill
http://www.anthill.org/index.html
 
AraybOt  AraybOt
http://directory.araykoo.com
 
Atomz  Atomz
http://www.atomz.com/
 
BIGLOTRON (BETA 2;GNU/Linux)  Biglotron - Moteur de recherche
http://www.biglotron.com/
 
BIGLOTRON (BETA 2;GNU/Linux)  Biglotron - Moteur de recherche
http://www.biglotron.com/
 
BIGLOTRON (BETA 2;GNU/Linux)  Biglotron - Moteur de recherche
http://www.biglotron.fr/
 
Bjaaland  Bjaaland
http://www.textuality.com
 
boitho.com-dc  Boitho.com
http://www.boitho.com/index.htm.en
 
boitho.com-dc  Boitho.com
http://www.boitho.com
 
boxseabot  boxseabot
http://www.boxsea.com
 
bspider  BSpider

 
pompos  Dir.com
http://fr.dir.com/
 
envolk  envolk
http://www.envolk.com
 
araneo  Esperantisto
http://esperantisto.net/
 
Hämähäkki  FI
http://www.fi/
 
bbot  Fulop
http://www.otthon.net
 
Gaisbot  Gais
http://gais.cs.ccu.edu.tw/
 
Gaisbot  GAISWWW Query Page
http://gais.cs.ccu.edu.tw/
 
GenieBot  GenieKnows Local Search FAQ
http://64.5.245.11/faq/faq.html
 
gigabot  Gigablast
http://www.gigablast.com
 
Wget  GNU Wget
http://www.gnu.org/software/wget/
 
seekbot  Home Companysite - Seekport UK Company Website
http://www.seekbot.net/
 
hotwired  Hotwired Search
http://www.hotwired.com/
 
ilial  Ilial Knowledge Search
http://www.ilial.com/
 
SLCrawler  Inxight
http://www.inxight.com
 
IRLbot  IRL crawler
http://irl.cs.tamu.edu/crawler/
 
Kevin  Kevin crawler
http://www.websitealert.net
 
voyager  Kosmix Health Search
http://www.kosmix.com
 
MJ12bot  Majestic 12
http://www.majestic12.co.uk/
 
MQbot  MQbot http://metaquerier.cs.uiuc.edu/crawler
http://metaquerier.cs.uiuc.edu/
 
msrbot  MSRBOT
http://research.microsoft.com/research/sv/msrbot/
 
Nederland.zoek  Nederland.zoek
http://www.nederland.net/
 
Nutch  Nutch robot
http://lucene.apache.org/nutch/bot.html
 
OmniExplorer_Bot  Omni-Crawler
http://www.omni-explorer.com/
 
OmniExplorer_Bot  OmniExplorer
http://www.omni-explorer.com
 
OmniExplorer_Bot  OmniExplorer
http://www.omni-explorer.com
 
StackRambler  Rambler
http://www.rambler.ru/
 
seekbot  Seekbot robots
http://www.seekbot.net/
 
Shagseeker  Shagseeker
http://www.shagseek.com
 
SimBot  Simbot
http://simmany.hnc.net/
 
asterias  Singingfish
http://www.singingfish.com
 
SBIder  SiteSell.com, E-commerce for the Rest of Us
http://www.sitesell.com/
 
Silk/1.0  Slider Directory: Top
http://www.slider.com/silk.htm
 
snooper  Snooper
http://darsun.sit.qc.ca
 
solbot  Solbot
http://www.kvasir.no/
 
SygolBot http://www.sygol.net  SygolBot
http://www.sygol.net
 
thesubot  TheSuBot
http://www.thesubot.de
 
AlkalineBOT  Vestris
http://alkaline.vestris.com/
 
appie  Walhello appie
http://www.walhello.com
 
e-SocietyRobot  Waseda University Yamana Laboratory
http://www.yama.info.waseda.ac.jp/eng/
 
webquest  WebQuest

 
Nutch  Welcome to Nutch!
http://lucene.apache.org/nutch/
 
wget  Wget/1.10.2

 
ICCrawler  Willkommen beim Intelligence Competence Center (ICCenter)
http://www.iccenter.net/index.php?lang=de&location=home
 
WinkBot  Wink
http://www.wink.com/
 
XGET  Xget
http://www2.117.ne.jp/