Робот көмегімен толық мәтінді индекстейтін бірінші іздеу жүйесі (craweler-based) 1994 жылы іске қосылған  WebCrawler  () жүйесі болды. Алдыңғылардан айырмашылығы, ол пайдаланушыларға кез-келген веб-бетте орналасқан кез-келген сөздерді іздеуге мүмкіндік берді - содан бері бұл көптеген іздеу жүйелері үшін стандартқа айналды. Сонымен қатар, бұл кең таралған алғашқы іздеу жүйесі болды. 1994 жылы Карнеги-Меллон Университетінде әзірленген Lycos жүйесі іске қосылды және ол маңызды коммерциялық кәсіпорынға айналды.
Алғашқы автоматтандырылған іздеу машинасының аты қандай?
 WebCrawler 