 Търсачката Google, както и всяка друга търсачка, минава през три етапа. Опитваме мрежата, съставяме индекс и след това представяме резултатите според търсенето. Първата стъпка, опитването на мрежата, е силно автоматизиран процес, в който ние се опитваме да видим какво е налице в мрежата.