وتنطوي العملية على محرك بحث العنكبوت تحميل الصفحة وتخزينها على محرك البحث على الخادم الخاص، حيث البرنامج الثاني، والمعروفة باسم مفهرس، ومقتطفات من المعلومات حول مختلف الصفحات، مثل الكلمات وحيث أنه يحتوي على هذه الواقعة، كما كذلك أي وزن لكلمات معينة، وكل صفحة تحتوي على وصلات، والتي يتم وضعها في جدولة للزحف في موعد لاحق.
The process involves a search engine spider downloading a page and storing it on the search engine's own server, where a second program, known as an indexer, extracts various information about the page, such as the words it contains and where these are located, as well as any weight for specific words, and all links the page contains, which are then placed into a scheduler for crawling at a later date.