웹사이트
월드 와이드 웹(WWW)는 1989년 CERN의 팀 버너스 리가 만들었다. 1993년 4월 30일에 CERN은 월드 와이드 웹이 누구나 자유롭게 이용할 수 있을 것이라고 선언하였다. HTML과 HTTP가 도입되기 전에 파일 전송 프로토콜과 고퍼 프로토콜과 같은 다른 프로토콜들이 서버로부터 개별 파일을 내려받는 데 쓰였다. 이러한 프로토콜들은 사용자가 탐색하고 파일을 내려받는 단순한 디렉터리 구조를 제공한다. 문서는 워드 프로세서 형식 등으로 형식화되지 않은 순수 문자로만 된 글자로 표현되었다.
웹 검색 엔진
1993년 여름까지 수작업으로 만들어진 몇몇 목록들을 빼고는 웹을 위한 검색 엔진이 없었다. 제네바 대학의 오스카 니에르스트라츠는 이 목록들을 주기적으로 복사하여 표준화하는 펄 프로그램을 짰다. 이렇게 표준화된 목록은 1993년 9월 2일에 공개된 최초의 원시적 검색엔진인 W3카탈로그의 기초가 되었다. 1993년 6월 MIT의 매튜 그래이는 아마도 첫 번째 웹 로봇이라 할 수 있는 웹 완더러를 펄 프로그램으로 개발했다. 웹 완더러를 이용해 그는 완덱스라는 웹 문서 색인을 만들었다. 웹 완더러는 웹 세상의 크기를 측정하기 위해 개발된 것으로 이 작업은 1995년 말까지 계속되었다. 웹의 두 번째 검색엔진은 1993년 11월에 등장한 알리웹이었다. 알리웹은 웹 로봇을 쓰지않고 웹사이트 운영자가 등록하는 형태로 운영되었다.