Der Index ist das Verzeichnis aller Seiten, die eine Suchmaschine durch Crawling im WWW gefunden und aufgenommen hat. Nur Seiten, die im Index der Suchmaschine zu finden sind, können als Suchergebnis angezeigt werden. Genauso können bestimmte Seiten von der automatischen Aufnahme in den Index ausgeschlossen werden, entweder durch den Webmaster oder bei Verstößen gegen Richtlinien von der Suchmaschine selbst.