Wayback Machine
Die Wayback Machine stellt eine Art Archiv im Web dar, welches als gemeinnütziges Projekt bereits 1996 von Brewster Kahle gegründet wurde. Seitdem wurden verschiedene Webseiten hier archiviert, sodass es mittlerweile mehr als 50 Millionen Webseiten mit 40 Millarden Einzelseiten gibt. Durch die Wayback Machine kann man die Veränderung einzelner Webseiten über die Jahre hinweg nachvollziehen. Dadurch wird es auch möglich, eine Webseite von vor zehn Jahren zu betrachten, sofern sie zu diesem Zeitpunkt bereits bestand, und auch wie sie heute aussieht. Ebenfalls kann man sich Webseiten anschauen, die heute gar nicht mehr existieren.
Die einzelnen Webseiten werden dabei automatisch in den Index der Wayback Machine aufgenommen. Die Crawler durchsuchen vollkommen selbstständig das Internet und nehmen neue Seiten auch entsprechend auf. Allerdings können gut sechs bis 12 Monate zwischen dem Zeitpunkt der Indexierung und der öffentlichen Zugänglichkeit vergehen. Findet man die eigene Webseite nicht in der Wayback Machine, kann man diese dort auch selbst eintragen. Ebenfalls besteht die Möglichkeit, eine Aufnahme in den Index der Wayback Machine zu verhindern, indem man eine robots.txt Datei innerhalb des Hauptverzeichnisses auf dem Webserver ablegt.