Zasoby Internetu rosną w niebywałym tempie. Żadna grupa ludzi, która zajmowałaby się ręcznym katalogowaniem stron nie byłaby w stanie nadążyć za tym wzrostem. Poza tym tego typu katalogowanie miałoby wady, na przykład pod jednym hasłem może znajdować się tysiące stron o różnej tematyce. Dlatego też, aby zminimalizować te wady powstały wyszukiwarki, które przeszukują Internet analizując zawartość stron.
W momencie, gdy użytkownik poda wyszukiwarce zapytanie, ona odpowie mu łączami do stron internetowych, które uzna za najodpowiedniejsze, w zależności od użytego algorytmu. Wyszukiwarki działające na analizie treści strony mogą objąć swoim działaniem znacznie większą część sieci niż tradycyjne katalogi.
Niestety tego typu wyszukiwarki są bardzo podatne na wszelkie nadużycia. Najczęściej użytkownik, zamiast interesujących go informacji, otrzymuje linki do stron, które kompletnie nie leżą w jego dziedzinie zainteresowań, lub w ogóle nie odpowiadają na wpisane wcześniej w wyszukiwarkę zapytanie.