Co to jest skanowanie?
Jak wyszukiwarka google dowiaduje się o nowych stronach?
Pierwszy etap to pozyskanie informacji o tym, jakie strony internetowe znajdują się w internecie. Nie ma jednego centralnego ogólnoświatowego rejestru wszystkich stron internetowych. Firma Google , aby mieć aktualny spis wszystkich stron pojawiających się w internecie musi przeszukiwać sieć pod kątem nowych stron internetowych dodając je i aktualizując dotychczasowych indeks. Ten proces nazywa się skanowaniem. Miliardy stron które są już w indeksie za sprawą Google zostały zaindeksowane już wcześniej. O istnieniu nowych stron internetowych Google są informowane, śledząc linki ze znanych stron. Kolejne strony internetowe udaje się znaleźć dzięki listom stron (mapom witryn) przesłanym przez webamsterów lub właścicieli.