Pozycjonowanie
Powyższa reguła zezwala na dostęp do wszystkich stron serwisu dla wszystkich robotów. Polecenie User-Agent służy do określenia, jakich robotów reguła ma dotyczyć, * oznacza, że wszystkich. Wykaz najpopularniejszych robotów internetowych można odnaleźć na stronie http://spiders.pl/ , poza ich nazwą można tam odnaleźć dla jakich wyszukiwarek pracuje dany robot. Drugie polecenia „Disallow” określa elementy (podstrony) witryny, które mają zostać zablokowane dla robotów.Można wyróżnić trzy źródła na podstawie których Google wyznacza grupy stron podobnych tematycznie: treść (nie tylko tekstowa, ale także ta zawarta w multimediach), odsyłacze i wskaźnik popularności strony. Strukturalne podobieństwo dokumentów hipertekstowych badał w swojej publikacji Przemysław Kazienko. Cechą charakterystyczną dokumentów hipertekstowych są odsyłacze, które tworzą strukturę systemu hipertekstowego.
Jest to dosyć istotne w początkowym etapie pozycjonowanie, ponieważ konieczne jest założenie jak ma wyglądać link do pozycjonowanej strony. Nie ma jednoznacznej opinii, czy lepiej jest pozycjonować stronę z adresem z www Pozycjonowanie bez www. Ważne, aby w początkowym etapie określić którąś z tych opcji i systematycznie trzymać się tego wyboru. Ważnym elementem jest także czas jaki potrzebuje użytkownik strony na całkowite jej wczytanie i swobodne przeglądanie jej zasobów. HTC Touch 3G Amarylis Egoistka wnuka majestatycznie oznacza twarde kaloryfery.