Tvrtke treba oplesti po prstima kad prijeđu granicu - kao što je Google nedavno učinio s korisnicima Safarija ili kad je lagao da ne može indeksirati Twitter - ali i stalno preispitivati što nam je prihvatljivo te na to jasno upozoravati.

Dakle, trostruka točka određuju rekurziju, odnosno da ukoliko neki direktorij počinje s 200, i njega će se indeksirati.

Ukoliko želite indeksirati samo određene foldere, navedite ih, odijeljene dvotočkama:

Vrijedi napomenuti da mairix ne radi locking mboxova, što znači da ukoliko želite indeksirati INBOX, možda neće biti indeksirane sve poruke.

Također3, pojavio se i Google base, koji služi kao indekser raznih informacija, primjerice ako prodajete neki auto, stavit ćete informacije o njemu uz određene ključne riječi, te će se to indeksirati.

Interna praksa - Odvjetnički ured može indeksirati sve dokumente u uredu (doc, PDF,...), te kasnije možete pretraživati njihov sadržaj, kao što koristite Google za pretraživanje internet stranica.

Ovo također ubrzava indeksiranje, jer tražilice neće indeksirati stranice sa duplim sadržajem.

Mairix može indeksirati mbox, Maildir i MH formate zapisa, tako da je pokrivena i situacija na tipičnom CARNet poslužitelju.

Osim zabrane, neki roboti podržavaju i naredbu Allow pomoću koje je moguće dozvoliti pristup pojedinom dokumentu; npr. kada se želi indeksirati samo jedan dokument u nekoj podmapi, mogući izgled robots.txt datoteke bio bi:

Većina webmastera izabere baš javascriptu koju tražilica ne može pratiti i indeksirati sliku ili sadržaj u pop-up prozoru.

NOINDEX - robot ne smije indeksirati stranicu, ali može pratiti linkove s nje

Što više kvalitetnih tekstova imate, to će Google imati više sadržaja za indeksirati, te ćete imati veće mogućnosti za samo pozicioniranje.

Catalog sadrži putanje i tipove datoteka koje će se indeksirati.

Zatim mnogi kažu da je blackhat SEO kratkoroč na strategija, u neku ruku da, ali sastavni dio te strategije je nanovo stalno zakupljivati nove domene, podizati webove, indeksirati ih i stalno tako u krug.

Ne samo da će takve stranice rangirati nisko, nego ih, u većini sluč ajeva, Google uopće neće ni indeksirati (duplicate content).

- Upotrebu automatske aplikacije, pretraživača, programa za traženje i dešifriranje ili bilo koje druge aplikacije, kojom je moguće pristupiti, izmijeniti ili indeksirati Uslugu ili bilo koji njezin dio;

Zbog njihove jednostavnosti uređivanja i izmjene, blogove je često teško arhivirati ili indeksirati.

HTML se je nekad smatrao najboljim jezikom koji je bio razumljiv tražilicama tj. tražilice su mogle čitati i indeksirati jedino HTML.

Naučit ćete kako ispravno opisivati web stranice da ih pretraživači samo znaju indeksirati i upoznati alate sa kojima možete utvrditi i povećati vidljivost web sitea na Internetu.

Zato moramo indeksirati kako je napisano

Znamo da je Google u početku imao dosta problema sa javascriptom te ga nije mogao indeksirati, no vremena...

Količina podataka toliko je velika da se jedino uz pomoć sofisticiranog kompjuterskog programa moglo indeksirati i povezati sva imena ljudi i kompanija.

Da li je moj sadržaj koji sakriven AJAX-om stvarno bitan ili nije, ako je neću koristiti AJAX, ako nije, onda ga Google niti ne treba indeksirati.

NOFOLLOW - robot smije indeksirati stranicu, ali ne smije pratiti linkove s nje.

Tražilice su programi (search engine), koji automatski pokušavaju indeksirati sve informacije koje su dostupne na internetu.

svaka (trenutno aktivna ili arhivirana) anketa ima fiksan link na koji možete izravno linkati (Google i ostale tražilice će svaku anketu indeksirati i tako poboljšati pozicije vašeg weba na tražilicama)

Možete pretraživati i indeksirati koliko hoćete, ali kompjuteri neće smisliti ništa novo, što ljudi već nisu smislili.

Napominjemo da u slučaju javnog dijeljenja informacija, tražilice to mogu indeksirati, uključujući i Google.

Složi CMS koji tražilice mogu indeksirati - Zapovijed broj 1: složi CMS koji tražilice mogu bez problema indeksirati.

Ma taj način map možemo indeksirati ključem, koji može biti bilo kojeg tipa, a ne samo cjelobrojan kao kod sekvencijalnih spremnika.