Google ponuja Google Search Console (nekdanji Webmaster Tools, zbirka orodij za spletne skrbnike), ki omogoča ustvarjanje XML Sitemap, s katerim spletnemu pajku omogočamo odkritje vseh spletnih strani in podstrani, še posebej strani, ki jih pajek ne more odkriti z avtomatičnim sledenjem povezavam.

Spletni pajki upoštevajo množico faktorjev, ko brskajo po spletnem mestu. Spletni iskalniki ne indeksirajo vsake spletne strani. Razdalja med korenom imenika in podstranmi lahko igra pomembno vlogo v brskanju spletnega pajka. Probleme pri brskanju spletnih pajkov povzročajo tudi spletne strani z različnimi grafičnimi vsebinami, flash datotekami in dinamičnimi vsebinami. vir: (wikipedia)

Primer: Postavili ste spletno stran na katero ste vnesli vaše podatke (naziv podjetja, kraj, telefon, email, vsebina, slike galerija). V roku leta ali dveh pa nameravate spremeniti naziv podjetja in vse ostale podatke.

Popraviti oz. spremeniti vsebino na spletni strani je dokaj enostavno, kako pa spremeniti oz. odstraniti staro vsebino v obliki (permalink, title, meta description, slika alt), iz samega brskalnika Google?

“Urejanje informacij v Googlovem profilu podjetja poteka neodvisno od sprememb na sami spletni strani.”