Jotkut hakukoneet myös Web-hakukoneet sato sähköpostiosoitteita ja kunnossapidon tehtävissä, lisäksi kerätä tietoja verkkosivuilla. Jokainen hakukone on omat yksilölliset indeksointirobotit ja jokainen hakukone on muunnelmia, miten ne keräävät information.Webmaster pitäisi olla joitakin viitteitä siitä, kuinka kukin hakukoneen joukkoon sivuja, jotta ymmärtää, miksi yksi asiakirja on sijoittunut korkeammalle kuin toinen.
Vaikka hakukoneet pitävät algoritmeja salaista, osittain tehdä elämän vaikeammaksi Black Hat hakukoneoptimoijat web-master pitäisi yrittää parhaansa saada jonkinlainen käsitys siitä, miten hakukoneoptimoinnin hakustrategia pitäisi toimia.
