Robots.txt helpt Google je website te indexeren. Een vaak vergeten SEO bestandje.
Dit is een tekstbestand met een protocol dat Google / Yahoo / Bing en andere crawlers verteld welke pagina's ze mogen bezoeken en welke niet. Niet elke crawler respecteert de uitgesloten pagina's van een robots.txt, plaats dus geen pagina's met gevoelige informatie in je robots.txt bestand. Dit soort pagina's horen echt achter een aparte inlog-omgeving van je website. Robots.txt heeft dus meer een adviserende dan een bindende rol.
Google en andere zoekmachines besteden een korte tijd op je website om deze te indexeren (op te nemen in de zoekresultaten). Hoe beter jij ze vertelt welke pagina's ze zeker niet mogen missen hoe sneller deze worden geïndexeerd.
Of je al een robots.txt bestand hebt is eenvoudig te controleren. Typ /robots.txt achter je website adres in de adresbalk van je browser en je robot.txt bestand wordt getoond als deze is aangemaakt.
Je lokale SEO zelf optimaliseren, daar heb je geen SEO specialist voor nodig. Het kan eenvoudig met een Google bedrijfspagina.
Bepaal vooraf wat de doelen van je website zijn en ga in de oriëntatiefase al aan de slag met het bepalen van je belangrijkste zoekwoorden.
Aankoop, aanmelding of contact. Wat is je doel? Vijf tips om je website te optimaliseren en jij conversie ratio te verbeteren.