Google dokumenterer nu Search, Gemini, Shopping og andre produkter gennem en fælles crawling-infrastruktur. En vigtig forskel for SEO og GEO er, at Googlebot og Google-Extended har forskellige roller.
Googlebot
Googlebot crawler indhold til Google Search. Blokering af vigtige sider kan begrænse opdagelse, forståelse og indeksering.
Google-Extended
Google beskriver Google-Extended som en kontroltoken for, hvordan publiceret indhold må bruges af Gemini-apps og Vertex AI API for Gemini. Den er ikke det samme som Googlebot.
Kan de styres separat?
Ja. Websites kan angive præferencer for Google-Extended uden at blokere Googlebot.
Betydning for GEO
Virksomheder bør skelne mellem mål for Google Search, generative søgeresultater og tilgængelighed i Gemini, før robots.txt ændres.
Kilder
Google Crawling Infrastructure og Google AI optimization guide.