Robots.txt rankar dig inte, men fel i den kan sänka allt: en kvarglömd Disallow: / från utvecklingsmiljön eller blockerade CSS/JS-filer som hindrar Google från att rendera sidorna.
Viktig nyans: robots.txt stoppar crawling, inte indexering. Ska en sida bort ur indexet är det noindex som gäller — och då får sidan inte vara blockerad, annars ser Google aldrig taggen.
