Sitemap.xml ja robots.txt: mida sinna panna ja mida mitte
Sitemap.xml ja robots.txt lahendavad erinevaid ülesandeid, kuid neid aetakse pidevalt segi. Selgitan, mis kuulub saidikaarti, mida robots.txt-is sulgeda ja millised vead maksavad indekseerimise.