robots.txt
robots.txt indique aux robots quelles parties d’un site ils peuvent explorer. Une seule ligne Disallow erronée peut cacher tout un site à Google, il vaut donc mieux le vérifier après chaque modification.
Sitemap XML
Un sitemap liste les pages que vous voulez faire indexer. Il doit être un XML valide, contenir moins de 50 000 URL par fichier, utiliser votre propre domaine et idéalement des dates lastmod. Indiquez-le dans robots.txt avec une ligne Sitemap.