robots.txt
robots.txt, arama botlarına sitenin hangi bölümlerini tarayabileceklerini söyler. Tek bir hatalı Disallow satırı bütün siteyi Google'dan gizleyebilir, bu yüzden her değişiklikten sonra kontrol etmeye değer.
XML site haritası
Site haritası, dizine eklenmesini istediğiniz sayfaları listeler. Geçerli XML olmalı, dosya başına 50.000'den az URL içermeli, kendi alan adınızı kullanmalı ve tercihen lastmod tarihleri içermelidir. robots.txt dosyasında bir Sitemap satırıyla belirtin.