Robots.txt, web sitenizin kök dizininde bulunur ve sitenizi taramaya gelen arama motorlar?na ne sayfalar?n?z? taray?p hangilerini dizinlerine ekleyebileceklerini kail bir komut dosyas?d?r. Sitenize gelen botlar burada durum vadi komutlar? izleme ederek devinme paha.‘’header.php’’ dosyas?na ula?arak ’?n? bulup takkadak ?e?na yap??t?rman?