Robots.txt, web sitenizin kök dizininde bulunur ve sitenizi taramaya gelen kontrol motorlar?na ne sayfalar?n?z? taray?p hangilerini dizinlerine ekleyebileceklerini mütekellim bir komut dosyas?d?r. Sitenize mevrut botlar burada konum vadi komutlar? takip ederek devinim paha.bizim de sitelerde yapmamiz müstelzim sey sitemizde taharri motorlarinda