Robots.txt Oluşturucu
Arama motorlarına hangi dizinlere erişip erişemeyeceğini söyleyen robots.txt dosyasını otomatik oluştur.
⚡ Premium Robots.txt
Varsayılan Tarama Davranışı
Crawl-delay (Tarama Sıklığı)
Sitemap URL
Arama Motoru Ayarları
| Bot | Ayar |
|---|---|
| Google Image | |
| Google Mobile | |
| Bing | |
| Yahoo (Slurp) | |
| Baidu | |
| Naver Yeti |
Engellenecek Dizinler
Örnek format: /ornek-klasor/
Oluşturulan Robots.txt