robots.txt dosyanız bir AI motorunun botunu engellerse siteniz o AI motorunda görünemez. robots.txt Denetleyici & Oluşturucu, her AI botunun iznini gösterir ve düzeltilmiş bir dosya hazırlar.
Bot izinlerini kontrol etme
Aracı açın. Kenar çubuğunda, Araçlar altında robots.txt Denetleyici & Oluşturucu’ya tıklayın. Bot izin tablosuhttps://<alan adınız>/robots.txt adresini okur. Kart, dosyanın URL’sini gösterir. Dosya yoksa kart, URL’yi bulunamadı ifadesiyle gösterir.
Tablo her AI botu için bir satır gösterir. Her satır şu değerleri gösterir:
- Bot: botun adı.
- Platform: botu kullanan AI platformu.
- Durum: İzinli, Engelli veya Belirtilmemiş. Belirtilmemiş, dosyanızın bu botun adını vermediğini gösterir.
Bir botun engelini kaldırma
1
Engelli botu bulun
Durumu Engelli olan bir satır bulun.
2
Botu düzeltin
O satırdaki Düzelt’e tıklayın. Oluşturucu kartı, o bota izin veren bir
robots.txt hazırlar.3
Kopyalayın veya indirin
Metni kopyalamak için Kopyala’ya tıklayın veya dosyayı
robots.txt olarak kaydetmek için İndir’e tıklayın.Sitemap: https://<alan adınız>/sitemap.xml satırını ekler.
Düzeltme olmadan dosya üretme
Oluşturucu kartında Oluştur’a tıklayın.- Sitenizde bir
robots.txtvarsa Perquery onu korur. Yalnızca dosya bir sitemap bildirmiyorsa bir sitemap satırı ekler. - Sitenizde
robots.txtyoksa Perquery tüm botlara izin veren vehttps://<alan adınız>/sitemap.xmladresini bildiren bir dosya hazırlar.
Dosyayı sitenize ekleme
Dosyayı alan adınızın köküne yükleyin. Dosyahttps://<alan adınız>/robots.txt adresinde açılmalıdır. Ardından aracı tekrar açın ve Bot izin tablosu’nu inceleyin.