2012'den beri · 7/24 online EN Müşteri paneli

robots.txt oluşturucu

Arama motoru ve yapay zekâ botlarına sitenizin hangi bölümlerini tarayabileceklerini söyleyen dosyayı hazırlayın. Dosyayı sitenizin ana dizinine robots.txt adıyla yükleyin.

Siteniz hangi altyapıda?

Taranmasın istediğiniz yollar (her satıra bir tane)

Site haritası adresi

Yapay zekâ eğitim botlarını engelleGPTBot, ClaudeBot, Google-Extended, CCBot, Applebot-Extended. ChatGPT ve Perplexity aramaları açık kalır.

Tüm siteyi engelleYalnızca test veya yapım aşamasındaki siteler için.

robots.txt

# robots.txt · seomit.net robots.txt oluşturucu ile hazırlandı

User-agent: *
Disallow: /wp-admin/
Disallow: /?s=
Disallow: /arama/
Allow: /wp-admin/admin-ajax.php

Sitemap: https://www.siteniz.com/sitemap_index.xml

Engellemek ≠ gizlemekrobots.txt taramayı durdurur, dizine eklemeyi değil. Bir sayfayı Google'dan tamamen kaldırmak için o sayfaya "noindex" etiketi koyun ve robots.txt'de engellemeyin.

Yapay zekâ botlarıEğitim botlarını engellemek içeriğinizin model eğitiminde kullanılmasını sınırlar. Arama botlarını (OAI-SearchBot, PerplexityBot) açık bırakırsanız asistanların cevaplarında görünmeye devam edersiniz.

CSS ve JS'yi engellemeyinGoogle sayfanızı bir tarayıcı gibi çizer. Tema ve eklenti dosyalarını engellerseniz sitenizi bozuk görür.

Diğer ücretsiz araçlar

Tüm araçlar →

Google önizlemeİçerik Meta & Open GraphTeknik Schema (JSON-LD)Teknik SEO uyumlu URLİçerik Kelime sayacıİçerik UTM linkPazarlama Google yorum linkiYerel

Araçlar işin başlangıcı.Backlink ve içerik çalışmasını bize bırakın: ₺3.000'den başlayan SEO paketleri. Paketleri gör