Bir sağlayıcının arama, model eğitimi ve kullanıcı isteğiyle web sayfası getirme botları ayrı olabilir. Bir bot adına izin vermek bütün yapay zekâ ürünlerinde önerilme sağlamaz.

OpenAI örneği

OAI-SearchBot arama amaçlı, GPTBot ise model geliştirmede kullanılabilecek içerik taramasıyla ilişkili ayrı kontrollerdir. ChatGPT-User kullanıcı başlatmalı erişim için farklı bir kategoridedir. Güncel davranış ve IP bilgilerini sağlayıcının belgesinden kontrol edin.

Altyapı engelleri

Robots izinli olsa bile CDN challenge, erişim kuralı veya rate limit sayfayı engelleyebilir. Salt User-Agent adı güvenilir kimlik kanıtı değildir; gerektiğinde resmî bot doğrulama yöntemini uygulayın.

İçeriği değiştirmeyin

Bot için gizli tavsiye veya farklı makale sunmayın. Kullanıcıyla botun aynı kaynaklı içeriğe erişmesi tutarlılığı korur. Tarama loglarını kaynak gösterimi ölçümüyle karıştırmayın.

Kaynaklar ve ek okuma

Genel bilgilendirme. Paket koşulları ve teknik gereksinimler zamanla değişebilir.