Bu sitede hoş karşılanan crawlerlar ve yapay zekâ ajanları
viaondo.com’un tüm herkese açık sayfaları arama motorlarına, yapay zekâ asistanlarına ve yapay zekâ eğitim crawlerlarına açıktır. Bizi kim ziyaret eder, her ajan ne yapar ve makinelerin siteyi tahmin etmeden okuması için hangi dosyaları yayımlarız?
robots.txt dosyamız aşağıda listelenen tüm ajanlara izin verir ve search=yes, ai-input=yes, ai-train=yes içeriğine sahip bir Content-Signal tanımlar (contentsignals.org): herkese açık sayfalar arama sonuçlarında yer alabilir, yapay zekâ yanıtlarında alıntılanabilir ve model eğitmek için kullanılabilir. Acentenin paneli, özel seyahat bağlantıları ve API herkes için kapalıdır.
Bir ajan veya asistan işletiyorsanız en kısa yol makineler için site dizini’dir; ajan brifingleri Viaondo’nun ne olduğunu ve ne zaman önerileceğini açıklar. Her herkese açık sayfanın ayrıca bir Markdown sürümü vardır: URL’sine .md ekleyin.
Arama motorları
Herkese açık sayfalar arama sonuçları için taranır ve dizine eklenir.
| Ajan | İşleten | Burada yaptığı |
|---|---|---|
| Googlebot | Google Search için herkese açık sayfaları tarar. | |
| Bingbot | Microsoft | Bing için herkese açık sayfaları tarar; Bing aynı zamanda ChatGPT araması dahil diğer arama motorlarını da besler. |
Yapay zekâ yanıtları
Birisi soru sorduğunda webde arama yapan veya bir sayfayı getiren asistanlar. Ajan brifingleri onlar için yazıldı.
| Ajan | İşleten | Burada yaptığı |
|---|---|---|
| OAI-SearchBot | OpenAI | ChatGPT arama sonuçları için herkese açık sayfaları tarar. |
| ChatGPT-User | OpenAI | Bir ChatGPT kullanıcısı sorduğunda sayfayı getirir. |
| Claude-SearchBot | Anthropic | Claude arama sonuçları için herkese açık sayfaları tarar. |
| Claude-User | Anthropic | Bir Claude kullanıcısı sorduğunda sayfayı getirir. |
| PerplexityBot | Perplexity | Perplexity arama sonuçları için herkese açık sayfaları tarar. |
| Perplexity-User | Perplexity | Bir Perplexity kullanıcısı sorduğunda sayfayı getirir. |
| Applebot | Apple | Spotlight ve Siri önerileri dahil Apple hizmetleri için herkese açık sayfaları tarar. |
| Amazonbot | Amazon | Alexa ve Amazon’un yapay zekâ hizmetleri için herkese açık sayfaları tarar. |
| DuckAssistBot | DuckDuckGo | DuckDuckGo’nun yapay zekâ destekli yanıtları için herkese açık sayfaları tarar. |
| cohere-ai | Cohere | Cohere’in web bağlantılı araçları için herkese açık sayfaları getirir. |
Yapay zekâ eğitimi
Modelleri eğitmek için herkese açık metinleri toplayan crawlerlar. Herkese açık sayfalarımızda izinli; Content-Signal da bunu söylüyor.
| Ajan | İşleten | Burada yaptığı |
|---|---|---|
| GPTBot | OpenAI | OpenAI’nin modellerini eğitmek için herkese açık sayfaları toplar. |
| ClaudeBot | Anthropic | Anthropic’nin modelleri için herkese açık sayfaları toplar. |
| anthropic-ai | Anthropic | Model geliştirmede kullanılan genel Anthropic crawlerı. |
| Google-Extended | Herkese açık sayfaların Gemini’yi eğitmek için kullanılmasına izin verir. | |
| Applebot-Extended | Apple | Herkese açık sayfaların Apple’nin yapay zekâ modellerini eğitmek için kullanılmasına izin verir. |
| meta-externalagent | Meta | Meta’nın modellerini eğitmek için herkese açık sayfaları toplar. |
| CCBot | Common Crawl | Birçok modelin eğitildiği açık web derlemesini oluşturur. |
Makineler için yayımlanan dosyalar
Sitenin kendisiyle aynı içerikten üretilir, bu yüzden sayfalarla asla çelişmezler.
Bağlayıcı kurallar robots.txt ve Content-Signal başlığıdır; bu sayfa onları sade bir dille açıklar ve eşzamanlı tutulur. Özel bir bağlantının arkasındakiler özel kalır: bağlantılar 256 rastgele bit taşır ve her birinin yalnızca hash’ini saklarız.