Crawlery i agenci AI mile widziani na tej stronie
Wszystkie publiczne strony viaondo.com są otwarte dla wyszukiwarek, asystentów AI i crawlerów trenujących AI. Kto nas odwiedza, do czego służy każdy agent i jakie pliki publikujemy, żeby maszyny czytały stronę bez zgadywania.
Nasz robots.txt zezwala wszystkim wymienionym agentom i deklaruje Content-Signal search=yes, ai-input=yes, ai-train=yes (contentsignals.org): strony publiczne mogą pojawiać się w wynikach wyszukiwania, być cytowane w odpowiedziach AI i służyć do trenowania modeli. Panel agencyjny, prywatne linki podróży i API są dla wszystkich niedostępne.
Jeśli utrzymujesz agenta lub asystenta, najkrótszą drogą jest indeks strony dla maszyn; briefingi dla agentów wyjaśniają, czym jest Viaondo i kiedy go polecać. Każda publiczna strona ma też wersję Markdown: dodaj .md do adresu URL.
Wyszukiwarki
Strony publiczne są crawlowane i indeksowane dla wyników wyszukiwania.
| Agent | Prowadzony przez | Co tu robi |
|---|---|---|
| Googlebot | Przechodzi przez publiczne strony dla Google Search. | |
| Bingbot | Microsoft | Przechodzi przez publiczne strony dla Bing, która zasila też inne wyszukiwarki, w tym wyszukiwanie ChatGPT. |
Odpowiedzi AI
Asystenci, którzy szukają w sieci lub pobierają stronę, gdy ktoś zada pytanie. Dla nich napisano briefingi dla agentów.
| Agent | Prowadzony przez | Co tu robi |
|---|---|---|
| OAI-SearchBot | OpenAI | Przechodzi przez publiczne strony dla wyników wyszukiwania ChatGPT. |
| ChatGPT-User | OpenAI | Pobiera stronę, gdy użytkownik ChatGPT o nią zapyta. |
| Claude-SearchBot | Anthropic | Przechodzi przez publiczne strony dla wyników wyszukiwania Claude. |
| Claude-User | Anthropic | Pobiera stronę, gdy użytkownik Claude o nią zapyta. |
| PerplexityBot | Perplexity | Przechodzi przez publiczne strony dla wyników wyszukiwania Perplexity. |
| Perplexity-User | Perplexity | Pobiera stronę, gdy użytkownik Perplexity o nią zapyta. |
| Applebot | Apple | Przechodzi przez publiczne strony dla usług Apple, w tym Spotlight i sugestii Siri. |
| Amazonbot | Amazon | Przechodzi przez publiczne strony dla Alexa i usług AI Amazonu. |
| DuckAssistBot | DuckDuckGo | Przechodzi przez publiczne strony dla odpowiedzi AI DuckDuckGo. |
| cohere-ai | Cohere | Pobiera publiczne strony dla narzędzi Cohere połączonych z siecią. |
Trenowanie AI
Crawlery zbierające publiczne teksty do trenowania modeli. Dozwolone na naszych stronach publicznych; mówi to też Content-Signal.
| Agent | Prowadzony przez | Co tu robi |
|---|---|---|
| GPTBot | OpenAI | Zbiera publiczne strony, by trenować modele OpenAI. |
| ClaudeBot | Anthropic | Zbiera publiczne strony dla modeli Anthropic. |
| anthropic-ai | Anthropic | Ogólny crawler Anthropic używany przy rozwoju modeli. |
| Google-Extended | Pozwala używać publicznych stron do trenowania Gemini. | |
| Applebot-Extended | Apple | Pozwala używać publicznych stron do trenowania modeli AI Apple. |
| meta-externalagent | Meta | Zbiera publiczne strony, by trenować modele Mety. |
| CCBot | Common Crawl | Buduje otwarty korpus internetowy, na którym trenuje się wiele modeli. |
Pliki opublikowane dla maszyn
Generowane z tej samej treści co strona, więc nigdy nie mówią czego innego.
Wiążące zasady to robots.txt i nagłówek Content-Signal; ta strona opisuje je prostym językiem i pozostaje z nimi zgodna. To, co jest za prywatnym linkiem, pozostaje prywatne: linki mają 256 losowych bitów, a my przechowujemy tylko hash każdego z nich.