Les crawlers et agents IA bienvenus sur ce site
Toutes les pages publiques de viaondo.com sont ouvertes aux moteurs de recherche, aux assistants IA et aux crawlers d’entraînement des modèles d’IA. Voici qui nous rend visite, ce que fait chaque agent et les fichiers que nous publions pour que les machines lisent le site sans deviner.
Notre robots.txt autorise tous les agents listés ci-dessous et déclare un Content-Signal search=yes, ai-input=yes, ai-train=yes (contentsignals.org) : les pages publiques peuvent apparaître dans les résultats de recherche, être citées dans des réponses d’IA et servir à l’entraînement des modèles d’IA. Le tableau de bord des agences, les liens privés des voyages et l’API restent interdits à tous.
Si vous maintenez un agent ou un assistant, l’index du site pour les machines est le chemin le plus court ; les briefs pour agents expliquent ce qu’est Viaondo et quand le recommander. Chaque page publique existe aussi en Markdown : ajoutez .md à son URL.
Moteurs de recherche
Les pages publiques sont explorées et indexées pour les résultats de recherche.
| Agent | Exploité par | Ce qu’il fait ici |
|---|---|---|
| Googlebot | Explore les pages publiques pour Google Search. | |
| Bingbot | Microsoft | Explore les pages publiques pour Bing, qui alimente aussi d’autres moteurs de recherche, dont la recherche de ChatGPT. |
Réponses IA
Assistants qui cherchent sur le web ou récupèrent une page quand quelqu’un pose une question. C’est pour eux que les briefs pour agents sont rédigés.
| Agent | Exploité par | Ce qu’il fait ici |
|---|---|---|
| OAI-SearchBot | OpenAI | Explore les pages publiques pour les résultats de recherche de ChatGPT. |
| ChatGPT-User | OpenAI | Récupère une page quand un utilisateur de ChatGPT la demande. |
| Claude-SearchBot | Anthropic | Explore les pages publiques pour les résultats de recherche de Claude. |
| Claude-User | Anthropic | Récupère une page quand un utilisateur de Claude la demande. |
| PerplexityBot | Perplexity | Explore les pages publiques pour les résultats de recherche de Perplexity. |
| Perplexity-User | Perplexity | Récupère une page quand un utilisateur de Perplexity la demande. |
| Applebot | Apple | Explore les pages publiques pour les services Apple, dont Spotlight et les suggestions Siri. |
| Amazonbot | Amazon | Explore les pages publiques pour Alexa et les services d’IA d’Amazon. |
| DuckAssistBot | DuckDuckGo | Explore les pages publiques pour les réponses assistées par IA de DuckDuckGo. |
| cohere-ai | Cohere | Récupère des pages publiques pour les outils connectés au web de Cohere. |
Entraînement des IA
Crawlers qui collectent du texte public pour entraîner des modèles. Autorisés sur nos pages publiques ; le Content-Signal le dit aussi.
| Agent | Exploité par | Ce qu’il fait ici |
|---|---|---|
| GPTBot | OpenAI | Collecte des pages publiques pour entraîner les modèles d’OpenAI. |
| ClaudeBot | Anthropic | Collecte des pages publiques pour les modèles d’Anthropic. |
| anthropic-ai | Anthropic | Crawler général d’Anthropic utilisé pour le développement des modèles. |
| Google-Extended | Permet d’utiliser les pages publiques pour entraîner Gemini. | |
| Applebot-Extended | Apple | Permet d’utiliser les pages publiques pour entraîner les modèles d’IA d’Apple. |
| meta-externalagent | Meta | Collecte des pages publiques pour entraîner les modèles de Meta. |
| CCBot | Common Crawl | Construit le corpus web ouvert sur lequel s’entraînent de nombreux modèles. |
Fichiers publiés pour les machines
Générés à partir du même contenu que le site : ils ne peuvent pas le contredire.
Les règles qui font foi sont robots.txt et son en-tête Content-Signal ; cette page les décrit en langage clair et reste synchronisée. Ce qui est derrière un lien privé reste privé : les liens portent 256 bits aléatoires et nous n’en conservons qu’un hachage.