Les lignes des moteurs de recherche vous permettent d'orienter les requêtes DNS des robots d'indexation vers une adresse de serveur dédiée, afin de gérer le trafic des robots séparément du trafic utilisateur standard.
Présentation
Les robots d'indexation (ou spiders web) sont des programmes ou scripts qui parcourent et indexent automatiquement le contenu web selon des règles prédéfinies.
Scénarios
Les robots d'indexation consomment du trafic et de la bande passante du serveur. Configurez des lignes des moteurs de recherche pointant vers une adresse de serveur dédiée pour diriger toutes les requêtes DNS des robots vers cette adresse et contrôler leur chemin d'exploration.
En cas de fermeture temporaire du site, utilisez les lignes des moteurs de recherche pour mettre en place une ligne dédiée. Les robots peuvent ainsi continuer à indexer le contenu de votre site, ce qui limite l'impact sur votre référencement naturel (SEO).
Énumération des lignes des moteurs de recherche
|
Ligne principale (CODE de ligne) |
Ligne secondaire (CODE de ligne) |
Ligne tertiaire (CODE de ligne) |
|
Moteur de recherche (search) |
Google (google) |
Google_Chine continentale (cn_search_google) |
|
Google_Hors Chine (os_search_google) |
||
|
Baidu (baidu) |
Baidu_Chine continentale (cn_search_baidu) |
|
|
Baidu_Hors Chine (os_search_baidu) |
||
|
Bing (biying) |
Bing_Chine continentale (cn_search_biying) |
|
|
Bing_Hors Chine (os_search_biying) |
||
|
Sogou (sougou) |
Sogou_Chine continentale (cn_search_sougou) |
|
|
Sogou_Hors Chine (os_search_sougou) |
||
|
Qihu (qihu) |
Qihu_Chine continentale (cn_search_qihu) |
|
|
Qihu_Hors Chine (os_search_qihu) |
||
|
Youdao (youdao) |
Youdao_Chine continentale (cn_search_youdao) |
|
|
Youdao_Hors Chine (os_search_youdao) |
||
|
Yahoo (yahoo) |
Yahoo_Chine continentale (cn_search_yahoo) |
|
|
Yahoo_Hors Chine (os_search_yahoo) |
FAQ
-
Pourquoi l'utilisation du navigateur Google Chrome ne déclenche-t-elle pas la ligne du moteur de recherche ?
Réponse : Les lignes des moteurs de recherche correspondent à l'adresse IP de sortie LocalDNS des robots d'indexation, laquelle diffère de l'adresse IP de sortie LocalDNS utilisée par les navigateurs.
-
Pourquoi les robots d'indexation peuvent-ils échouer à capturer la ligne du moteur de recherche configurée ?
Réponse : Si le DNS local du serveur du robot n'utilise pas le LocalDNS propre au moteur de recherche, le robot ne peut pas faire correspondre la ligne du moteur de recherche configurée lors de la résolution DNS. Par exemple, si le serveur du robot Baidu n'utilise pas le LocalDNS de Baidu, la ligne du moteur de recherche Baidu ne prendra pas effet.