Arama motoru satırları, arama motoru örümceklerinden gelen DNS isteklerini özel bir sunucu adresine yönlendirir. Bu sayede örümcek trafiğini normal kullanıcı trafiğinden ayrı olarak yönetebilirsiniz.
Genel Bakış
Web örümcekleri veya web robotları olarak da bilinen arama motoru örümcekleri, önceden tanımlanmış kurallara göre web içeriğini otomatik olarak tarayan ve dizine ekleyen programlar veya betiklerdir.
Senaryolar
Arama motoru örümcekleri sunucu trafiğini ve bant genişliğini tüketir. Arama motoru satırlarını özel bir sunucu adresini gösterecek şekilde yapılandırarak tüm örümcek DNS isteklerini bu adrese yönlendirebilir ve tarama yolunu kontrol edebilirsiniz.
Site geçici olarak kapatıldığında, arama motorları için özel bir satır ayarlamak üzere arama motoru satırlarını kullanabilirsiniz. Bu sayede örümcekler sitenizin içeriğini dizine eklemeye devam eder ve SEO sıralamanız üzerindeki etki azalır.
Arama motoru satırı listesi
|
Birincil satır (satır KODU) |
İkincil satır (satır KODU) |
Üçüncül satır (satır KODU) |
|
Arama motoru (search) |
Google (google) |
Google_Anakara Çin (cn_search_google) |
|
Google_Yurtdışı (os_search_google) |
||
|
Baidu (baidu) |
Baidu_Anakara Çin (cn_search_baidu) |
|
|
Baidu_Yurtdışı (os_search_baidu) |
||
|
Bing (biying) |
Bing_Anakara Çin (cn_search_biying) |
|
|
Bing_Yurtdışı (os_search_biying) |
||
|
Sogou (sougou) |
Sogou_Anakara Çin (cn_search_sougou) |
|
|
Sogou_Yurtdışı (os_search_sougou) |
||
|
Qihu (qihu) |
Qihu_Anakara Çin (cn_search_qihu) |
|
|
Qihu_Yurtdışı (os_search_qihu) |
||
|
Youdao (youdao) |
Youdao_Anakara Çin (cn_search_youdao) |
|
|
Youdao_Yurtdışı (os_search_youdao) |
||
|
Yahoo (yahoo) |
Yahoo_Anakara Çin (cn_search_yahoo) |
|
|
Yahoo_Yurtdışı (os_search_yahoo) |
Sık Sorulan Sorular
-
Neden Google Chrome tarayıcısını kullanmak arama motoru satırını tetiklemez?
Cevap: Arama motoru satırları, arama motoru örümceklerinin LocalDNS çıkış IP'si ile eşleşir. Bu IP, tarayıcıların kullandığı LocalDNS çıkış IP'sinden farklıdır.
-
Arama örümcekleri neden yapılandırılmış arama motoru satırını yakalayamayabilir?
Cevap: Örümcek sunucusunun yerel DNS'i arama motorunun kendi LocalDNS'sini kullanmıyorsa, örümcek DNS çözümlemesi sırasında yapılandırılmış arama motoru satırıyla eşleşemez. Örneğin, Baidu örümcek sunucusu Baidu'nun LocalDNS'sini kullanmazsa Baidu arama motoru satırı etkin olmaz.