Teknoloji Soruları

Teknoloji Soruları
1. Googlebot neden sunucumda bulunmayan robots.txt dosyasını arıyor?

Robots.txt Google bot'un web serverınızdaki bilgilerin bir kısmını yada tamamını indirmemesini söyleyen bir standart dokümandır.

2. Googlebot neden sunucumdan yanlış bağlantıları indirmeye çalışıyor?

Ağda var olan bazı linkler zamanla güncelliklerini yitirirler veya kurulumları bozulur. Eğer birisi sizin sitenize vereceği linki yanlış tuşlarsa veya sizin kendi ağ sunucunuzda yaptığınız değişiklikleri verdiği linke yansıtmazsa, Googlebot bu hatalı linki indirmeye çalışacaktır. Bu da sizin ağ sunucusu dahi olmayan bir başka makineye ziyaretçi almanızın nedeni olabilir.

3. Googlebot neden "gizli" web sunucumuzdan bilgi indiriyor?

Gizli tutulmak istenilen ve hiçbir siteden link verilmemiş bir web sunucusunu bulmak hemen hemen imkansızdır. Fakat sizin gizli Web sunucunuzdan başka bir siteye link ile yönlendirme yaptıysanız, yönlendirme yaptığınız web sitesi yönlendirenler kayıtlarında sizin gizli sunucunuzu kaydedebilir ve bu kayıt Google arama motoru veya web avcıları tarafından yakalanabilir.

4. Googlebot neden robots.txt dosyamı uygulamıyor?

Bant genişliğini korumak amacıyla Google bot günde bir kez sadece robots.txt dosyasını indirir veya ne zaman sunucuda birden fazla sayfa varsa yine aynı şey geçerlidir. O yüzden robots.txt sayfasında yapılmış olabilecek herhangi değişikliğin Googlebot tarafından öğrenilmesi zaman alabilir. Ayrıca Googlebot birden fazla makineye dağılmıştır. Bunların her biri robots.txt dosyaları hakkında kendi kayıtlarını tutarlar. Ayrıca kodlamanızın http://www.robotstxt.org/wc/norobots.html daki standarda göre doğru olduğunu kontrol edin. Eğer hala bir problem var gibi ise, lütfen bize bildirin ve biz onu düzeltiriz.

5. Sitemi Googlebot tarafından indekslenmesi için nasıl kaydederim?

Her defasında sizden talep gelmesine gerek kalmadan biz indeksimize yeni siteler ekler ve güncelleriz. Eğer isterseniz, siz de URL ekleme formunu kullanarak site ekleyebilirsiniz.

6. Google'dan nasıl bir site silerim?

Google bütün indeksini belli aralıklarla günceller. Web'i tararken, yeni sayfalar bulur, ölü bağlantıları iptal eder ve bağlantıları otomatik olarak güncelleriz. Ölü bağlantılar bir sonraki taramamızda büyük ihtimalle "solacaklardır".

7. Google.com makinelerinden neden Google bot user-agent'lı bazı hitler alıyorum?

Google bot, web büyüdükçe performansını artırmak için birkaç makineye birden dağıtılmak üzere tasarlanmıştır. Ayrıca, bant genişliği harcamasını azaltmak için sitelere en yakın makinelerde tarama yapıyoruz.