Arama motorlarının çalışma mekanizmaları ve arama botları

Çok güzel bir siteye sahipsiniz. İçeriğinin de iyi olduğunu düşünüyorsunuz. Fakat, arama motorlarından yeterince trafik alamıyorsunuz. Rakip sitelerin içerikleri, sizin sitenizin içeriğinden daha iyi olmamalarına rağmen, arama motorlarında daha üst sıralarda gözükmeleri sinirlerinizi bozuyor. O zaman arama motorlarının nasıl çalıştıklarını öğrenmeli ve onlara uygun içerik hazırlamalısınız.

Önce şunu bilmelisiniz ki, arama motorları, insan değildir. Bütün arama motoru firmaları, dünyanın hemen her yerinde tasarlanman web siteleri taramak ve bunları hafızalarına alabilmek için bir takım yazılımlar veya programlar geliştirmişlerdir. Aksi takdirde, milyarlarca web sayfalarının insan eliyle motorlara eklenmesi imkansız olurdu.

Arama botları, kendinizin sitenize baktığı gibi bakamaz. Sizin botların gözüyle sitenize bakmanız gerekmektedir. Bu nedenle, ilk önce arama botlarının temel prensiplerini anlatan bu sayfayı iyice okuyup anlamanızı ve daha sonra, Arama Sitelerinde Üst Sıralara Çıkmak İçin Ne Yapmalı ? adındaki yazımızı okumanızı tavsiye ediyorum.

Yukarıda programlar veya yazılımlar dediğimiz şeylere internette arama botları denir. Bu botlar sayesinde;

* Arama motorları, internet sitelerinin içeriğini bulur
* Sitelerin alt linklerini ve bu linklerin sağladığı linkleri bulur.
* İnternet sitelerinde link olarak bulunan yeni domainleri taramak için loguna kaydeder.
* Değerli içeriğe sahip olan sitelerle, değersiz içeriğe sahip olan siteleri otomatik olarak ayırt etmek için arama motoru uzmanlarına bilgi verir.

Arama botu, internette spider veya crawler olarak da bilinir. Görevi yukarıda ifade edildiği gibi webi taramaktır. Bulunduğu arama motoruna en fazla web içeriğini sağlamak için çalışan bir asker gibidir. Arama motoru firmalarının bot veya spiderlarına en iyi internet tarama fonksiyonlarını kazandıracak yapay zekayı vermek için çok güçlü bir uzman kadrosunun olması gerekir.

Bot, bir arama motoru için gerçekten çok önemlidir. Örneğin; bir kelimeyi arıyorsanız ve çıkan sonuçlar arasında, alakası olmayan ve sadece sayfa içeriğine gizli şekilde yazılmış olduğundan çıkan sonuçlar, size sinirlenmekten ve zaman kaybından başka pek bir şey vermez. Ancak, Google’da bile böyle boş sonuçlar bulmak mümkün. Ancak unutmayalım ki, sadece birkaç saniye içerisinde üç milyara yakın sonuçtan aranan kelimeye göre binlerce sonuç listemek bile çok zor bir iştir.

Google’ın kullandığı botun adı Googlebot, MSN’in kullandığı botun adı MSNbot ve Yahoo’nun kullandığı botun adı ise Slurp’tır. Bu botlar, sürekli olarak webi gezerler. Ancak, bu üç arama motoru botlarının sayfaları değerlendirirkenki kriterleri farklıdır.

Botların sağladığı sonuçlar sayesinde arama motorları bazı algoritmalar geliştirmiştir. Bunların en bilineni, Google’ın sayfa algoritması Page Rank’tir.

Tavsiye
MSN Son Sürümü
Yeni MSN
MSN