web crawler
-
(bkz: robots.txt)
-
(bkz: spider)
-
(bkz: wall crawler)
-
-
bir zamanlar yahoo, altavista ve excite ile birlikte en poüler arama motorlarından biriydi.
sonra google geldi. -
arama motorları siz arama yapınca bulabilsin diye internette rastladığı tüm siteleri, sayfaları, içerikleri indeksleyen botlara verilen genel isim.
bu botlar sürekli çalışırlar, sürekli bir yerleri gezerler, sürekli bir yerlerden data toplarlar. bu toplanan data indekslenir, düzgünce ulaşılabilir bir şekilde data warehouse larda saklanır. sonra da birisi arama yapınca indekslenmiş kayıtlar buralardan bulunup çıkarılır.
aslında siz google'da arama yapınca tüm internette değil google'ın indekslerinde arama yapıyorsunuz gibi bir şey var yani.
ekşi sözlük kullanıcılarıyla mesajlaşmak ve yazdıkları entry'leri
takip etmek için giriş yapmalısın.
hesabın var mı? giriş yap