Робот

Crawler се отнася до интернет бот (автоматизиран софтуер), който сканира уебсайтове. Ботът е систематична програма, която обикновено се използва за индексиране на сайтове. Роботът „пълзи“ през кода. Роботите също могат да бъдат наричани „паяци“. Google е търсачка, която използва роботите за намиране на ново съдържание и за оценка на качеството на уеб страниците за целите на оценяването на ранга.

Вашият коментар