Разбирателство, роботи и паяци
Търсачката работи, като части от информацията на уебсайтове и да го приберете в масивна database.When претърсване се извършва, на представените думи за търсене са изпратени до база данни, която връща на серия от записи, съчетаване желание на потребителя, както и генериране на страницата с резултатите.
and Spiders .The robots and spiders move throughout the web from hypertext links on web pages and return formatted information from these sites to the main search engine. Информацията в търсачката база данни се събират от софтуер, наречен роботи и паяци . на роботи и паяци придвижват из Мрежата от хипервръзки в уеб страници и да се върнете форматирана информацията от тези сайтове, за да главната машина за търсене.
Търсенето страница съдържа около 10 резултати всяка търсачка, като по-долу image.So този трик е да се гарантира, че сайтът Ви прави списък резултати!

Търсачките споделят тези общи черти:
- А линк към уеб сайт, който съдържа търсената дума
- Описание на обекта
- Пълният URL адрес на уеб сайт, който са върнати
Ако един робот или паяк не е разследвала сайта си, няма да бъде в робот търсене database.A могат да бъдат принудени да посещават вашия сайт чрез попълване на регистрационната форма с търсачката.
Роботите са винаги търсят в Мрежата sites.If робот посещения вашия сайт, много са на разположение методи за да се гарантира, че най-много информация за вашия сайт е сменена с робота.
Накрая трябва да се създаде robots.txt файла да инструктирате роботите търсачката за това какво страници на вашия сайт трябва да бъде обходено и коя страница да не be.This robots.txt файл е да се гарантира, че администраторът или лични файлове Ви не е в състояние да избраните от двигателите, така че не се публикуват на нормалните посетители или търсене на потребителите. Даниил обясни как да се създаде, че robots.txt файл в своя блог.
Честит Blogging!
Имаш ли нещо да кажеш? коментар тук ...































как да ristrict паяка от пълзене в една папка.
добра работа. Продължавайте в същия дух.
За да се ограничи, че трябва да се създаде текст файл наречен robots.txt и да го качите в главната директория ..
Предоставяне на която директория за търсене и които не трябва да е много важно в robots.txt файла .
Полезна информация!
Този заслужава да се прочете и показалеца.
Уау! Благодаря ви за обяснение. Никога не съм знаел преди това как роботи и паяци работи ...
Надявам се роботи и паяци индекс моя сайт ... hehhehe
Вашият Blogspot позволява да качвате robots.txt?.
Създаване на robot.txt файл ще ни помогне много .. Това ще принуди роботът да пълзи или не да пълзи