Всеки уеб администратор знае, че за да могат хората да започнат да посещават неговия ресурс от търсачките, той трябва да бъде индексиран. За това какво представлява индексирането на сайтове, как се извършва и какво е значението му, ще разкажем в тази статия.
Какво е индексиране?
И така, думата "индексиране" сама по себе си означава въвеждане на нещо в регистъра, преброяване на наличните материали. Същият принцип важи и за индексирането на сайтове. Всъщност този процес може да се нарече и въвеждане на информация за интернет ресурси в базата данни на търсачките.
По този начин, веднага щом потребителят въведе друга фраза в полето за търсене на Google, скриптът ще му върне резултат, включително заглавието на вашия сайт и неговото кратко описание, което виждаме по-долу.
Как се извършва индексирането?
Самото индексиране ("Яндекс" е, или Google - не играе роля) е доста просто. Цялата мрежа на Интернет, фокусирана върху базата данни с ip-адреси, които имат търсачките, се сканира от мощни роботи - "паяци", които събиратинформация за вашия сайт. Всяка от търсачките има огромен брой от тях и те работят автоматично 24 часа в денонощието. Тяхната задача е да отидат до вашия сайт и да "прочетат" цялото съдържание в него, като същевременно въвеждат данните в базата данни.
Следователно, на теория, индексирането на сайта не зависи много от собственика на ресурса. Решаващият фактор тук е роботът за търсене, който идва на сайта и го изследва. Това влияе на това колко бързо сайтът ви се показва в резултатите от търсенето.
Индексиране на термини?
Разбира се, за всеки уеб администратор е полезно ресурсът му да се появи в резултатите от търсенето възможно най-бързо. Това ще засегне, първо, условията за извеждане на сайта на първите позиции и второ, когато започнат първите етапи на монетизиране на сайта. По този начин, колкото по-скоро роботът за търсене "изяде" всички страници от вашия ресурс, толкова по-добре.
Всяка търсачка има свой собствен алгоритъм за въвеждане на данни за сайта в своята база данни. Например, индексирането на страници в Yandex се извършва на етапи: роботите сканират сайтовете постоянно, след което подреждат информацията, след което се извършва така наречената „актуализация“, когато всички промени влязат в сила. Редовността на подобни събития не се установява от компанията: те се провеждат веднъж на всеки 5-7 дни (по правило), но могат да се провеждат както 2, така и 15 дни предварително.
В същото време индексирането на сайта в Google следва различен модел. В тази търсачка такива „актуализации“(базови актуализации) се извършват редовно, следователно изчаквайте всеки път, докато роботите въведат информацията в базата данни, а след това тяще се поръчва на всеки няколко дни, не е необходимо.
Въз основа на горното можем да направим следното заключение: страниците в Yandex се добавят след 1-2 "актуализации" (тоест средно за 7-20 дни), а в Google това може да се случи много по-бързо - буквално за ден.
В същото време, разбира се, всяка търсачка има свои собствени особености за това как се извършва индексирането. Yandex, например, има така наречения „бърз бот“– робот, който може да въведе данни в проблема за няколко часа. Вярно е, че не е лесно да го накарате да посети вашия ресурс: това се отнася основно за новини и различни важни събития, развиващи се в реално време.
Как да вляза в индекса?
Отговорът на въпроса как да индексирате сайта си в търсачките е едновременно прост и сложен. Индексирането на страници е естествен феномен и ако дори не се замисляте за това, а просто, да речем, поддържате блога си, като постепенно го изпълвате с информация, търсачките ще „погълнат“перфектно вашето съдържание с течение на времето.
Друго нещо е, когато трябва да ускорите индексирането на страници, например, ако имате мрежа от така наречените "сателити" (сайтове, предназначени да продават връзки или поставят реклами, чието качество обикновено е по-лошо). В този случай трябва да вземете мерки, така че роботите да забележат вашия сайт. Следните се считат за често срещани: добавяне на URL адреса на сайта към специална форма (нарича се „AddUrl“); стартиране на адреса на ресурса през директориите с връзки; добавяне на адрес към директорииотметки и други. Във форумите за SEO има много дискусии за това как работи всеки от тези методи. Както показва практиката, всеки случай е уникален и е трудно да се намерят по-точно причините, поради които единият сайт е бил индексиран за 10 дни, а другият за 2 месеца.
Как да ускорим влизането в индекса?
Въпреки това, логиката зад по-бързото влизане на сайта в индекса се основава на свързването към него. По-специално, говорим за задаване на URL адреси на безплатни и публични сайтове (отметки, директории, блогове, форуми); за закупуване на връзки в големи и популярни сайтове (с помощта на борсата Sape, например); както и добавяне на карта на сайта към addURL формуляра. Може би има и други методи, но тези, които вече са изброени, могат спокойно да се нарекат най-популярните. Припомнете си, като цяло всичко зависи от сайта и късмета на неговия собственик.
Кои сайтове са индексирани?
Според официалната позиция на всички търсачки, сайтовете, които преминават през серия от филтри, попадат в индекса. Никой не знае какви изисквания съдържат последните. Известно е само, че с течение на времето всички те се подобряват по такъв начин, че да филтрират псевдосайтове, създадени за печелене на пари чрез продажба на връзки и други ресурси, които не носят полезна информация за потребителя. Разбира се, за създателите на тези сайтове основната задача е да индексират страниците възможно най-много (да привличат посетители, да продават връзки и т.н.).следващо).
Какви ресурси забраняват търсачките?
Въз основа на предишната информация можем да заключим кои сайтове е най-вероятно да не влязат в SERP. Същата информация се изразява и от официални представители на търсачките. На първо място, това са сайтове, съдържащи неуникално, автоматично генерирано съдържание, което не е полезно за посетителите. Следват ресурси, в които има минимум информация, създадена за продажба на връзки и т.н.
Вярно, ако анализирате резултатите от търсачките, можете да намерите всички тези сайтове в него. Ето защо, ако говорим за сайтове, които няма да присъстват в резултатите от търсенето, трябва да отбележим не само неуникалното съдържание, но и редица други фактори – много връзки, неправилно организирана структура и т.н..
Скриване на съдържание. Как да деактивирам индексирането на страници?
Търсачките обхождат цялото съдържание на сайта. Въпреки това, има техника, чрез която можете да ограничите достъпа на роботите за търсене до определен раздел. Това става с помощта на файла robots.txt, на който реагират "паяците" на търсачките.
Ако този файл е поставен в корена на сайта, индексирането на страниците ще продължи според скрипта, който е написан в него. По-специално, можете да деактивирате индексирането с една команда - Disallow. В допълнение към него файлът може да посочи и секции от сайта, за които ще се прилага тази забрана. Например, за да забраните индекса на целия сайт, достатъчно е да посочитеедна наклонена черта "/"; и за да изключите секцията “магазин” от резултатите от търсенето, достатъчно е да посочите следната характеристика във вашия файл: “/shop”. Както можете да видите, всичко е логично и изключително просто. Индексирането на страниците се затваря много лесно. В същото време роботите за търсене посещават вашата страница, четат robots.txt и не въвеждат данни в базата данни. Така че можете лесно да манипулирате, за да видите определени характеристики на сайтовете в търсенето. Сега нека поговорим за това как се проверява индексът.
Как мога да проверя индексирането на страницата?
Има няколко начина да разберете колко и кои страници присъстват в базата данни на Yandex или Google. Първият - най-простият - е да зададете съответната заявка във формата за търсене. Изглежда така: site:domen.ru, където вместо domen.ru пишете съответно адреса на вашия сайт. Когато направите такава заявка, търсачката ще покаже всички резултати (страници), разположени на посочения URL. Освен това, освен просто да изброите всички страници, можете да видите и общия брой индексирани материали (вдясно от фразата „Брой резултати“).
Вторият начин е да проверите индексирането на страници с помощта на специализирани услуги. Сега има голям брой от тях, направо могат да се нарекат xseo.in и cy-pr.com. На такива ресурси можете не само да видите общия брой страници, но и да определите качеството на някои от тях. Това обаче ви е необходимо само ако разбирате по-задълбочено тази тема. По правило това са професионални SEO инструменти.
Относно "принудителното" индексиране
Искам да напиша и малко за т.нар„Принудително“индексиране, когато човек се опитва да вкара сайта си в индекса, използвайки различни „агресивни“методи. Оптимизаторите не препоръчват да правите това.
Търсачките, най-малкото, забелязвайки прекомерна активност, свързана с нов ресурс, могат да наложат някакъв вид санкции, които влияят негативно на състоянието на сайта. Ето защо е по-добре да направите всичко, така че индексирането на страниците да изглежда възможно най-органично, постепенно и гладко.
