Створивши новий сайт, молодий вебмастер з нетерпінням чекає, коли ж відбудеться перша індексація сайту в Яндексі.
Приємно відчувати себе молодим. Дуже багато веб-майстри з любов'ю говорять про свій сайт: «Мій сайт ще зовсім молодий». Зрозуміло, що молоді сайтобудівники іноді не володіють якимись потрібними знаннями і методиками. Мудрість приходить з віком.
Мені, наприклад, було дуже цікаво дізнатися, що ж таке індексація сайту, і як проходить індексація сайту в Яндексі.
Вважається, що Яндекс в першу чергу проводить індексацію російськомовних сайтів. Тому сайти на доменах російськомовної зони ru, su, ua, рф, на початковому етапі індексуються набагато швидше, ніж на доменах буржунете com, net, info і інших.
Це слід враховувати при виборі доменного імені. Правда потім, коли виявляється, що сайт російськомовний, ситуація вирівнюється. Але є ймовірність, що першу індексацію доведеться чекати довше.
Як пошуковий робот може дізнатися про новий сайт? За посиланням з іншого вже проіндексованого сайту або після реєстрації сайту в пошуковій системі - додавання в аддурілку.
Аддурілку Яндекса. аддурілку Google, так само як і сервіси для вебмайстрів інших пошукових систем надають таку послугу. Ви розміщуєте туди Url свого сайту і реєструєте його. Не слід забувати, що там теж може бути чергу, а, значить, індексація сторінок сайту може відбутися не миттєво. Всьому свій час.
Як же відбувається індексація сайту? Будь-яка пошукова система має свої дата-центри, де численні сервера зберігають інформацію про проіндексованих документах. Ця інформація і потрапляє в пошукову видачу.
Пошуковий робот по посиланню приходить на новий сайт або документ (сторінку) і зчитує інформацію. Починається індексація сайту в Яндексі.
Пошукова система особливим чином перетворює інформацію і зберігає її на серверах свого дата-центру.
У чому сенс такого перетворення? Всі слова нового документа шикуються в алфавітному порядку, і поруч з кожним словом вказуються його координати і інші потрібні для пошукача дані. Якщо слово в документі зустрічається кілька разів, то поруч з ним буде кілька наборів координат.
Перетворений документ особливим чином стискається. Виходить зовсім невеликий за розміром текстовий файлик, який і буде брати участь в пошуку.
Це так званий алгоритм інвертованих індексів або зворотна індексація.
Такий алгоритм дозволяє значно прискорити пошук. Недолік алгоритму в тому, що інформація спотворюється і від цього страждає якість.
Але поряд зі зворотним індексацією, пошукова система зберігає і копію Вашого документа (пряма індексація).
Для чого це потрібно? Ви, напевно, вже помітили, що за різними пошуковими запитами на одну і ту ж статтю виводиться різний опис (сниппет) в пошуковій видачі.
Це пошукова система кожен раз вирізає відповідну фразу опису (сниппет) з Вашого документа. Тому документ і повинен бути під рукою, і в пошуковій видачі Яндекса присутній копія документа.
Якщо чесно, такої сниппет я зовсім не очікувала побачити, в тезі опис варто зовсім інша фраза. Але пошукова система вирішила, що такий опис більше відповідає даному пошуковому запиту.
Ось так, не вдаючись у технічні подробиці, можна описати процес індексації. Треба ж представляти, як відбувається індексація сайту в Яндексі. Схожим чином діють і інші пошукові системи.
Для Яндекса важливо, щоб на сайті була встановлена карта сайту для пошукових систем і Robots.txt. Вимоги Яндекса з цих питань викладені на help.yandex.ru. У файлі Robots.txt можна дати вказівку закрити індексацію деяких сторінок.
Документи, представлені до індексації, повинні бути унікальними. Тому про плагіат краще забути. Кажуть, що Яндекс лімітує індексацію, і більше 100000 - 150000 документів на одному сайті не індексують. Але пересічному громадянину навряд чи вдасться досягти таких величезних чисел. Про це скоріше повинні задуматися великі організації.
Бажаю Вам успішної індексації в усіх пошукових системах!
Ще по темі статті:
А я ось думала: ну чому мій сайт все ніяк не індексується ... А він і «com», і аддурілку я ще не використала. Велике спасибі за інформацію і за правильний заголовок - я на нього і прийшла, а так би далі борсалася.
Останнім часом думки починають розходитися, навіть користуючись аддурілку, яндекс не завжди приймає це як корисну дію, скажімо в силу того, що Ви занадто часто це робите ...
Не потрібно поспішати з індексацією - робіть корисний сайт для людей і Яндекс неодмінно його проіндексарует. Чи не метушіться з аддурілку.
Колеги, у мене індексувалася тільки 1 сторінка. З чим це може бути пов'язано? 70% сторінок знаходиться під фільтром яндекса. Допоможіть будь ласка.
Дякуємо. Поколупатися ще. У аддурілку додався.
Ну ось і я підсіла на Ваш сайт. Все так цікаво. Про індексацію читаю вже не перший раз, і в аддурілку яндекса і гугла додалася десь тижні 2 назад, але щось у мене сумніви з приводу моєї індексаціі.Такое ощущенеіе, що мене яндекс нормально не проіндексовані, та й гугл якось дивно показує, типу внутрішніх посилань немає імного чого еще.Ех! Швидше за все, потрібно і мені дорости до моменту усвідомлення «що є індексація».
Читаю Ваш сайт. Інформація корисна звичайно і потрібна і багато що показано В картинках я застосовую на свій сайт. Але навіть тут. Зайшла Додати для індексації сайт на яндекс і почалося - введіть назву програми (а що це за додаток?) Силка на іконку (яку іконку?) Якісь ще требоВанія.Тоже саме стосується реєстрацією В аддурілку. Де хоч почитати про це? У Вас не виникало ідеї створити словничок для НЕ розумних як я?
Лілія! Щоб додати до аддурілку вводиться Url сайта і все.
Дякую, Олено! Тепер перестану турбуватися і буду працювати над хорошим контентом.
Олена, добрий день. Підкажіть, будь ласка, де правильно розмістити код Яндекс.Метрика? На сайті сервісу написано, що він повинен бути розміщений між тегами. Але мій сайт зроблений за шаблоном, і я не можу знайти це місце. При відкритті коду через Dw та пошуку я також не бачу цей тег. Скажімо, код Google Analytics я успішно розмістив на головній сторінці, і він працює. Код Яндекс.Метрики я розмістив слідом за кодом гугл, але яндекс чомусь його не бачить. З іншого боку, яндекс успішно індексує всі сторінки сайту. Де тут підступ?
Григорій! На молодих сайтах не рекомендують встановлювати Яндекс Метрика, тому що вона не сприяє просуванню сайту, тому що визначає поведінкові фактори не тільки для Вас, але і для себе ...
У мене стоїть тільки Google Analytics.
Ставити одночасно і те і це, на мій погляд зайве ...
Прийміть мою подяку і вдячність! Ще раз переконуюся, що жінки - вчителі пояснюють все конкретно і зрозумілою мені мовою.