Індекс пошукової машини - це база даних мережевих ресурсів, яка постійно оновлюється і модіфіціруетсяс урахуванням того, наскільки часто пошукові боти виявляють нові сторінки або зміни в уже існуючих сайтах.
Зміна - це зміна контенту, поява нової посилання або зміна системи посилань. Якщо сайт новий, то потрібен певний час, щоб він був проіндексований пошукачем - тільки після цього можна сподіватися зустріти його в результатах пошуку. Період індексації займає від 2 днів до двох тижнів і тут все залежить від конкретної пошукової системи. Наприклад, за статистичними даними, найвища швидкість індексації у Googl'а.
Індексація відбувається наступним чином - бот знаходить сторінку і порівнює її вміст з тим, що йому про неї відомо. Якщо сторінка тільки народилась на світ, то вона з'являється в індексі, як нова сторінка, якщо ж в ній старий контент, то бот відправляється у своїх справах далі і нічого не робить.
Схематично все виглядає просто.
Для цього треба прагнути дотримуватися ряду умов, серед яких треба назвати, по-перше. глибину посилань. Дуже добре індексуються сторінки, де, навіть до найдальшої, можна дістатися за три переходи з головної, а якщо такої можливості немає, то корисно створити карту сайту.
По-друге. якщо Ви хочете, щоб була проіндексована вся сторінка цілком, то вигідно її робити не дуже об'ємною, тому що бот індексує тільки перші 100-200 кб. тексту.
Ну і по-третє - пошукачі не завжди розуміють скрипти і, якщо навігація ними перевантажена, то бот, швидше за все, не стане добре індексувати сайт в глибину. Тому, доцільно зробити альтернативні html-посилання.
Наостанок треба сказати, чточем більше зовнішніх посилань має сайт, тим швидше він буде переіндексувати.