Створення сайтів - студія веб-дизайну WebStudio2U Контактні дані веб-студії WebStudio2U RSS стрічка веб-студії WebStudio2U Мапа сайту Авторизація

Пошукова оптимізація та індексація сайту?

індексація сайту Необхідну інформацію в Інтернет легше всього знайти за допомогою пошукових систем. Уводячи потрібний запит у пошуковий рядок, користувач одержує результат - список сайтів, інформація на яких найбільш точно відповідає пошуковому запиту. Як потрапили ці сайти в такий список? Дуже просто - вони були проіндексовані пошуковим роботом, і тепер система "знає", де шукати потрібну інформацію.
А що таке індексація сайту? Згідно з матеріалами Вікіпедії, вільної енциклопедії, індексація сайту - це процес додавання в базу даних пошукової системи відомостей про сайт, що згодом використовуються для пошуку інформації на проіндексованих сайтах. У відомості про сайт входять, насамперед, ключові слова, описані в спеціальних мета-тегах, а також статті, посилання, іноді зображення.

Існує два основні способи зробити індексацію сайту.

  • Перший спосіб - додати дані про сайт у спеціальну форму, пропоновану пошуковими системами.
  • Другий спосіб - надати пошуковому роботові змогу самому відшукати ваш сайт, наприклад, відштовхуючись від інших сайтів, що посилаються на ваш ресурс.

Строк індексації сайту може бути різним, від декількох днів до декількох тижнів. Процес індексації циклічний і повторюється з періодичністю у два-чотири тижні, залежно від конкретного пошукового робота. Індексуватися може як сайт цілком, так і окремі внутрішні сторінки. Іноді за яких-небудь технічних неполадок, тимчасової відсутності деяких сторінок на сайті або з яких-небудь інших причин сайт може не проіндексуватися. У такому випадку пошукова система буде діяти за одним з таких сценаріїв:

  • відразу виключить непроіндексовані сторінки зі своєї бази даних;
  • проведе повторну індексацію сайту через кілька днів;
  • виключить сторінки, які не були проіндексовані, якщо не виявить їх при повторній індексації.

Для керування індексацією використовується кілька методів: за допомогою карти сайту sitemap,, спеціального файлу robots.txt і мета-тегів.

Закрити вміст сайту від пошукових роботів Yandex можна за допомогою мета-тега <noindex>.

Robots.txt - файл, у якому, оперуючи директивами Disallow, Allow, User-agent, Crawl-delay, можна заборонити або дозволити індексацію тільки певним пошуковим системам або ж повністю заборонити її.

Набагато більше можливостей по керуванню індексацією надає використання карти сайту - sitemap. Файл sitemap містить додаткову інформацію про сторінки сайту, що підлягають індексації. Файл sitemap може бути створений у форматі XML або ж як звичайний текстовий документ, однак формат XML переважніше. Для вказівки розташування файлу sitemap може бути використаний файл robots.txt. Для цього слід додати наступний рядок: Sitemap: http://ім'я_сайту/sitemap.xml

Використання файлу sitemap дозволяє повідомити пошукового робота про такі відомості:

  • про ті сторінки сайту, які потрібно проіндексувати;
  • про те, наскільки часто оновлюється інформація на сторінках сайту;
  • про те, наскільки важлива індексація кожної зі сторінок.

Існує безліч способів прискорення індексації сайту пошуковими роботами. Однак існують також і загальні прості правила, дотримання яких допоможе прискорити індексацію сайту. Не слід створювати занадто об'ємні сторінки (їх розмір не повинен перевищувати 100-200 кбайт). Посилання на внутрішні сторінки сайту краще робити простими, такими, що пояснюють зміст сторінки. Використання так званого людино-зрозумілого URL (ЛЗУ) полегшує індексацію, у той час як використання ідентифікаторів сесій у назвах сторінок, навпаки ускладнює її.

Більш докладно про формат файла sitemap Ви знайдете тут.

Слід також зазначити, що при зміні назви сторінки, навіть без зміни її змісту, така сторінка може не проіндексуватися пошуковою системою, тому краще із самого початку користуватися зручними назвами сторінок, щоб індексація сайту проходила швидко, а сам сайт перебував якнайвище в пошуковій видачі.

Теги:
індексація сайту, способи індексації, пошукові системи, sitemap, robotstxt, пошукові роботи, лзу, пошукова оптимізація, оптимізація сайтів