? ЯК закрити сайт від індексації :: як сплести нагайку

Практично кожен веб-майстер намагається оптимізувати сторінки свого сайту таким чином, щоб отримати якомога більше кількість проіндексованих елементів. Але в деяких випадках потрібно навпаки приховати деякі сторінки, наприклад, форма введення реєстраційних даних, відновлення паролів і т.д.

Вам знадобиться

Редагування файлу Robots.txt.

Інструкція

Найпростіший спосіб закрити індексацію кількох розділів або конкретного всього сайту - Це внесення відповідних записів у файл robots.txt. Його використовують як поводиря для пошукових систем. При заході на сторінки сайту пошуковий робот звертається до цього файлу, якщо його немає, він індексує весь сайт, інакше слід рекомендацій, зазначених в цьому файлі.

Якщо ви створювали свій сайт самостійно, і у вас немає такого додатка, у вигляді текстового документа із зазначенням заборон, його легко створити самому. Відкрийте новий текстовий документ, наприклад, через програму «Блокнот». У тілі документа розмістіть наступні рядки: User-agent: * Disallow: /файл.htmlDisallow: / директорія /

Тепер давайте розбиратися, що ви задали пошуковій системі як завдання. Знак «*» навпроти User-agent означає, що дану інструкцію необхідно виконати абсолютно всім файловим системам. Наприклад, якщо ви пропишіть замість «*» значення «Yandex», дане звернення прочитає тільки робот пошукової системи Яндекс. Оператори Disallow забороняють індексацію конкретного розділу (директорія) або файлу (файл.html).

Після складання файлу robots.txt можна перейти безпосередньо до текстів на сторінках сайту. Як вам відомо, пошукові системи не люблять, коли на ваших сторінках розташовуються більше 3 зовнішніх активних посилань. Що робити, якщо потрібно кров з носа, але розмістити 5 або більше посилань. У цих випадках можна використовувати атрибут rel = "nofollow" або тег .

Для закриття посилань від індексації пошукової системи Google необхідно привести посилання в наступний вигляд: анкор посилання. Тіло атрибута необхідно вставити в будь-яку частину посилання, не забуваючи про поділ прогалиною, тобто атрибут можна розмістити між «a» і «href» або між посиланням і її анкором.

Для закриття посилань від індексації пошукової системи Яндекс необхідно привести посилання в наступний вигляд: анкор посилання. Тег ставиться на початку і в кінці посилання. Не забувайте, що цей тег парний: друга частина, на відміну від першої, йде зі знаком «/».