Меню сайта



VIP Блок
Новости проекта

Видеоурок-Бесплатное продвижение вашей реф ссылки !


Если у вас есть сайт, вы хотите зарабатывать на контекстной рекламе Adsense, но Ваш сайт по каким-либо причинам не проходит модерацию. То моё предложение - для Вас. Всего лишь за 20 вмз я поставлю Ваш код на свой сайт, чтобы Ваш аккаунт прошёл первичную модерацию. После прохождения модерации код естественно снимаю.…


Авторизация


У нас - 04.12.2016 0


Виджет проекта

Списки серфинга


Статистика проекта

Дата открытия: 21.05.2014г.


Дата на сервере: 04.12.2016г.

Время на сервере: 05:01


Сайтов в базе: 234 шт.

Сайтов просмотрено: 5544407


Пользователей: 895

Жалобы на сайты: 0 шт.


Яндекс.Метрика

Рейтинг@Mail.ru


Реклама



Витрина ссылок



Скриншот сайта


Каталог статей SEO тематики

Правила обработки директивы Allow файла robots.txt

Дата: 12.09.2014
Новые правила обработки директивы Allow файла robots.txt. Чтобы разрешить доступ робота к некоторым частям сайта или сайту целиком, используется директива 'Allow', о новых правилах её использования читайте далее.

Пример:
User-agent: Yandex Allow: /catalog Disallow: /

# запрещает скачивать все, кроме страниц
# находящихся в '/catalog'

Сейчас для корректной обработки этой директивы ее необходимо использовать с учетом порядка: если для данной страницы сайта подходит несколько директив, то выбирается первая в порядке появления в выбранном User-agent блоке.

Примеры:

User-agent: Yandex Allow: /catalog Disallow: /

# запрещает скачивать все, кроме страниц находящихся в '/catalog'

User-agent: Yandex Disallow: / Allow: /catalog

# запрещает скачивать весь сайт

Через несколько недель Яндекс планирует внедрить изменение в обработке поисковым роботом директивы allow и отказаться от учета порядка. Директивы будут сортироваться по длине префикса URL’а (от меньшего к большему) и применяться последовательно. Такое изменение позволит Яндексу соответствовать международным принципам применения директивы, чтобы и у российских, и у зарубежных вебмастеров не возникало трудностей при составлении файла robots.txt для разных поисковых систем.

Если на вашем сайте в robots.txt используются директивы allow и disallow, пожалуйста, проверьте их на соответствие новым стандартам.
Комментариев к данной статье нет

Для того чтобы добавить комментарий авторизуйтесь в системе!


ALIEXPRESS








Раскрутка и продвижение

Система обмена визитами Seotitan.ru

Позволяет без регистрации и абсолютно бесплатно привлечь посетителей на Ваш сайт. У вас есть возможность различных и эффиктивных способов раскрутки своего проекта на нашем сервисе, начиная от бесплатной рекламы, баннеров, бегущих строк и заканчивая сёрфингом проектов. Выбрав подходящий план просмотра, Вы посещаете сайты других участников системы обмена визитами (количество ссылок указано в описании плана просмотра) и просматриваете их в течение определенного времени. По истечении таймера Ваша ссылка добавляется в список просмотра, в дальнейшем ее просматривают другие участники обмена визитами.
Читать далее

Трейлер «Острова черепа»

Трейлер «Острова черепа»
Главные роли в проекте Джордана Вогт-Робертса исполнили Том Хиддлстон, Сэмюэл Л. Джексон, Бри Ларсон и Джон Гудман, а российская премьера запланирована на 9 марта следующего года.
  • Дата: 19 ноября 2016
  • Опубликовал: admin
  • Комментариев: 3