Программа Netpeak Spider

Вступление

Содержание

Здравствуйте. Сегодня хочу познакомить, вас, с отличным домашним «пауком» или Spider программой, Netpeak Spider. Программа на русском языке, бесплатная, легко управляется и даже, визуально раскрашена и не имеет ограничений по количеству сканируемых страниц.

Программа устанавливается на компьютер и в онлайн режиме провидит сканирование сайта по основным SEO параметрам важным для поисковых ботов.

Описание программы

Spider сканирует ваш сайт и выгружает результаты анализа в отличном визуальном виде. Таблица результатов фильтруется и перестраивается по нужным параметрам.

Параметры анализа

  • Прежде всего, нет ограничений на количество страниц и есть, экспорт, результатов в Excel.
  • Анализ ссылок и якорей с учетов директив файла robots.txt;
  • Анализ изображений;
  • Анализ Java Script;
  • Адреса URL сайта анализируются по ответу сервера и глубине вложения;
  • Учитывает тег canonical и показывает основной адрес;
  • Показывает код ответа сервера (2.X.X – 5.X.X).
  • Показывает все заголовки статей указанные в тегах title;
  • Показывает все описания в мета теге description;
  • Показывает все ключевые слова в тегах keywords;
  • Учитывает параметры index, noindex, follow, nofollow в мета — теге robots;
  • Показывает redirect страниц;
  • Теги H1 и H2 в заголовках и их количество;
  • Исходящие ссылки со страницы и входящие ссылки на страницу;
  • Показывает все внешние и внутренние ссылки на страницы сайта;
  • Есть отличный инструмент, «Дубли страниц». Программа ищет и показывает дубли заголовков (title), описаний (description) и keywords.

Установка программы

Скачать программу нужно на сайте автора: https://netpeaksoftware.com/ru/spider.

Установка простая и быстрая. Язык выбираем русский. После открытия программы нужно пройти регистрацию. Это тоже бесплатно. После регистрации вы получите на указанный почтовый ящик ключ авторизации. Вводим ключ и работаем.

neatpeak-spider-ключ

  • Вписываем URL исследуемого сайта. Жмем старт;
  • После анализа манипулируем кнопками и смотрим анализ по нужному параметру;
  • Фильтры результатов анализа достаточно разнообразны и понятны. Жмете на кнопки, списки перестраиваются;
  • Что приятно, есть визуальная раскраска результатов. Удобно;
  • Показ дублей страниц заказываем справа внизу. Дубли показываются по повторяющемуся тексту и показывают URL, где дубли присутствуют;
  • Результаты анализа можно сохранить файлом Excel. В отличае от программы XENU повторно открыть файл в программе нельзя.

Как работать с программой Netpeak Spider

Откройте программу;

В настройках (кнопка Настройки) укажите все необходимые параметры сканирования. Особое внимание уделите директивам в файле robots. Настройки сохраните;

neatpeak-spider-настройки

  • Укажите сканирование по сайту;
  • Обязательно укажите глубину сканирования страниц.
  • Запустите сканер программы.

neatpeak-spider-1

Результаты будут готовы через несколько секунд.

Далее, анализируйте полученные результаты, все подсвечено цветом (в настройках цвет меняется).

Чтобы посмотреть текстовые дубликаты, в заголовках (1), описаниях (2), ключах (3) используем кнопку «Искать дубликаты» в правом окне.

Выводы

Netpeak Spider отличный инструмент для анализа сайта с рабочего компьютера. Использование программы позволяет быстро оценить основные SEO параметры своего ресурса. К сожалению, с недавнего времени программа стала платной:

Зарегистрируйтесь и получите бесплатный 14-дневный доступ к Netpeak Spider и Netpeak Checker. Данные кредитной карты не требуются.

©SeoJus.ru

seojus.ru

Встречайте Netpeak Spider 2.0 и Netpeak Checker 2.0

Мы с гордостью представляем Netpeak Spider 2.0 и Netpeak Checker 2.0 — теперь ежедневные SEO-задачи будут решаться ещё быстрее и эффективнее. Программы пока что только на английском языке, но даже те, кто с ним не в ладах, вряд ли заметят особые неудобства — мы постарались продумать пользовательский интерфейс до мельчайших деталей. Новые продукты Netpeak Software — Netpeak Spider 2.0 и Netpeak Checker 2.0

Netpeak Spider 2.0 — инструмент для комплексного SEO-аудита сайта

«Здоровье» вашего сайта в надёжных руках: Netpeak Spider с лёгкостью выявляет проблемы внутренней оптимизации, которые могут навредить эффективности вашего SEO.

С помощью Netpeak Spider вы сможете:

Netpeak Checker 2.0 — инструмент для массового SEO-анализа и сравнения сайтов

Всё познаётся в сравнении. И Netpeak Checker полностью это доказывает. Результаты анализа URL-адресов представлены в удобной таблице, что значительно сэкономит ваше время при аудите продвигаемого сайта и сравнении его показателей с конкурентами.

С помощью Netpeak Checker вы сможете:

Как начать пользоваться продуктами

Помимо упомянутых выше Netpeak Spider и Netpeak Checker, мы разработали Netpeak Launcher — новое десктопное приложение, которое позволяет унифицировать доступ ко всем программам Netpeak Software и обеспечивает их обновление. Вы сможете скачать Netpeak Launcher из личного кабинета (User Control Panel) сразу после создания своего аккаунта.

Чтобы почувствовать все преимущества обновлённых продуктов, воспользуйтесь бесплатным триалом. Он даёт полный доступ ко всем возможностям продуктов Netpeak Software на 14 дней, если вы раньше не пользовались программами Netpeak Spider и Netpeak Checker, и на 60 дней, если у вас уже есть такой опыт. Обратите внимание, что 60-дневный триал начинается с даты релиза, то есть с 21 июня 2016 года, поэтому не теряйте время: проверьте свою электронную почту — мы отправили письмо со всей необходимой информацией.

После истечения этого тестового периода, то есть с 19 августа 2016 года, мы планируем остановить поддержку предыдущих версий программ, так как теперь мы уделяем всё наше внимание новым продуктам. Однако, если вы уже успели зарегистроваться в старых версиях программ (1.x), то сможете ими пользоваться без каких-либо ограничений.

А когда вы будете готовы принять решение по дальнейшему использованию программ, просмотрите предлагаемые планы подписки. Их период варьируется от 1 до 12 месяцев, позволяя получить скидку до 30% и дополнительно 10% при покупке обоих продуктов сразу.

Давайте дружить!

Нам очень важны ваши отзывы. Расскажите, что думаете о наших продуктах, задавайте любые волнующие вас вопросы или делитесь своими идеями любым удобным для вас способом:

И ещё обязательно подпишитесь на наши аккаунты в социальных сетях — мы будем делиться новостями Netpeak Software, сообщать о последних обновлениях наших программ и проводить опросы, чтобы вы могли напрямую влиять на продукты.

Ну а если совсем коротко

Вы SEO-специалист или вебмастер, который ищет оптимальное решение своих повседневных SEO-задач? Вам необходимо быстро просканировать сайт и понять, какие ошибки внутренней оптимизации тянут его вниз? Или вы хотите проанализировать большое количество URL-ов, чтобы, например, сравнить свой сайт с сайтами конкурентов и увидеть его сильные и слабые места?

Тогда попробуйте новые программы Netpeak Spider и Netpeak Checker и делайте только эффективное SEO вместе с нами!

Попробовать продукты Netpeak Software


Также советуем ознакомиться со следующим постом из серии о продуктах Netpeak Software → обзор Netpeak Spider 2.1. В этом обновлении мы реализовали автоматическое определение более 50 ошибок, добавили проверку 24 новых параметров, а также внедрили полностью новую таблицу, которая значительно ускоряет и упрощает работу с программой.

netpeak.net

Для кого этот софт?

В первую очередь для SEO-специалистов. Человеку, который вообще не разбирается в оптимизации, будет сложно с ним разобраться. Много настроек, много непонятных ошибок. Тем не менее, некоторыми функциями программы может пользоваться практически любой владелец сайта. Помогут подсказки и объяснения в самой программе, помогут статьи в блоге Netpeak, поможет вот этот мой пост.

Для SEO-шника Netpeak Spider предоставляет очень широкие возможности. Особенно он понравится тем «специалистам», которые берут деньги не за результаты, а за красивые объемные отчеты. Краулер проверяет сайт на наличие более 60 ошибок. И практически по каждой ошибке (об этом ниже) можно создать отдельный отчет на сотни и тысячи строчек в Excel. Для многих заказчиков (к сожалению) размер отчета имеет значение. С помощью Netpeak Spider его можно очень хорошо (и главное, быстро) раздуть.

Отличия от предыдущей бесплатной версии

Несколько лет назад программа была бесплатной. Можно было один раз скачать и потом проводить хоть сотни аудитов.

Для тех моих читателей, которые пользовались бесплатной версией Netpeak Spider, хочу сообщить следующее:

  1. Это совершенно другой софт. В обновленном Netpeak Spider в десятки раз больше возможностей (о некоторых из них ниже).
  2. Теперь отчеты можно сохранять. Этого так не хватало в старой версии.
  3. Краулер больше не перегружает серверы хостингов. Раньше это было серьезным недостатком. Несколько раз я сканировал свои сайты, и из-за слишком большой нагрузки хостинг блокировал мой IP. То есть после блокировки я вообще не мог зайти на нужный сайт со своего компьютера. Сейчас с этим проблем нет. С помощью нового Netpeak Spider я успел просканировать около 10 сайтов разного объема на разных хостингах. Ни один раз не столкнулся с блокировкой или резким прекращением сканирования.

Что умеет новый Netpeak Spider?

Умеет он многое.

Начиная от простых и понятных практически всем функций:

  1. Обнаружение дубликатов Title и Description.
  2. Обнаружение пустых или отсутствующих мета-тегов.
  3. Поиск дублей H1.
  4. Поиск и обнаружение 4xx ошибок (когда ссылка ведет на несуществующую страницу).
  5. Обнаружение изображений, в которых не прописан атрибут ALT.

И заканчивая проверкой сайта на такие параметры, как:

  1. Страницы без внутренних ссылок.
  2. Цепочка редиректов.
  3. Протокол HTTPS.
  4. Ссылки с неправильным форматом.
  5. Одинаковые ли H1 и Title.

Еще он умеет максимально быстро сканировать небольшие сайты (до нескольких тысяч страниц).

Дело в том, что провести аудит вашего ресурса можно с помощью стандартных и бесплатных возможностей Яндекс.Вебмастера и Google Search Console.

Важно понимать, что паук от Netpeak проверит ваш сайт намного быстрее. Если вовремя устранить все ошибки, можно заполучить несколько недель, а то и месяцев дополнительного трафика. Трафика, который приводит клиентов и генерирует продажи.

Несколько советов для тех, кто планирует воспользоваться Netpeak Spider

1. Не воспринимайте ВСЕ ошибки, найденные программой, слишком серьезно

Дело в том, что краулер всегда находит сотни ошибок на любом, даже продуманном и оптимизированном сайте. Как я уже отметил выше, пользу от обнаружения этих ошибок может получить только хитрый и не слишком умелый SEO-шник. Порядочные профессионалы проигнорируют их бо́льшую часть и укажут вам только на самые важные.

Ниже результат сканирования moz.com – сайта, наверное, самого известного в мире SEO-агентства.

SEO-аудит moz.com с помощью Netpeak Spider

Как видите, краулер успел проверить 3484 страницы и нашел на этих страницах 2559 ошибок. Взгляните на столбик справа. Целых 833 страницы, на которых несколько тегов Title.

Дело здесь не в том, что сотрудники Moz заболели звездной болезнью и забили на свой ресурс (у них превосходной, правильно оптимизированный ресурс, работу над которым они не прекращают никогда). Суть в том, что Netpeak Spider – хороший, но не идеальный сканер. Часто он не дает какого-то четкого ответа. Он предоставляет информацию, которую должен проанализировать знающий человек.

Еще по теме:   Подключение к mysql

Например, данные о том, что на многих страницах больше одного тега Title. Я тщательно изучил код страниц, на которые пожаловался Netpeak Spider. Нет на них двух мета-тегов Title. Есть там вот такой код:

Атрибут Title элемента svg

В данном случае <title></title> – атрибут элемента svg. Таких атрибутов может быть несколько на странице, и они совершенно не так воспринимаются поисковиками, как мета-тег Title.

2. Не пытайтесь сразу найти все ошибки

Чем меньше у вас знаний и опыта в SEO, тем более «щадящие» настройки программы стоит выбирать. Когда этих знаний и опыта минимум, ставьте примерно такие настройки сканирования:

Настройки сканирования Netpeak Spider

Не жадничайте. Не пытайтесь получить всё и сразу. Начинайте с основных ошибок.

3. Помните, что не всегда обязательно сканировать сайт целиком

Когда у вас большой интернет-магазин с сотнями тысяч страниц, на его краулинг может уйти не один день. А потом нужно не один день разбираться со всей собранной информацией. Иногда достаточно проиндексировать треть нужных страниц и посмотреть на паттерны (повторяющиеся куски).

Сейчас объясню на примере. Ниже вы видите часть дублей Title, которые Netpeak Spider нашел на сайте Avtogorod39.

Дубли интернет-магазина автозапчастей

Как вы думаете, уже понятно, какие изменения надо вносить в сайт или же нужно просканировать еще 99999 страниц?

Все правильно, картинка уже и так ясна. Нам нужно избавиться от 3 «хвостиков», которые постоянно повторяются. Сделать это можно с помощью rel=«canonical» (более приемлемый вариант) или с помощью добавления вот таких строк в Robots.txt:

4. Используйте Netpeak Spider не только для SEO-аудита, но и для более эффективного сбора семантического ядра и оптимизации страниц

С помощью этого софта у вас могут быть Тайтлы и Дискрипшены всех главных конкурентов. Все в удобной аккуратной таблице Excel. Не все могут и хотят воспользоваться этими данными, но поверьте, это ценная информация, которая сделает ваше продвижение в поиске более эффективным.

Мета-теги конкурентов

5. Правильно находите 400-е ошибки

Дело в том, что я сам не сразу разобрался, как быть с 4xx ошибками. Оказывается, что для того, чтобы увидеть URL с каких идет ссылка на ошибки и сами страницы, которые отдают 400-ю ошибку, надо сделать вот такую последовательность действий: Нажать в левой колонке на надпись «4xx ошибки: Client Error, потом нажать на «Сводка по текущей таблице» и наконец на «Входящие ссылки». Скриншот вам в помощь:

404-е ошибки

Что насчет платной лицензии?

Месяц использования Netpeak Spider стоит 14 долларов. Если считать, что во время двухнедельного тестового периода вам достается полнофункциональная версия программы, можно сказать что за 14 долларов вы получаете доступ ко всем возможностям сканера на полтора месяца. 14 долларов – это гораздо меньше, чем просят за SEO-аудит профессиональные (и не очень профессиональные) оптимизаторы. Полтора месяца – серьезный срок, за который можно исправить все косяки, которые найдет краулер.

Правда, если у вас небольшой сайт (не более 100 страниц), я бы не рекомендовал платить за паука от Netpeak. Лучше и полностью бесплатно с SEO-аудитом небольшого ресурса справится, например, Serpstat. С настройками Serpstat проще разобраться, для проведения SEO-аудита не нужно ничего устанавливать на компьютер + не забываем про главное назначение сервиса – сбор семантического ядра. Отмечу, что ресурс, который состоит из нескольких сотен страниц уже не по зубам бесплатной версии Серпстат, а минимальный тариф у них – 19 долларов в месяц.

v-zdor.com

Что умеет Netpeak Spider

Если вы не первый день развиваете сайты, то слышали про крупнейшее агентство интернет-маркетинга Netpeak, у которого несколько тысяч проектов.

В Netpeak Group входит компания Netpeak Software, которая занимается созданием инструментов для интернет-маркетологов. Сегодня seo-специалисты и вебмастера могут воспользоваться такими приложениями как Netpeak Spider и Netpeak Checker, о последнем я расскажу в следующих статьях, а сейчас на интересует аудит и оптимизация сайта.

Netpeak Spider — это программа сканер-сайтов, просканирует любую площадку с открытым доступом и выявит все seo ошибки, которые могут оказать влияние как на работу, так и ранжирование площадки в поисковой выдаче.

Лого программы

Сразу отмечу, что данный софт поддерживает работу на ОС Windows и MAC OS, а вот Linux пока еще находится в разработке.

Список задач, которые решает Нетпик Спайдер:

  • Проверка SEO-параметров.
  • Определение ошибок внутренней оптимизации.
  • Анализ ссылочной массы (входящие и исходящие внутренние линки).
  • Поиск битые ссылок и редиректов.
  • Поиск дублей страниц, заголовков title и h1, метаданных, описания.
  • Расчет PageRank для внутренних страниц.
  • Настойка правил сканирования сайта.
  • Экспорт всех данных.

Заявлено, что программа при анализе учитывает 54 параметра и может выявить до 62 ошибок, вот это мы сейчас и проверим.

Как сделать аудит сайта и найти все ошибки

Первое что надо сделать, это установить данный софт на свой ПК. Делается это просто, вот только надо сперва пройти регистрации и только потом скачать Launcher.

Переходим на официальный сайт Netpeak Software и выбираем нужный продукт, либо же делаем это по указанной ссылке netpeaksoftware.com/ru/spider после этого жмем кнопку «Начать» дабы воспользоваться программой бесплатно.

Доступ к продукту

Обратите внимание! Netpeak Spider в течение 14 дней позволяет использовать всем возможности данного продукта бесплатно, при этом вы ничем не будите ограничены.

После этого заполняем стандартные поля формы регистрации или используем социальные сети Facebook или Google+.

форма

На следующем этапе после регистрации переходим в панель управления и скачиваем и устанавливаем приложение.

как скачать spider

Для синхронизации программы с ПК введите ваш логин и пароль от учетной записи созданного ранее аккаунта.

вход

Итак, с установкой разобрались теперь переходим к самому интересному — анализ сайта.

Для этого запускаем софт и видим окно, в котором все разделено по категориям. Сразу понятно, куда надо прописывать сайт, где будет представлен отчет и по каким параметрам будет проходить анализ.

Программа внешний вид

Лично мне хватает дефолтных настроек, но если у вас очень медленный интернет, слабое железо или сайт размещен на дешевом хостинге, тогда можно уменьшить количество поток.

Думаю, вы прекрасно понимаете, что чем их больше, тем больше идет запросов к серверу, где размещен сайт и он просто может «лечь».

Если вы хотите собрать более полную картину по сайту, тогда отключите галочку Canonical, чтобы проанализировать все имеющиеся URL.

Настройки

Новой функцией является виртуальный robots.txt, где можно протестировать файл, который вы еще не загрузили в сеть, чтобы понять, как он будет влиять на сканирование площадки роботами поисковых систем.

роботс

Здесь же можно добавить правила и ограничения, формат экспорта файлов, прокси и много других настроек.

Однако на первом этапе пользования программой не вижу смысла вникать во все тонкости, поэтому давайте перейдем непосредственно к сканированию проекта.

Достаточно ввести его URL адрес в специальное поле, нажать «Старт» и подождать, когда будет окончен сбор данных.

Старт

На сканирование сайта, у которого почти 1000 страниц в индексе Яндекс, при 10 потоках понадобилось 14 минут. Для тех, кто будет анализировать не один сайт, лучше количество потоков увеличить.

Как вариант перед анализом можно отключить ненужные вам параметры, чтобы Netpeak Spider на это не тратила время, а вы на них не отвлекались в отчетах.

параметры

Все приходит с опытом, лично мне 52 параметра не надо, а в будущем оставлю для себя десяток наиболее важных.

Кстати, в любой момент вы можете поставить сканирование на паузу и продолжить его в любой другой момент с того места, где была произведена остановка.

После окончания парсинга или постановки его на паузу во вкладке «Дашборд» отображается общее число просканированных адресов с графиками и диаграммами.

ход сканирования

графики

Можно не переходить к вкладке «Результаты» и с ходу понять сколько ошибок имеется на сайте, есть ли проблемы с сервером, индексируемостью.

Дашборд показал, что на сканируемом сайте из тысяч страниц, для индексации поисковиками открыты только 995, вместе с главной.

количество страниц

Если перейти в админ панель движка сайта, то это значение совпадает с теми страницами и записями, которые действительно опубликованы.

реальное число постов на сайте

Хороший показатель того, что на сайте правильно настроен robots.txt, .htaccess и добавлены условия для файла function.php, которые запрещают поисковым машинам пускать в индекс дублирующий контент.

Теперь можем перейти к изучению всей картины сканирования, для этого жмем следующую вкладку «Все результаты», где анализ будет отображен в табличном виде для каждого анализируемого URL.

все страницы

С данными по каждому из тех параметров, которые вы отмечали перед анализом или в его ходе.

  • Код ответа сервера
  • Ошибки
  • Время загрузки страниц
  • Глубина
  • Редиректы
  • Входящие ссылки
  • Исходящие ссылки
  • Title
  • Description
  • Пагинация
  • Разметка
  • Длина H1 и многие другие

Список параметров

Чтобы немного упростить отчет, можно удалить те параметры, которые были отмечены по ошибки или вам просто эти данные не нужны.

Кликаем правой кнопкой мыши по ячейкам с названием параметров и из выпадающего списка снимаем галочки с ненужных пунктов.

как убрать параметр из отчета

Результаты у нас есть, теперь очень важный момент, это поиск ошибок, думаю 90% вебмастеров и оптимизаторов для этого и будут использовать данный «Паук».

Искать ошибки очень просто, можно это сделать несколькими путями:

Первое. Перейти через диаграмму «Критичность ошибок», предварительно выбрав их важность.

ошибки диаграмма

Второе. Через меню «Отчеты», где все имеющиеся ошибки будут представлены в виде дерева.

вкладка отчеты

Мне нравится использовать второй вариант, так как здесь сразу видно, какие именно проблемы на сайте, на каком количестве страниц и в каком процентном соотношении от их общего числа.

Плюс если выбрать одну из ошибок, в окне слева сразу же будут отфильтрованы результаты по страницам, с конкретным пояснением, что здесь за проблема.

ошибка 1

Как видно на анализируемом сайта нашлось 2 страницы, которые имеют одинаковый заголовок.

Аналогичным образом нашлось 4 страницы у которых были одинаковые описания и 12 страницы, у которых тег description вообще не заполнен.

Единственное с чем здесь не согласен так это с ошибками PageRank, так как программа умеет рассчитывать внутренний вес страниц, и она нашла на сайте страницы, на которые ведут ссылки с других постов, а на самих страницах ссылок нет, из-за чего нарушается распределение ссылочного веса.

Ошибки категорий

Только непонятно почему Netpeak Spider придрался к страницам пагинации категорий 2-го уровня?

А так в большей степени нашлись самые распространенные ошибки:

  • Дублирующийся Title, H1, Description
  • Битые ссылки
  • Отсутствующий или незаполненный Description
  • Незаполненный атрибут alt у картинок
  • Длинные Title и H1
  • Большой вес изображений
  • Большое время ответа сервера

Стоит отметить, что любой из параметров вы можете изменить, то есть указать свои значения, для чего перейдите в настройки «Ограничения».

ограничения

Например, я считаю, что заголовок у сайта может превышать 70 символов, поэтому данное значение подкорректировал в настройках, чтобы в следующий раз было меньше ошибок.

Еще были ошибки, касающиеся защищенного протокола HTTPS, но это дело каждого переводить на него свои проекты или нет. Лично я все собираюсь это сделать и думаю в ближайшие годы поисковые системы всех заставят если захочешь быть в ТОПе, а пока у меня как всегда руки не доходят. ))

По итогу анализа можно все данные выгрузить в формат .xlsx через кнопку «Экспорт» и продолжить с ними работать вне программы, что тоже удобно.

Полезные инструменты

Как вы поняли функций и решаемых задач у Нетпик Спайдер много, но кроме всего прочего софт обладает еще встроенными инструментами:

  1. Анализ исходного кода и HTTP-заголовков
  2. Расчет внутреннего PageRank
  3. Валидатор XML-Sitemap
  4. Генератор Sitemap

Найти их легко, достаточно выбрать соответствующий раздел в верхнем меню.

встроенные инструменты

HTML-код страницы. Здесь чего-то революционного вы не увидите, удобно посмотреть исходный код любой страницы сайта, не покидая программу.

Лично я больше привык это делать через встроенные функции браузера.

Еще по теме:   Как разблокировать доступ к сайту в антивирусе NOD32?

проверка исходного кода сайта

PageRank. А вот этот инструмент мне понравился куда больше, с его помощью можно наглядно увидеть, как на сайте распределяется ссылочный вес, чтобы в будущем его правильно перераспределять и понимать, какие страницы лучше продвигать в поиске.

ссылочный вес страниц

Благодаря этому на сайте были найдены страницы категорий, которые хоть и имели хороший PageRank, но были закрыты от индексации поисковыми алгоритмами. В будущем имеет смысл привести их в порядок и пустить в индекс, дабы получать еще больше трафика.

Валидатор Sitemap. Пригодится тем, кто хочет проанализировать существующую карту сайта, с целью выявить ошибки разного уровня критичности. Здесь же можно отправить ping поисковым система, чтобы они проиндексировали ее последнюю версию.

проверка карты сайта

Генератор Sitemap. А для тех, кто только создал сайт и еще не позаботился о файле sitemap можно воспользоваться этим генератором и программ сама все реализует согласно вашим настройкам и правилам поисковиков.

как сделать карту сайта

seoslim.ru

Получение учетной записи в Netpeak Software

Итак, чтобы скачать и установить программу Нетпик Спайдер, для начала зарегистрируйтесь на соответствующей странице сервиса Netpeak Software, где необходимо в форму ввести свое имя, фамилию, адрес электронной почты и в заключение придумать пароль посложнее:

«>

Как видите, вход в аккаунт можно немедленно осуществить используя свои персональные данные социальных сетей Facebook и Google+ посредством специального приложения. Если вы выбрали традиционный вариант регистрации, то после нажатия кнопки «Sign Up» окажетесь в своем аккаунте. Интерфейс мне понравился. Единственный минус — он на английском языке:

«>

Исходя из этого, пожалуй, побуду немного гидом и сразу дам общие разъяснения касательно всех вкладок и разделов, которые здесь присутствуют. Итак, меню слева:

Dashboard — интуитивно понятная основная панель, где присутствуют все базовые ссылки и пошаговые инструкции по использованию продуктов, в частности, Netpeak Spider.

Subscriptions (подписки) — здесь вы можете следить за состоянием своих подписок, плановых платежей и управлять автоматической активацией лицензий.

Licenses — раздел управления лицензиями на продукты Netpeak, включая Спайдер. Можете привязать любую лицензию к своей учетной записи, поделиться ею с другим пользователем ПО, а также добавить новую.

Loyalty Program — сведения о существующей гибкой тарифной политике сервиса Netpeak (более подробная информация о стоимости лицензии и действующих тарифах в первом разделе настоящей публикации) и о ваших текущих скидках.

Affiliate Program — партнерская программа с двойной выгодой, к которой вполне можете присоединиться и вы. Условия достаточно выгодные, судите сами: вы имеете возможность получать 25% от суммы, потраченной приглашенными вами пользователями, а также предоставлять им скидку 5% за участие в партнерке. Тут же находится ваша реферальная ссылка и промокод, которые вы сразу можете использовать себе во благо:

«>

Payment Cards — В этом разделе вы можете управлять своими платежными карточками: добавлять новые, редактировать или удалять их. Обратите внимание, что автоматическое продление подписки по умолчанию будет производиться с использованием платежной карты.

Email Preferences — настройки электронной почты. Вы можете изменить адрес почтового ящика, который указали при регистрации. Думаю, есть смысл оставить здесь по умолчанию галочки, активирующие опции, которые предполагают предупреждение по e-mail о сроках окончания периода бесплатного тестирования и подписки.

Device Management — этот раздел предназначен для управления вашими устройствами, которые будут применяться для использования продуктов Netpeak Software. Устройство автоматически добавляется после входа в систему с помощью Netpeak Launcher, о котором речь пойдет ниже.

Как скачать и установить приложения Launcher и Netpeak Spider

Это приложение необходимо для синхронизации сервера, где расположен основной сервис, с вашим компьютером. Именно через Лаунчер будет происходить установка программного обеспечения, включая Netpeak Spider. Вы сможете использовать его также для входа в свой аккаунт.

Таким образом, чтобы воспользоваться функционалом Спайдера в полной мере, вам необходимо сначала скачать приложение Лаунчер, через которое будет осуществляться управление программным обеспечением. Для этого жмите кнопку «Download Launcher» (смотрите второй скриншот вверх отсюда). После загрузки запускающего файла на компьютер следует установить приложение по обычной схеме для десктопных устройств.

После установки Launcher воспользуйтесь данными авторизации (логином в виде адреса электронной почты и паролем, указанными вами при регистрации на Netpeak Software) для входа:

«>

После того, как авторизуетесь, вам будет предоставлена информация о текущей версии Netpeak Spider, о том, когда истекает срок периода тестирования программы, а также даны ссылки на различные полезные разделы, в том числе на страницы панели управления, профиля, подписок и лицензий (вкладка «Аккаунт») вашей учетной записи Netpeak Software:

«>

Отсюда же и следует установить Netpeak Spider, кликнув по соответствующей кнопке. Положительным моментом является тот факт, что Лаунчер имеет русскоязычный интерфейс. Для того, чтобы русский язык был и в Спайдере, во время инсталляции программы выберите его из выпадающего меню (по умолчанию он должен уже быть указан), которое предложит установочный менеджер.

Сколько стоит лицензия и как можно ее оплатить?

Сразу скажу, что если даже вы не планируете сразу вложиться в приобретение программы, вы все равно можете протестировать ее возможности в полном объеме, воспользовавшись 14-дневным бесплатным тестовым периодом, который установлен по умолчанию. А теперь посмотрим на линейку, которая включает 4 тарифных плана (на 1, 3, 6 и 12 месяцев):

«>

Как видите, самой выгодной является годовая лицензия, ее логичнее всего приобрести. Если уж вы приняли окончательное решение воспользоваться данным SEO-инструментом, расставшись со своими кровными, не думаю, что он понадобиться вам меньше, чем на год. Покупка разрешения на 12 месяцев позволит сэкономить 30% по сравнению с самым младшим тарифом ($9.80 в месяц против $14). При этом годовая экономия составит более 50 долларов:

«>

Ежели вам понадобиться больше одной лицензии для использования Netpeak Spider на нескольких устройствах одновременно, то передвигайте ползунок вправо до тех пор, пока не получите нужное их число с указанием величины скидки в процентах (при этом в блоках с тарифами произойдут изменения, и вы получите соответствующую количеству лицензий цену):

«>

Важно отметить следующее. Если вы захотите эксплуатировать программу Спайдер на нескольких устройствах, но не будете делать это одновременно, то дополнительных лицензий приобретать не нужно, достаточно будет одной.

Идем дальше. На сервисе Netpeak Software предусмотрено несколько видов оплаты (можно выбрать наиболее удобный для вас):

  1. Посредством карт (Visa, MasterCard, American Express, Discover, JCB);
  2. С помощью платежной системы PayPal;
  3. Банковским переводом (для получения более полной информации необходимо связаться с администрацией на странице контактов «CONTACT US», ссылка на которую присутствует на каждой из страниц сервиса, включая ваш аккаунт, который вы получите после регистрации);
  4. Бонусами, полученными от участия в партнерской программе, о которой я еще скажу ниже.

Вот, пожалуй, основная информация, касающаяся стоимости лицензии, а также условий и способов оплаты. Прочитав этот раздел, думаю, вы уже примете окончательное решение в отношении целесообразности тестирования и дальнейшей покупки программы. Тех, кого софт заинтересовал, приглашаю к дальнейшему и более близкому знакомству с ним.

Разбор функционала программы Нетпик Спайдер

Сама установка не занимает много времени и по ее завершении появится окно с перечнем всех обновлений, которые были сделаны в актуальной на данный момент версии (например, программа способна теперь автоматически определять 60+ ошибок по 50+ параметрам):

«>

После просмотра сообщения можете сразу открыть приложение. В дальнейшем для активации Спайдера нажимайте на иконку, которая автоматически будет выведена на рабочий стол. Либо используйте для его открытия Launcher (после инсталляции Netpeak Spider ссылка «Установить» там будет заменена на «Запустить»), его значок тоже будет присутствовать на рабочем столе.

Кроме того, можно настроить отображение символа Лаунчера в трее, откуда он будет активироваться двойным кликом мышкой. Окно Netpeak Spider’а выглядит так:

«>

Для проведения SEO анализа нужно, прежде всего, ввести URL главной страницы вебсайта, который вы желаете препарировать. Если хотите проанализировать абсолютно все его страницы, то оставляете в быстрых настройках опцию «Весь сайт» (слева от введенного урла):

«>

В противном случае выбираете нужный пункт из выпадающего меню. Здесь же можно указать максимальное количество URL, которые вы хотите проверить, и глубину сканирования.

Как и в большинстве случаев, настройки программы по умолчанию весьма взвешены и подходят для большинства стандартных сайтов, страницы которых будут анализироваться. Для более углубленного анализа есть «продвинутые» настройки сканирования:

«>

В любом случае вы всегда можете подстроить программу под конкретные цели внутреннего аудита.

Анализ результатов сканирования Спайдером

После того, как вы определились с настройками, нажимаете кнопку «Старт» для активации операции SEO анализа сайта (третий отсюда скриншот вверх). После окончания сканирования получаете результат (программа сообщит об этом):

«>

По окончании сканирования вы можете экспортировать полученную таблицу, сохранив файл в выбранную папку на компьютере. Есть и опция повторной проверки (кнопка «Рестарт&#187). Кроме того, вы в силах удалить результаты последнего сканирования, нажав на значок урны:

«>

Также существует возможность сохранить результаты анализа сайта, инициировать новое сканирование и открыть информацию уже сохраненного ранее проекта:

«>

В левом окне Netpeak Spider дана таблица, где в каждой строке предоставлен URL соответствующей вебстраницы и значения параметров, по которым была произведена проверка. В столбцах даны наименования этих параметров (всего их 35): «Код ответа сервера», «Content-Type», «Ошибки», «Время ответа сервера», «Время загрузки контента», «Внутренний PageRank» и т.д.

В силу немалой ширины таблицы для ее просмотра лучше развернуть окно программы и воспользоваться горизонтальной прокруткой.

Теперь посмотрим, какие данные представлены в правом окошке. Вкладка «Ошибки», как вы понимаете, наиболее интересна для нас, поскольку в ней находятся та самая информация, на основании которой мы можем исправить «косяки», которые препятствуют SEO продвижению сайта.

Причем, все ошибки распределены по степени их критичности (красным выделены те, которые оказывают наиболее сильное негативное влияние, желтым — со среднем уровнем, зеленым — наименее опасные).

Взгляните еще раз на третий скриншот, расположенный выше по тексту. Я уже упоминал, что Netpeak Spider способен выявить более чем 60 типов ошибок. После проверки в этой вкладке появляется их количество для испытуемого веб-ресурса (в нашем примере 19).

В самом низу есть довольно информативные две строки. В одной из них присутствует число ошибок, не обнаруженных в ходе сканирования (45). Информация об отключенных ошибках (0) показывает, что при настройке были включены все параметры, которые позволяют их выявить.

Еще один небольшой плюс функционала Спайдера заключается в том, что при подводе курсора к конкретному типу ошибки, появляется всплывающая подсказка с информативным описанием:

«>

Заметьте, что можно скопировать как весь список ошибок, так и только выбранные. Выбирать их можно обычным способом, кликая левой кнопки мышки с одновременным нажатием клавиши Ctrl (для выделения одной строки) либо Shift (для выделения группы). Затем используете фильтрацию, нажав на значок воронки. В результате в окне слева активируется вкладка, где будут отображены URL страничек с отфильтрованными ошибками (одной или несколькими):

«>

Точно также можно фильтровать полученные результаты и во вкладке «Сводка», в которой представлена аналитическая информация, тоже важная с точки зрения СЕО оптимизации.

Вновь обратимся к общему скриншоту, где отображена общая картина результатов сканирования. Там есть выпадающий список «Сводка по текущей таблице», в котором находятся ссылки на разделы с анализом основных параметров:

«>

Заметьте, что слева от сводки дана панелька со значками (полностью дублирующая содержание выпадающего меню), при подводе курсора к каждому из которых также появляется выплывающая подсказка, что позволяет, не раскрывая списка, увидеть его содержание. Тут же находится пункт «Информация об ошибках». Если щелкнуть по нему, то откроется другое окно программы. Тут тоже можно как угодно фильтровать результаты (еще один плюс Спайдеру):

Еще по теме:   Что такое Smsgorod.ru - сервис рассылки СМС-сообщений

«>

В этом примере я составил табличку с параметрами и соответствующими ошибками для всех страничек с адресами (URL), содержащими слово «wordpress». Надеюсь, предоставленная мною информация поможет вам быстро сориентироваться в понимании механизма фильтрации, да и разобраться во всем многообразии функционала программы тоже.

Да, чуть не забыл. В арсенале Netpeak Spider отдельно размещены три очень нужных инструмента, которые позволяют произвести анализ исходного кода и HTTP-заголовков, осуществить расчет внутреннего PageRank для страниц, а также сгенерировать карту сайта Sitemap:

«>

Резюме — что полезного вам может дать Спайдер? Каковы его плюсы и минусы?

Ну вот, осталось лишь подвести итоги и дать какую-то оценку программе Спайдер, призванной предоставить всю необходимые данные, касающиеся как основных параметров, несущих познавательную информацию (например, содержание тега title или description), так и типов ошибок, а также их количества для каждой вебстраницы сайта (скажем, длина тайтла и дескрипшина превышает рекомендуемое значение).

Если говорить о преимуществах Спайдера и сервиса Netpeak Software (а они, что ни говорите, связаны) в общем, то они оставили приятное впечатление. Ну а если конкретизировать, то отмечу следующие плюсы, некоторые из которых уже отмечал в статье:

  1. Весьма современный, комфортный и интуитивно понятный интерфейс. Это касается как онлайн сервиса, так и софта Netpeak Spider.
  2. Очень богатый функционал у Спайдера, я в этом убедился при тестировании. Осуществляется анализ практически по всем важнейшим SEO параметрам.
  3. Чрезвычайно удобно представлены ошибки с указанием их типа и количества, которые распределены и подсвечены по степени критичности, что сразу бросается в глаза после окончания сканирования.
  4. Несмотря на то, что результаты анализа страниц включают огромное количество самой разнообразной информации, доступ к ней осуществляется очень легко благодаря системе фильтрации данных.
  5. Наличие возможности сохранять сколь угодно много проектов, причем они могут быть для одного и того же сайта, но с разными настройками;
  6. Сканирование совершенно не напрягает компьютер и потребляет немного ресурсов, по крайней мере, это справедливо в отношении сайтов небольшого и среднего объема. Я специально тестировал Netpeak Spider на ПК с невысокими характеристиками и оперативкой в 1 Мб.
  7. Операция анализа не занимает много времени (это связано и с предыдущим пунктом). Например, проверка моего сайта заняла ровно 5 минут. Делайте выводы.
  8. Еще хотелось бы акцентировать ваше внимание на гибкость тарифной линейки, что позволяет оптимизировать свои расходы при приобретении лицензии.

Конечно, ради создания объективной картины следует отметить и немногочисленные недостатки, хотя, по моему мнению, их можно считать таковыми с немалыми оговорками:

  1. Интерфейс в аккаунте сервиса на английском. Это, конечно, не отпугнет опытных оптимизаторов и вебмастеров, которым, в принципе, софт и предназначен, но тем не менее…
  2. Программа платная. Для большинства начинающих пользователей это минус;
  3. Возможно, для тестирования Спайдера следует немного увеличить период бесплатного использования.

Хотя я и отметил в списке недостатков то, что программа Netpeak Spider платная, сделал это я скорее по той причине, что это принято считать минусом. На самом деле лично я так не считаю, по крайней мере, ситуация здесь неоднозначная. Ведь тот факт, что пользователи платят за софт, наоборот, должно мобилизовать разработчиков и стимулировать их к созданию качественного продукта.

Исхожу в своих рассуждениях в том числе из тех отзывов, которые удалось найти в интернете касательно Спайдера еще со времен, когда он был бесплатным (ранее я сам им не пользовался).

Уже тогда его функционал устраивал многих, хотя летели и критические стрелы в отношении некоторых аспектов, например, потребления большого количества ресурсов. Если это и правда, то платная версия убедила, что многие из недостатков канули в лету.

>>Регистрируйтесь на Netpeak Software и установите Netpeak Spider<<

goldbusinessnet.com

Ошибки (62) Описание
Высокая критичность
Битые ссылки Показывает недоступные страницы или страницы, которые возвращают код ответа сервера 4xx и выше.
PageRank: висячий узел Показывает URL, которые были определены алгоритмом расчёта внутреннего PageRank как «висячие узлы». Это страницы, на которые ведут ссылки, но на них самих отсутствуют исходящие ссылки, из-за чего нарушается естественное распределение ссылочного веса по сайту.
Дубликаты страниц Показывает полные дубли страниц по всему HTML-коду. В этом отчёте все URL сгруппированы по параметру «Хеш страницы».
Дубликаты текста Показывает дубли страниц по текстовому содержимому блока <body>. В этом отчёте все URL сгруппированы по параметру «Хеш текста».
Дубликаты Title Показывает страницы с дублирующимися тегами <title​>. В этом отчёте все URL сгруппированы по параметру «Title».
Отсутствующий или пустой Title Показывает страницы с отсутствующим или пустым тегом <title​>.
Дубликаты Description Показывает страницы с дублирующимися тегами <meta name="description" /​>. В этом отчёте все URL сгруппированы по параметру «Description».
Отсутствующий или пустой Description Показывает страницы с отсутствующим или пустым тегом <meta name="description" /​>.
4xx ошибки: Client Error Показывает страницы, которые возвращают 4xx код ответа сервера.
Битый редирект Показывает страницы, перенаправляющие на недоступные URL или URL, которые возвращают код ответа сервера 4xx и выше.
Бесконечный редирект Показывает страницы, которые перенаправляют сами на себя, образуя тем самым бесконечный редирект.
Макс. количество редиректов Показывает страницы с более чем 4 редиректами (по умолчанию).
Редирект, заблокированный в robots.txt Показывает страницы, возвращающие перенаправление на URL, который заблокирован в файле robots.txt.
Редиректы с неправильным форматом URL Показывает страницы, возвращающие перенаправление с неправильным форматом URL в HTTP-заголовках ответа сервера.
Неправильный формат тега Base Показывает страницы, содержащие тег <base> с неправильным форматом. Обратите внимание, что в этом теге нельзя использовать относительные ссылки, так как они не поддерживаются роботами поисковых систем.
Макс. длина URL Показывает страницы, у которых длина URL более 2000 символов (по умолчанию).
Страницы без внутренних ссылок Указывает на «висячие узлы» — страницы, на которых нет ни одной внутренней ссылки: такие страницы нарушают естественное распределение веса между страницами сайта.
Ссылки с неправильным форматом URL Показывает страницы, содержащие внутренние ссылки с неправильным форматом URL.
Битые изображения Показывает недоступные изображения или изображения, которые возвращают код ответа сервера 4xx и выше. Обратите внимание, что для определения этой ошибки должна быть включена проверка изображений на вкладке «Основные» в настройках сканирования.
Canonical, заблокированный в robots.txt Показывает страницы, содержащие тег <link rel="canonical" />, который указывает на URL, заблокированный в файле robots.txt. Обратите внимание, если целевой URL начинает цепочку Canonical до заблокированной страницы, то в отчёте будут отображены все URL из этой цепочки.
Средняя критичность
Несколько тегов Title Показывает страницы, которые содержат более одного тега <title​>.
Несколько тегов Description Показывает страницы, которые содержат более одного тега <meta name="description" /​>.
Отсутствующий или пустой H1 Показывает страницы с отсутствующим или пустым заголовком <h1​>.
Несколько заголовков H1 Показывает страницы, которые содержат более одного заголовка <h1​>.
Дубликаты H1 Показывает страницы с дублирующимися заголовками <h1​>. В этом отчёте все URL сгруппированы по параметру «Содержимое H1».
Мин. размер контента Показывает страницы с менее чем 500 символов (по умолчанию) в блоке <body> (без HTML-тегов).
PageRank: перенаправление Показывает URL, которые были определены алгоритмом расчёта внутреннего PageRank как перенаправляющие ссылочный вес. Это могут быть страницы, возвращающие 3xx редирект или содержащие теги Canonical / Refresh, указывающие на другой URL.
3xx редиректы: Redirection Показывает страницы, которые возвращают перенаправление с 3xx кодом ответа сервера.
Цепочка редиректов Показывает страницы с цепочками перенаправлений (более 1 редиректа).
Refresh редирект Показывает страницы, которые содержат директиву Refresh в HTTP-заголовках ответа сервера или тег <meta http-equip="refresh"> в блоке <head>, указывающие на другой URL.
Цепочка Canonical Показывает страницы, которые начинают цепочку Canonical или участвуют в ней. Чтобы просмотреть подробную информацию, откройте дополнительную таблицу «Canonical».
Редирект на внешний сайт Показывает страницы, которые возвращают 3xx редирект на внешний ресурс, который не является частью анализируемого сайта.
Заблокировано в robots.txt Показывает страницы, запрещённые к индексации с помощью инструкции disallow в файле robots.txt.
Заблокировано в Meta Robots Показывает страницы, запрещённые к индексации с помощью инструкции <meta name="robots" content="noindex"> в блоке <head>.
Заблокировано в X-Robots-Tag Показывает страницы, запрещённые к индексации с помощью директивы «noindex» поля X-Robots-Tag в HTTP-заголовках ответа сервера.
Изображения без атрибута ALT Показывает страницы, содержащие изображения с отсутствующим или пустым атрибутом ALT.
Макс. размер изображения Показывает изображения, размер которых превышает 100 Кбайт (по умолчанию): для определения этой ошибки должен быть включён анализ изображений в настройках сканирования на вкладке «Основные».
5xx ошибки: Server Error Показывает страницы, которые возвращают 5xx код ответа сервера.
Большое время ответа сервера Показывает страницы, у которых время получения первого байта от сервера превышает 500 мс (по умолчанию).
Неправильный формат AMP HTML Показывает AMP HTML документы, которые не соответствуют стандартам по документации AMP Project. Обратите внимание, что к каждой AMP HTML странице предъявляются минимум 8 требований по оформлению.
Низкая критичность
Кодированные URL Показывает страницы, которые содержат кодированные (не ASCII) символы в URL. Например, URL вида https://example.com/пример кодируется как https://example.com/%D0%BF%D1%80%D0%B8%D0%BC%D0%B5%D1%80.
Дубликаты Canonical URL Показывает страницы с дублирующимися тегами <​link rel="canonical" /​>. В этом отчёте все URL сгруппированы по параметру «Canonical URL».
PageRank: отсутствуют связи Показывает URL, которые были определены алгоритмом расчёта внутреннего PageRank как недостижимые. Это страницы, на которые не было найдено ни одной входящей ссылки.
PageRank: отсутствуют исходящие ссылки Показывает URL, у которых после применения алгоритма расчёта внутреннего PageRank не были найдены исходящие ссылки. Это зачастую происходит, когда исходящие со страницы ссылки ещё не были просканированы.
Одинаковые Title и H1 Показывает страницы, у которых заголовок <h1> совпадает с содержимым тега <​title​>.
Макс. длина Title Показывает страницы, у которых длина тега <​title​> более 70 символов (по умолчанию).
Короткий Title Показывает страницы, у которых длина тега <​title​> менее 10 символов (по умолчанию).
Макс. длина Description Показывает страницы, у которых длина тега <​meta name="description" /​> более 320 символов (по умолчанию).
Короткий Description Показывает страницы, у которых длина тега <​meta name="description" /​> менее 50 символов (по умолчанию).
Макс. длина H1 Показывает страницы, у которых длина заголовка <h1​> более 65 символов (по умолчанию).
Макс. размер HTML Показывает страницы с более чем 200 тыс. символов (по умолчанию) в блоке <html> (включая HTML-теги).
Макс. размер контента Показывает страницы с более чем 50 тыс. символов (по умолчанию) в блоке <body> (без HTML-тегов).
Мин. соотношение Text/HTML Показывает страницы, у которых соотношение чистого текста (параметр «Размер контента») ко всему контенту на странице (параметр «Размер HTML») менее 10% (по умолчанию).
Nofollow в Meta Robots Показывает страницы, содержащие инструкции <meta name="robots" content="nofollow"> в блоке <head>.
Nofollow в X-Robots-Tag Показывает страницы, у которых содержится директива «nofollow» в поле X-Robots-Tag в HTTP-заголовках ответа сервера.
Неканонические страницы Показывает неканонические страницы, у которых URL в теге <link rel="canonical" /​> указывает на другую страницу.
Не HTTPS-протокол Показывает список URL, которые не используют защищённый протокол https.
Макс. количество внутренних ссылок Показывает страницы с более чем 100 внутренними ссылками (по умолчанию).
Макс. количество внешних ссылок Показывает страницы с более чем 10 внешними ссылками (по умолчанию).
Внутренние nofollow ссылки Показывает страницы, содержащие внутренние ссылки с атрибутом rel=»nofollow».
Внешние nofollow ссылки Показывает страницы, содержащие внешние ссылки с атрибутом rel=»nofollow».
Отсутствующий или пустой файл robots.txt Показывает список URL, относящихся к отсутствующим или пустым файлам robots.txt. Обратите внимание, что на разных поддоменах и протоколах (http / https) могут быть разные файлы robots.txt. Эта ошибка может возникать в случае редиректа с файла robots.txt на любой другой URL или в случае любого кода ответа сервера, отличного от «200 OK».

netpeaksoftware.com

Поделиться:
Нет комментариев

Добавить комментарий

Ваш e-mail не будет опубликован. Все поля обязательны для заполнения.

×
Рекомендуем посмотреть
Adblock
detector