Раз был интерес в прошлом посте выкладываю программу для определения видимости сайтов и посещаемости по Liveinternet. Первоначально я проверял видимость вручную для каждого сайта и когда начал массово работать с крауд-маркетингом появилась проблема – на проверку уходило много времени.
Поэтому и написал программу первоначально под свои нужды. Она не требует установки, работает под Windows (7, Vista, 8.1, 10)
Требования к памяти: 50 Мб оперативной, 22 мегабайта на жестком диске. В общем будет работать даже на слабом компьютере.
Обновление 21.06.2019 года:

  1. Добавлена кнопка с возможностью остановить парсинг
  2. Добавлен регион Петербург под Яндекс
  3. Исправлены мелкие баги
Внимание! Сообщение от 19.11.2019 года. В случае если вы парсите много доменов – более 100 штук = возможен вылет ошибки 419. Она возникает по банальной причине – данные парсятся через API Bukvarix, а у них (по сообщениям поддержки) очень большая нагрузка на бесплатный API и они не справляются с запросами. В результате они ввели ограничения и довольно часто банят IP. Если вы попали в похожую ситуацию – отпишите к ним на support@bukvarix.com и просите снять бан. Если вы ловите 429 ошибку – рекомендую ставить задержку минимум 5000 миллисекунд.

Как работать с программой:

Для работы с программой посмотрите мануал на картинке (кликните для увеличения):

скриншот программы RealTrust
  • Данные парсятся с 3 секундной задержкой.
  • Функционал – двойной клик по url домена открывает сайт в текущем браузере.
  • При экспорте в csv используется “;” как разделитель (для работы в Excel по умолчанию). Нужны ли другие разделители?
  • Ячейки можно выделить мышью и нажать на “Экспорт выделенного в csv” если вам не нужны все данные. Предварительно результат можно отфильтровать.
Видимость – это нахождение сайта по основным поисковым запросам из семантического ядра. Сервисы получают ее путем парсинга по основным запросам из Wordstat. В моем случае источник видимости – Букварикс.

Как интерпретировать полученные данные:

  1. Если вам нужно фильтровать по России или без региона – выбирайте Москва. Причина по которой не используется регион Россия – там меньше в 2 раза данных, поэтому фильтровать по Москве лучше.
  2. В колонке Liveinternet парсятся данные с счетчика. Значение -1 говорит о том что данные не обнаружены
  3. Данные Liveinternet отображаются посещаемость за месяц / на 30. Данные не за сегодня или сутки.

Софт вчера переписывал, часть функционала сменил. Поэтому если что то не работает – пожалуйста напишите в комментариях. Только не “шеф, все пропало”, а конкретно: операционная система, что нажали перед возникновением ошибки. Если есть возможность сделать скрин -сделайте.
Учитывая что программа бесплатная – буду благодарен за репосты в соц сетях :) .

ВК
Od
WhatsApp
Telegram
Автор

С 2007 года занимаюсь созданием контент проектов и их монетизацией. Seo специалист, блоггер и активный путешественник.

55 комментариев

  1. Доброго времени! Скажи, а видимость это количество в индексе или видимость запросов в ТОП 100 по данному сайту?

    • Евгений Молдовану Ответить

      Нет это видимость по запросам.
      Количество страниц не учитывается.
      Для того чтобы реально вычислять количество запросов на страницу – нужны данные (к примеру Яндекс XML).

      • Дельная софтина. А сейчас каким образом идет вычисление запросов? Через API megaindex или serpstat? Или какой то свой метод?

      • Евгений Молдовану

        В посте написано об этом. Данные из Букварикса.

  2. Кстати, почему-то не получается поставить оценку статье. Возможно, проблемы в работе WP-Postratings.

    • Евгений Молдовану Ответить

      Знаю. Уже писал на форуме WP по этому поводу. У меня какие то проблемы с JS на блоге, много функционала отвалилось.

  3. Привет! Думаю нужно ввести какие-то пороги для видимости сайтов, зеленый, оранжевый, красный. Иначе цифры на скрине вижу, но что они дают не понятно – хорошо это или плохо.

    • Евгений Молдовану Ответить

      Я думал об этом. Но есть маленькая проблема. Дело в том что иногда сайт с низкой видимостью тоже может быть хорошим донором в случае если у него есть большое пересечение запросов с продвигаемым сайтом. А значит нужно учитывать все – и видимость и пересечение.
      Кроме этого низкая видимость не является гарантией того что донор мертв. Низкая видимость может быть следствием устаревания контента.

  4. Devvver, кто тобi фотографировал, фотограф же должен предупреждать что фотки делаются с закрытым ртом и прямой осанкой, чтобы солидно смотрелось.

    • Евгений Молдовану Ответить

      Пока ничем не барыжу на личный бренд мне побоку. Хотя на эту тему я еще пост напишу :)
      По поводу осанки – у меня кифосколиоз 2 степени, визуально сильно видно.

      • Devvver, ты со сколиозом лучше не затягивай, упражнения посмотри откуда-нибудь из гимнастики или из йоги.

      • Евгений Молдовану

        Горбатого могила исправит :)

      • Горбатого могила исправит

        Не говори так, займись йогой, там много упражнений на вытяжку позвоночника.

        Также на сеансы вытяжки можешь сходить в поликлинику, если где-то рядом есть.

  5. Добрый день. Интересно, но пока не совсем понятно, можно ли ориентироваться при оценке видимости на данные Букварикс.
    Допустим, при проверке SERPSTAT и вашей программой значения отличаются, на что ориентироваться?

    • Евгений Молдовану Ответить

      Разницы что использовать нет. Можно Букварикс, можно Кейсо, можно Серпстат. Все они показывают одно и то же – видимость по поисковым системам.

  6. Евгений, спасибо за инфу и ништяки! Почитал твой блог, скачал пару программ, всё пригодится.

  7. Попробовал снять данные на большом массиве доменов и в итоге вылезла ошибка http://prntscr.com/nx0ka6 и данные после нажатия ОК просто копируются.

    Может есть какой то рекомендованный предел по количеству строк съема за раз?

    • Евгений Молдовану Ответить

      Спасибо большое. Я думал что победил эту ошибку.
      Возникает она при очень большом количестве запросов за единицу времени. Сколько у вас доменов было – судя по прокрутке больше 100?
      Для этого и задержка в 3 секунды в программе.
      Скоро будет новая версия где сделаю возможность задавать задержку вручную.

      P.S. прогнал 150 доменов и проблема так и не возникла. Похоже проблема где то глубже и возникает в каких то исключительных ситуациях, например при вылете интернета.

      • Евгений Молдовану

        Скажу честно – программа для такого количества просто не предназначена. Уже при первом дисконекте она начнет дублировать значения.
        В новых версиях постараюсь решить эту проблему.

  8. Интересная программка…
    Как насчет добавить еще один столбик для просмотра посещаемости по Similarweb? Есть такое в планах? )

    • Евгений Молдовану Ответить

      Учитывая их цены на API – никогда не будет, тем более бесплатно.

  9. Диана Ашумова Ответить

    Спасибо! хорошая программа. Будет ли возможность выбора региона Я кроме Мск?

      • Диана Ашумова

        например нужны Казань, Петербург, Ростов-на-Дону, Нижний Новгород

      • Евгений Молдовану

        Петербург добавлю, а вот по остальным данных нет….

    • Евгений Молдовану Ответить

      Добавил Санкт-Петербург под Яндекс. Google нет в сервисе.

  10. Евгений, прога говорит, что посещаемость devvver.ru по Liveinternet 111 – это никак не за месяц,. Вчера было – 97 посетителей, 221 просмотров. Глюк?

      • Невнимательно прочитал) Показывает среднее в сутки, думал должно показывать посещаемость за месяц.

  11. Я бы, все таки, еще входящие-исходящие от линкпад прикрутил. Пусть не сильно точные показания, но хоть какие-то.
    За прогу спасибо :)

    • Евгений Молдовану Ответить

      Там база почти 2 летней давности наверное. Я им писал, задавал кое какие вопросы они даже не ответили на письмо. в Общем мне кажется сдохнут скоро.
      Проблема с ссылками – нет бесплатной возможности их взять по API.

  12. А можешь другие регионы добавить? Например Казахстан в целом или еесли можно по городам тоже Астана и Алматы

  13. Добавил 500 сайтов, задержка дефолтная, примерно на 400 сайте вылезла ошибка
    “Ошибка HTTP /1.1 429 429

    • Евгений Молдовану Ответить

      Проблема связана с запросами к Букварикс. Такое бывает когда сам сервис очень нагружен и не справляется с работой через API.
      Проблему решить можно увеличением задержки в программе с 3000 миллисекунд к 5000 и более.

  14. Здравствуйте, Евгений. RealTrust при выдаче большого значения видимости сайта, что это означает?

    • Евгений Молдовану Ответить

      Это видимость сайта по ключам из семантического ядра в выдаче поисковой системы по Букварикс.

  15. Привет!
    Пытаюсь работать с вашей программой, но выдает ошибку – “could not load ssl library”.
    Подскажите, как исправить так как способы найденные с гуглом, для меня, по причине косорукости не подходят.
    Система Вин10

    • Евгений Молдовану Ответить

      Обычно эта ошибка возникает в Windows 7.
      Странная ситуация, так как библиотеки должны быть встроенные в Windows.
      Буду искать варианты решения проблемы.

  16. Вылезла сетевая ошибка №10060 “Connection timed out” при съеме видимости Google. Прокси отключены. Что делать?

    • Евгений Молдовану Ответить

      Произошел дисконект (разрыв соединения с интернетом) во время работы программы. На данном этапе можно только попробовать сделать все заново.
      В будущих версиях будет проверка на случай разрыва соединения.

  17. Я, наверно, самый тупой, раз никто не спрашивает. А где взять базу к этой проге? В нете самому найти или как?

    • Евгений Молдовану Ответить

      О какой базе речь? Программа нужна для оценки доноров с бирж ссылок или покупке крауда.

Написать комментарий