Раз был интерес в прошлом посте выкладываю программу для определения видимости сайтов и посещаемости по Liveinternet. Первоначально я проверял видимость вручную для каждого сайта и когда начал массово работать с крауд-маркетингом появилась проблема — на проверку уходило много времени.
Поэтому и написал программу первоначально под свои нужды. Она не требует установки, работает под Windows (7, Vista, 8.1, 10)
Требования к памяти: 50 Мб оперативной, 22 мегабайта на жестком диске. В общем будет работать даже на слабом компьютере.
Обновление 21.06.2019 года:

  1. Добавлена кнопка с возможностью остановить парсинг
  2. Добавлен регион Петербург под Яндекс
  3. Исправлены мелкие баги
Внимание! Сообщение от 19.11.2019 года. В случае если вы парсите много доменов — более 100 штук = возможен вылет ошибки 419. Она возникает по банальной причине — данные парсятся через API Bukvarix, а у них (по сообщениям поддержки) очень большая нагрузка на бесплатный API и они не справляются с запросами. В результате они ввели ограничения и довольно часто банят IP. Если вы попали в похожую ситуацию — отпишите к ним на support@bukvarix.com и просите снять бан. Если вы ловите 429 ошибку — рекомендую ставить задержку минимум 5000 миллисекунд.

Как работать с программой:

Для работы с программой посмотрите мануал на картинке (кликните для увеличения):

скриншот программы RealTrust
  • Данные парсятся с 3 секундной задержкой.
  • Функционал — двойной клик по url домена открывает сайт в текущем браузере.
  • При экспорте в csv используется «;» как разделитель (для работы в Excel по умолчанию). Нужны ли другие разделители?
  • Ячейки можно выделить мышью и нажать на «Экспорт выделенного в csv» если вам не нужны все данные. Предварительно результат можно отфильтровать.
Видимость — это нахождение сайта по основным поисковым запросам из семантического ядра. Сервисы получают ее путем парсинга по основным запросам из Wordstat. В моем случае источник видимости — Букварикс.

Как интерпретировать полученные данные:

  1. Если вам нужно фильтровать по России или без региона — выбирайте Москва. Причина по которой не используется регион Россия — там меньше в 2 раза данных, поэтому фильтровать по Москве лучше.
  2. В колонке Liveinternet парсятся данные с счетчика. Значение -1 говорит о том что данные не обнаружены
  3. Данные Liveinternet отображаются посещаемость за месяц / на 30. Данные не за сегодня или сутки.

Софт вчера переписывал, часть функционала сменил. Поэтому если что то не работает — пожалуйста напишите в комментариях. Только не «шеф, все пропало», а конкретно: операционная система, что нажали перед возникновением ошибки. Если есть возможность сделать скрин -сделайте.
Учитывая что программа бесплатная — буду благодарен за репосты в соц сетях :) .

Автор

С 2007 года занимаюсь созданием контент проектов и их монетизацией. Seo специалист, блоггер.

56 комментариев

  1. Igor Ответить

    Доброго времени! Скажи, а видимость это количество в индексе или видимость запросов в ТОП 100 по данному сайту?

    • Евгений Молдовану Ответить

      Нет это видимость по запросам.
      Количество страниц не учитывается.
      Для того чтобы реально вычислять количество запросов на страницу — нужны данные (к примеру Яндекс XML).

      • Дельная софтина. А сейчас каким образом идет вычисление запросов? Через API megaindex или serpstat? Или какой то свой метод?

      • Евгений Молдовану

        В посте написано об этом. Данные из Букварикса.

  2. seoonly.ru Ответить

    Чувствую мой блог где-то на дне видимости))

  3. Артём Ответить

    Полезная штука, большое спасибо! Пригодится в работе

  4. Артём Ответить

    Кстати, почему-то не получается поставить оценку статье. Возможно, проблемы в работе WP-Postratings.

    • Евгений Молдовану Ответить

      Знаю. Уже писал на форуме WP по этому поводу. У меня какие то проблемы с JS на блоге, много функционала отвалилось.

  5. Андрей Ответить

    Привет! Думаю нужно ввести какие-то пороги для видимости сайтов, зеленый, оранжевый, красный. Иначе цифры на скрине вижу, но что они дают не понятно — хорошо это или плохо.

    • Евгений Молдовану Ответить

      Я думал об этом. Но есть маленькая проблема. Дело в том что иногда сайт с низкой видимостью тоже может быть хорошим донором в случае если у него есть большое пересечение запросов с продвигаемым сайтом. А значит нужно учитывать все — и видимость и пересечение.
      Кроме этого низкая видимость не является гарантией того что донор мертв. Низкая видимость может быть следствием устаревания контента.

  6. Влслмлеламлмл Ответить

    Спасибо, буду дома сегодня, потестирую.

  7. Жека Ответить

    Devvver, кто тобi фотографировал, фотограф же должен предупреждать что фотки делаются с закрытым ртом и прямой осанкой, чтобы солидно смотрелось.

    • Евгений Молдовану Ответить

      Пока ничем не барыжу на личный бренд мне побоку. Хотя на эту тему я еще пост напишу :)
      По поводу осанки — у меня кифосколиоз 2 степени, визуально сильно видно.

      • Devvver, ты со сколиозом лучше не затягивай, упражнения посмотри откуда-нибудь из гимнастики или из йоги.

      • Евгений Молдовану

        Горбатого могила исправит :)

      • Горбатого могила исправит

        Не говори так, займись йогой, там много упражнений на вытяжку позвоночника.

        Также на сеансы вытяжки можешь сходить в поликлинику, если где-то рядом есть.

  8. Viacheslav Ответить

    Добрый день. Интересно, но пока не совсем понятно, можно ли ориентироваться при оценке видимости на данные Букварикс.
    Допустим, при проверке SERPSTAT и вашей программой значения отличаются, на что ориентироваться?

    • Евгений Молдовану Ответить

      Разницы что использовать нет. Можно Букварикс, можно Кейсо, можно Серпстат. Все они показывают одно и то же — видимость по поисковым системам.

  9. Dmitry Ответить

    Евгений, спасибо за инфу и ништяки! Почитал твой блог, скачал пару программ, всё пригодится.

  10. Никита Ответить

    Попробовал снять данные на большом массиве доменов и в итоге вылезла ошибка http://prntscr.com/nx0ka6 и данные после нажатия ОК просто копируются.

    Может есть какой то рекомендованный предел по количеству строк съема за раз?

    • Евгений Молдовану Ответить

      Спасибо большое. Я думал что победил эту ошибку.
      Возникает она при очень большом количестве запросов за единицу времени. Сколько у вас доменов было — судя по прокрутке больше 100?
      Для этого и задержка в 3 секунды в программе.
      Скоро будет новая версия где сделаю возможность задавать задержку вручную.

      P.S. прогнал 150 доменов и проблема так и не возникла. Похоже проблема где то глубже и возникает в каких то исключительных ситуациях, например при вылете интернета.

      • Евгений Молдовану

        Скажу честно — программа для такого количества просто не предназначена. Уже при первом дисконекте она начнет дублировать значения.
        В новых версиях постараюсь решить эту проблему.

  11. Romano Ответить

    Интересная программка…
    Как насчет добавить еще один столбик для просмотра посещаемости по Similarweb? Есть такое в планах? )

    • Евгений Молдовану Ответить

      Учитывая их цены на API — никогда не будет, тем более бесплатно.

  12. Диана Ашумова Ответить

    Спасибо! хорошая программа. Будет ли возможность выбора региона Я кроме Мск?

    • Евгений Молдовану Ответить

      Там же есть 3 региона — Москва, Киев и Минск.

      • Диана Ашумова

        например нужны Казань, Петербург, Ростов-на-Дону, Нижний Новгород

      • Евгений Молдовану

        Петербург добавлю, а вот по остальным данных нет….

    • Евгений Молдовану Ответить

      Добавил Санкт-Петербург под Яндекс. Google нет в сервисе.

  13. Серж Ответить

    Евгений, прога говорит, что посещаемость devvver.ru по Liveinternet 111 — это никак не за месяц,. Вчера было — 97 посетителей, 221 просмотров. Глюк?

    • Евгений Молдовану Ответить

      Считается среднее за месяц, а не за день.

      • Невнимательно прочитал) Показывает среднее в сутки, думал должно показывать посещаемость за месяц.

  14. Серж Ответить

    Я бы, все таки, еще входящие-исходящие от линкпад прикрутил. Пусть не сильно точные показания, но хоть какие-то.
    За прогу спасибо :)

    • Евгений Молдовану Ответить

      Там база почти 2 летней давности наверное. Я им писал, задавал кое какие вопросы они даже не ответили на письмо. в Общем мне кажется сдохнут скоро.
      Проблема с ссылками — нет бесплатной возможности их взять по API.

  15. Kanapiya.ru Ответить

    А можешь другие регионы добавить? Например Казахстан в целом или еесли можно по городам тоже Астана и Алматы

    • Евгений Молдовану Ответить

      К сожалению нет. Этих регионов нет в Буквариксе.

  16. Михаил Ответить

    Добавил 500 сайтов, задержка дефолтная, примерно на 400 сайте вылезла ошибка
    «Ошибка HTTP /1.1 429 429

    • Евгений Молдовану Ответить

      Проблема связана с запросами к Букварикс. Такое бывает когда сам сервис очень нагружен и не справляется с работой через API.
      Проблему решить можно увеличением задержки в программе с 3000 миллисекунд к 5000 и более.

  17. Ramil Ответить

    Здравствуйте, Евгений. RealTrust при выдаче большого значения видимости сайта, что это означает?

    • Евгений Молдовану Ответить

      Это видимость сайта по ключам из семантического ядра в выдаче поисковой системы по Букварикс.

  18. Zorbasmedia Ответить

    Евгений,спасибо за программку,давно искал нечто подобное.

  19. jim Ответить

    Что за входящие и исходящие появились в проге?

    • Евгений Молдовану Ответить

      Входящие и исходящие ссылки по Linkpad

  20. Андрей Ответить

    Привет!
    Пытаюсь работать с вашей программой, но выдает ошибку — «could not load ssl library».
    Подскажите, как исправить так как способы найденные с гуглом, для меня, по причине косорукости не подходят.
    Система Вин10

    • Евгений Молдовану Ответить

      Обычно эта ошибка возникает в Windows 7.
      Странная ситуация, так как библиотеки должны быть встроенные в Windows.
      Буду искать варианты решения проблемы.

  21. ДВ Ответить

    Вылезла сетевая ошибка №10060 «Connection timed out» при съеме видимости Google. Прокси отключены. Что делать?

    • Евгений Молдовану Ответить

      Произошел дисконект (разрыв соединения с интернетом) во время работы программы. На данном этапе можно только попробовать сделать все заново.
      В будущих версиях будет проверка на случай разрыва соединения.

  22. Рамиль Ответить

    Добрый день, Евгений.
    При нажатии на парсинг, выводит окно «Could not load SSL library». Как исправить?

    • Dimzar Ответить

      Приветствую. Windows 7, выдает ошибку Could not load SSL library. Когда планируете исправить?

  23. Даня Ответить

    Я, наверно, самый тупой, раз никто не спрашивает. А где взять базу к этой проге? В нете самому найти или как?

    • Евгений Молдовану Ответить

      О какой базе речь? Программа нужна для оценки доноров с бирж ссылок или покупке крауда.

  24. Антон Ответить

    Argument out of range — ошибка при анализе
    и регион по гуглу можно сделать по странамили общий по всем?
    А так прога классная

Написать комментарий