Seo Форум

Поисковая оптимизация => SEO сервисы и Seo инструменты => Тема начата: A-Parser Support от 13-12-2014, 09:03:09

Название: A-Parser 1.1 - продвинутый парсер ПС, кейвордов, контента, показателей, 70+ парс
Отправлено: A-Parser Support от 13-12-2014, 09:03:09
A-Parser - многопоточный парсер поисковых систем, сервисов оценки сайтов, ключевых слов, контента(текст, ссылки, email, телефоны, произвольные данные) и других различных сервисов(youtube, картинки, переводчик...), всего A-Parser содержит более 70 парсеров (http://'https://a-parser.com/wiki/parsers/')

На сегодняшний день A-Parser развился в невероятный SEO комбаин, позволяющий покрыть огромное число задач для SEO-специалистов и вебмастеров любого уровня подготовки:
(https://a-parser.com/img/tour.gif) (https://a-parser.com/)

Кроме этого мы предоставляем услуги по составлению заданий и написанию парсеров под ваши задачи, в кратчайшие сроки и по демократичной цене. Хотите спарсить целиком интернет магазин(Ozon, Amazon, AliExpress)? Проверить 100 миллионов сайтов по вашим признакам? Получить данные с любого сайта в структурированном виде(CSV, JSON, XML, SQL)? В решении этих задач поможет наша дополнительная платная поддержка (https://a-parser.com/threads/1795/)

A-Parser полностью решает рутинные задачи по получению, обработки и систематизации данных, необходимых для работы в следующих областях:
A-Parser обладает следующими преимуществами:
Более подробно ознакомится с возможностями парсера можно в полноценной документации (http://a-parser.com/wiki/index/)

A-Parser предоставляется в трех версиях, сравнительная таблица и стоимость лицензий:

(https://a-parser.com/img/scr/DW3hO.png) (https://a-parser.com/pages/buy/)

Мы принимаем к оплате в автоматическом режиме все популярные платежные системы, такие как Bitcoin, WebMoney, PayPal, Visa, MasterCard, Paxum, Яндекс.Деньги, QIWI, PerfectMoney, банковские переводы, терминалы оплаты и многое другое.
Для приобретения лицензии необходимо зарегистрироваться на сайте https://a-parser.com (https://a-parser.com) и перейти на страницу оплаты (https://a-parser.com/pages/buy/).
Если у вас возникли вопросы - обращайтесь по любым контактам в техническую поддержку (https://a-parser.com/pages/support/)
Название: Re: A-Parser 1.1 - продвинутый парсер поисковых систем, Suggest, PR, DMOZ, Whois...
Отправлено: A-Parser Support от 15-12-2014, 11:34:21
A-Parser - 1.1.162 - новые парсеры Seznam и подсказок AOL, уменьшено потребление памяти на 40%

Улучшения
Исправления
Название: Re: A-Parser 1.1 - продвинутый парсер поисковых систем, Suggest, PR, DMOZ, Whois...
Отправлено: A-Parser Support от 06-01-2015, 12:57:26
A-Parser - 1.1.177 - Новый модуль SEO::Ping и парсер Rank::Mustat, улучшения в интерфейсе

Улучшения

Исправления

http://a-parser.com/threads/1436/
Название: Re: A-Parser 1.1 - продвинутый парсер поисковых систем, Suggest, PR, DMOZ, Whois...
Отправлено: SaKrAt91 от 11-02-2015, 17:40:35
В валюте как-то не актуально теперь, цена сервиса выросла раза в 2)
Название: Re: A-Parser 1.1 - продвинутый парсер поисковых систем, Suggest, PR, DMOZ, Whois...
Отправлено: A-Parser Support от 13-02-2015, 10:51:12
A-Parser - 1.1.200 - возможность добавлять запросы на основе результатов парсинга, множество исправлений


Улучшения


Исправления

Название: Re: A-Parser 1.1 - продвинутый парсер поисковых систем, Suggest, PR, DMOZ, Whois...
Отправлено: vold57 от 13-02-2015, 12:49:50
Хороший софт. Давно пользуюсь. И саппорт отличный. Иногда задаю вопросы и без ответов не остаюсь.
Название: Re: A-Parser 1.1 - продвинутый парсер поисковых систем, Suggest, PR, DMOZ, Whois...
Отправлено: A-Parser Support от 06-03-2015, 07:03:16
Демо версия A-Parser

Рады представить онлайн демо версию A-Parser ( http://a-parser.com/pages/demo/ ), в которой можно ознакомиться со всеми возможностями перед покупкой парсера или перед переходом на новую версию

Демо версия предоставляет доступ к A-Parser установленному на нашем сервере, период тестирования - 6 часов, по истечению этого времени все настройки автоматически будут сброшены

Ограничения демо версии:
Название: Re: A-Parser 1.1 - продвинутый парсер поисковых систем, Suggest, PR, DMOZ, Whois...
Отправлено: A-Parser Support от 27-03-2015, 06:11:25
A-Parser - 1.1.224 - улучшенные возможности по уникализации результатов, множество исправлений(http://http://a-parser.com/threads/1565/)

Все возможности новой версии можно прoтестировать в демо версии A-Parser'а (http://http://a-parser.com/pages/demo/)

Улучшения


Исправления в связи с изменениями в выдачи

Исправления

Название: Re: A-Parser 1.1 - продвинутый парсер поисковых систем, Suggest, PR, DMOZ, Whois...
Отправлено: A-Parser Support от 05-05-2015, 06:17:56
A-Parser - 1.1.247 - новые парсеры поисковиков Ask и Comcast, произвольные шаблоны в конструкторе результатов - http://a-parser.com/threads/1612/

Улучшения

Исправления


Исправления в связи с изменениями в выдачи

Название: Re: A-Parser 1.1 - продвинутый парсер поисковых систем, Suggest, PR, DMOZ, Whois...
Отправлено: A-Parser Support от 29-05-2015, 11:54:07
Сборник рецептов #3: мобильные сайты, несколько парсеров, позиции ключевых слов (http://a-parser.com/threads/1660/)

Итак, продолжаем серию статей с рецептами применения A-parser: комплексные примеры с одновременным использованием различного функционала парсера.

Проверяем наличие мобильной версии для 1000000 сайтов (http://a-parser.com/threads/1655/)

Работаем с большими объемами данных и учимся искать совпадения в raw data.
(http://img.a-parser.com/WHXyV.png)

По списку запросов получаем страницы, CMS, PR, e-mail из whois (http://a-parser.com/threads/1645/)

Комплексное задание, выполняемое в 2 этапа, в котором мы учимся работать с несколькими парсерами, регулярными выражениями, а также красиво выводим результаты во многоуровневые каталоги и несколько файлов.
(http://img.a-parser.com/mtDTQ.png)
Код:
Только зарегистрированные пользователи могут видеть код. Пожалуйста, войдите или зарегистрируйтесь.
Узнать позиции по кеям, как? (http://a-parser.com/threads/1659/)

Знакомимся с парсером  (http://a-parser.com/img/parsers/se-google-position.png) SE::Google::Position и проверяем на каком месте в поисковой выдачи находится ключевое слово.
(http://img.a-parser.com/fKb8T.png)

Детальнее о самом парсере здесь (http://a-parser.com/wiki/se-google-position/).

Предыдущие сборники:
Название: Re: A-Parser 1.1 - продвинутый парсер поисковых систем, Suggest, PR, DMOZ, Whois...
Отправлено: A-Parser Support от 10-07-2015, 10:42:40
[SIZE="4"]Сборник рецептов #6: парсим базу номеров телефонов и сохраняем результаты красиво[/SIZE] (http://"http://a-parser.com/threads/1737/")[/URL]

6-й выпуск сборника рецептов. Здесь мы попробуем собирать скрытые номера мобильных телефонов из доски объявлений и научимся сохранять результаты работы А-парсера в таблицы с возможностью сортировки.

Парсим базу мобильных телефонов (http://'http://a-parser.com/threads/1725/')
Базы телефонов могут использоваться по-разному, но основной вид их использования - рассылка смс рекламного характера. А если базу еще и возможно отсортировать по городу, интересу или другим характеристикам, т.е. сделать таргетированную рассылку, то эффективность сильно возрастает. Подобные базы собираются разными способами, мы же поговорим о том, как это сделать с помощью А-парсера.
(http://img.a-parser.com/nS4dz.png)

Вывод результатов в таблицу (http://'http://a-parser.com/threads/1736/')
Бывает, возникает необходимость в красивом и удобном выводе данных, полученных в результате парсинга. И если обычного текстового вида недостаточно, нужно искать другие способы вывода. Об одном таком способе и пойдет речь в статье по ссылке выше.
(http://img.a-parser.com/cGb8L.jpeg)


Предыдущие сборники:
Название: Re: A-Parser 1.1 - продвинутый парсер поисковых систем, Suggest, PR, DMOZ, Whois...
Отправлено: A-Parser Support от 22-07-2015, 12:22:24
A-Parser - версия 1.1.269 - получение списка задач по API, только мобильные для WordStat (http://"http://a-parser.com/threads/1746/")

Два месяца у нас работает профессиональный саппорт, который помогает составлять задания любой степени сложности. Доработана документация, регулярно появляются интересные решения на нашем форуме, которые теперь собраны в едином Каталоге примеров (http://"http://a-parser.com/threads/1738/"). Также создан большой FAQ (http://"http://a-parser.com/threads/1744/"), в котором собраны ответы на часто задаваемые вопросы.

Версия 1.1.269 является одной из последних в ветке 1.1.х, в скором времени будет доступна бета версия 1.2, которая принесет новый виток развития A-Parser, следите за новостями

Улучшения


Исправления в связи с изменениями в выдачи


Исправления


Название: Re: A-Parser 1.1 - продвинутый парсер поисковых систем, Suggest, PR, DMOZ, Whois...
Отправлено: A-Parser Support от 04-08-2015, 11:28:00
Сборник рецептов #7: парсим RSS, качаем картинки и фильтруем результат по заголовкам (http://"http://a-parser.com/threads/1778/")

7-й выпуск сборника рецептов. Здесь мы рассмотрим вариант парсинга RSS, будем скачивать картинки в зависимости от их характеристик и научимся фильтровать результат по хедерам.

Парсинг RSS (http://'http://a-parser.com/threads/1757/')
На сегодняшний день RSS остаются довольно популярным вариантом доставки новостей и контента пользователям. В связи с этим его используют почти на всех сайтах, где бывает более-менее периодическое обновление информации. А для нас это возможность быстро спарсить свежие обновления сайта, не анализируя сам сайт. И один из способов, как это сделать описан по ссылке выше.
(http://img.a-parser.com/PVVNZ.png)

Как фильтровать результат по определенным хедерам? (http://'http://a-parser.com/threads/1748/')
Как известно, А-парсер предназначен для парсинга, в основном, текстовой информации. Но кроме этого им вполне реально парсить и другие обьекты (файлы, картинки и т.п.). При этом существует возможность фильтровать их по заголовкам ответа сервера. Об этом по ссылке выше.
(http://img.a-parser.com/v9C3l.png)

Скачивание картинок указанного разрешения и размера (http://'http://a-parser.com/threads/1752/')
Если выше мы фильтровали результат только по хедерам и рассматривали вариант с документами, то в данной статье мы будем скачивать картинки и фильтровать их по размеру и разрешению. Как это сделать - можно увидеть по ссылке выше.
(http://img.a-parser.com/n58ds.png)

Еще больше различных рецептов в нашем Каталоге примеров (http://'http://a-parser.com/threads/1738/')!

Предыдущие сборники:

Название: Re: A-Parser 1.1 - продвинутый парсер поисковых систем, Suggest, PR, DMOZ, Whois...
Отправлено: A-Parser Support от 16-09-2015, 07:19:41
Сборник рецептов #9: проверяем сезонность ключевых слов и их полезность (http://"http://a-parser.com/threads/1830/")

9-й выпуск Сборника рецептов. В нем мы будем работать с ключевыми словами: проверять их сезонность и искать свободные ниши в рунете, проверяя "полезность" ключевиков.

Определение сезонности ключевых слов через Wordstat (http://'http://a-parser.com/threads/1828/')
Использование нужных ключевых слов в нужное время - один из способов привлечения дополнительного трафика на сайт. Для определения сезонности ключевых слов существует немало различных способов и сервисов. О том, как это делать с помощью А-Парсера - читайте по ссылке выше.
(http://img.a-parser.com/BUR2G.png)

Поиск свободных ниш в RU сегменте интернета (http://'http://a-parser.com/threads/1831/')
Используя на сайте не только сезонные, а и "полезные" ключевые слова, можно значительно повысить шансы попасть в ТОП10 поисковиков. И если о сезонности мы писали ранее, то о "полезности", а точнее о "незанятости" ключевых слов мы поговорим в данной статье. Полезные или незанятые - это такие КС, которые пользователи часто ищут, но конкуренция по которым не очень высокая. Как их искать - читайте по ссылке выше.
(http://img.a-parser.com/cXyrn.png)

Еще больше различных рецептов в нашем Каталоге примеров (http://'http://a-parser.com/threads/1738/')!

Предыдущие сборники:
Название: Re: A-Parser 1.1 - продвинутый парсер поисковых систем, Suggest, PR, DMOZ, Whois...
Отправлено: A-Parser Support от 07-10-2015, 06:09:48
A-Parser - 1.1.292 - парсинг JSON, улучшения использования памяти, множество исправлений (http://"http://a-parser.com/threads/1882/")

Улучшения
Исправления в связи с изменениями в выдачи
Исправления
Название: Re: A-Parser 1.1 - продвинутый парсер поисковых систем, Suggest, PR, DMOZ, Whois...
Отправлено: A-Parser Support от 22-10-2015, 11:11:11
A-Parser - 1.1.323 - парсинг с помощью XPath, поддержка JavaScript в шаблонизаторе, тестировщик заданий (http://"http://a-parser.com/threads/1915/")

Улучшения
(http://a-parser.com/img/scr/cj0zi.png)

Исправления в связи с изменениями в выдачи
Исправления
Название: Re: A-Parser 1.1 - продвинутый парсер поисковых систем, Suggest, PR, DMOZ, Whois...
Отправлено: A-Parser Support от 03-11-2015, 08:16:43
Сборник рецептов #11: парсим Авито, работаем с JavaScript, анализируем тексты и участвуем в акции! (http://"http://a-parser.com/threads/1938/")

Розыгрыш призов, условия акции смотри в конце!

11-й выпуск сборника рецептов. В нем мы разберем пример парсинга Авито, научимся расшифровывать телефонные номера, скрытые за JS и будем анализировать тексты.

Парсинг Авито (http://'http://a-parser.com/threads/1928/')
Если просмотреть сайты с вакансиями для фрилансеров, то можно увидеть, что очень часто требуется парсить популярный сайт объявлений avito.ru. Чаще всего в результате нужна база телефонов, реже - списки объявлений и цены. Данная информация может быть необходима маркетологам, для изучения ситуации на рынке, спамерам для рассылки смс и т.д...
Задачу по парсингу Авито можно решить также с помощью А-Парсера. О том как это сделать - читайте по ссылке выше.
(http://img.a-parser.com/hnit6.png)

Выборочная обработка JavaScript: расшифровка телефонов (http://'http://a-parser.com/threads/1904/')
Бывает, что при парсинге различных ресурсов можно наткнуться на информацию, которая скрыта скриптом на JavaScript. До недавнего времени A-Parser не умел обрабатывать JS, и такие сайты оставались в "зоне недоступности". Но начиная с версии 1.1.318 A-Parser научился выборочно работать с JS. Поэтому теперь есть возможность более эффективно парсить такие ресурсы и получать нужную информацию.
Как это делать и больше подробностей о поддержке JS в А-Парсере читайте по ссылке выше.
(http://img.a-parser.com/ZiTpN.png)

Анализ текста (http://'http://a-parser.com/threads/1925/')

Иногда возникает необходимость проанализировать спаршенный или написанный текст по различным параметрам (например: тошнота, водность, определить тематику и язык, найти наиболее повторяющиеся слова и т.п.). Для этого существует много различных приложений и онлайн-сервисов. Парсинг одного из таких сервисов будет показан по ссылке выше.
(http://img.a-parser.com/d7ri3.png)

Почти 3 месяца назад у нас появилась Платная услуга по составлению заданий (http://'http://a-parser.com/threads/1795/') для А-Парсера. Она оказалась очень актуальна среди новых пользователей парсера, а также среди тех, у кого не хватает времени на его изучение. За время ее существования было составлено более 70 заданий, при этом 75% состояли из 2-х и более пресетов. Среднее время на составление одного заказа, от согласования деталей до получения готового набора пресетов, составляет около 4 часов. При этом, каждый пресет тщательно тестируется, а получаемый результат обсуждается с клиентом.

Так как A-Parser - это программа для парсинга различной информации, 26 ноября, во Всемирный день информации (http://'http://www.calend.ru/holidays/0/0/111/'), будет разыграно:
В акции принимают участие все, кто ретвитнет нашу новость об этой акции в Twitter (http://'https://twitter.com/a_parser/status/661131280592015360'). Подписывайтесь на наши каналы в Twitter: русскоязычный @a_parser (http://'https://twitter.com/a_parser') и англоязычный @a_parser_en (http://'https://twitter.com/a_parser_en') и следите за новостями на сайте! Победители акции будут определены случайно с помощью сервиса random.org. Видео определения победителей будет выложено вместе с результатами акции.

Еще больше различных рецептов в нашем Каталоге примеров (http://'http://a-parser.com/threads/1738/')!

Предыдущие сборники:
Название: Re: A-Parser 1.1 - продвинутый парсер поисковых систем, Suggest, PR, DMOZ, Whois...
Отправлено: A-Parser Support от 27-11-2015, 11:41:47
Снижение комиссии при оплате PayPro (http://"http://a-parser.com/threads/1993/") и Итоги акции (http://"http://a-parser.com/threads/1991/")

В связи с плохой проходимостью платежей в системе Interkassa было принято решение снизить комиссию PayPro до 3%. PayPro теперь является рекомендуемым способом оплаты, который принимает все популярные платежные системы: PayPal, Visa/MasterCard, QIWI, Yandex.Money, Wire Transfer

Напоминаю что всегда доступен прием WebMoney без комиссии

Одновременно с этим мы перевели Members Area на русский язык, добавили систему уведомлений на e-mail, а также готовим инструкцию по использованию нашего магазина

Итоги акции: (http://"http://a-parser.com/threads/1991/")

Итак, сегодня 26 ноября, а значит пора подводить итоги нашей акции (http://'http://a-parser.com/threads/1938/')!
Всего участников оказалось не так и много - 14 человек. Поэтому шансы получить 1 из 8-ми призов были довольно велики.
Было проведено определение победителей, видео по ссылке: http://files.a-parser.com/Video/Action_26_11_15.avi (http://files.a-parser.com/Video/Action_26_11_15.avi)

(http://img.a-parser.com/S5oFS.png)

Искренне поздравляем всех счастливчиков! А те, кому не повезло в этот раз - не отчаивайтесь, вскоре будут новые акции! Поэтому следите за нашими новостями на сайте (http://'http://a-parser.com/forum/') или в Твиттере (http://'https://twitter.com/a_parser').

Победители, для уточнения деталей и получения призов, свяжитесь через Твиттер с выигрышных аккаунтов с администрацией А-Парсера @a_parser. (http://'https://twitter.com/a_parser')
Название: Re: A-Parser 1.1 - продвинутый парсер поисковых систем, Suggest, PR, DMOZ, Whois...
Отправлено: A-Parser Support от 08-12-2015, 10:45:42
A-Paeser - 1.1.355 - улучшения работы с регионами в Google и Яндексе, новые методы API, множество исправлений (http://"http://a-parser.com/threads/2032/")

Улучшения


Исправления в связи с изменениями в выдаче

Исправления

Название: Re: A-Parser 1.1 - продвинутый парсер поисковых систем, Suggest, PR, DMOZ, Whois...
Отправлено: A-Parser Support от 15-12-2015, 11:48:02
A-Parser: вводный видео урок, обзор возможностей (http://"http://a-parser.com/threads/2054/")

Денис Бартаев рассказывает о базовых возможностях A-Parser

http://www.youtube.com/watch?v=uNrl7l9ijEE

В выпуске рассматриваются:
Подписывайтесь на наш канал! (http://'https://www.youtube.com/channel/UCvypGICrfCky8tPtebmIvQw')


A-Parser на СПИК 2015 - запись доклада Леонида Гроховского (http://"http://a-parser.com/threads/2020/")[/B]

A-Parser на СПИК 2015 (http://'http://2015.sp-ic.ru')! Почти половина доклада посвящена обзору некоторых возможностей A-Parser

Как использовать парсеры для SEO? Как проверять индексацию страниц, как узнать позиции сайта. Об этом в докладе "Парсеры на службе у SEO-специалистов" рассказывает Леонид Гроховский. Подписывайтесь на его канал https://www.youtube.com/user/Grohovskiy (https://www.youtube.com/user/Grohovskiy)
И на наш https://www.youtube.com/channel/UCvypGICrfCky8tPtebmIvQw (https://www.youtube.com/channel/UCvypGICrfCky8tPtebmIvQw)

http://www.youtube.com/watch?v=BSm177NIorU

Тезисы:
Название: Re: A-Parser 1.1 - продвинутый парсер поисковых систем, Suggest, PR, DMOZ, Whois...
Отправлено: A-Parser Support от 25-12-2015, 11:37:28
A-Parser - 1.1.370 - планировщик заданий, улучшения в парсерах Google и Яндекса (http://"http://a-parser.com/threads/2088/")

В новой версии добавлен планировщик заданий, позволяющий легко запланировать выполнение задач, требующих периодичного исполнения, например такие как анализ позиций сайтов или ссылочных показателей

(http://a-parser.com/img/scr/lta5w.png)

Другие улучшения

Исправления в связи с изменениями в выдачи

Исправления

Название: Re: A-Parser 1.1 - продвинутый парсер поисковых систем, Suggest, PR, DMOZ, Whois...
Отправлено: A-Parser Support от 14-01-2016, 13:01:33
A-Parser - 1.1.388 - новый парсер disconnect.me, улучшения в экспорте заданий (http://"http://a-parser.com/threads/2168/")

Улучшения
Исправления в связи с изменениями в выдачи
Исправления
Обновление партнерской программы (http://"http://a-parser.com/threads/2161/")

Участвуйте в нашей партнерской программе рекламируя A-Parser в своих блогах и на форумах! Размер комиссии - 15%:
(http://a-parser.com/img/scr/9d9op.png)

В обновленном интерфейсе (http://'http://a-parser.com/pages/members-area/') доступна удобная статистика заработанных средств и выплат, а также список привлеченных пользователей

Подробнее про условия участия в партнерской программе читайте в соответствующем разделе (http://'http://a-parser.com/pages/affiliate/')
Название: Re: A-Parser 1.1 - продвинутый парсер поисковых систем, Suggest, PR, DMOZ, Whois...
Отправлено: A-Parser Support от 08-02-2016, 15:31:42
A-Parser: видео урок по парсингу 2ГИС (http://"http://a-parser.com/threads/2207/")

Денис Бартаев рассказывает о парсинге информации о компаниях и их телефонов из базы 2ГИС

http://www.youtube.com/watch?v=8a0-IOyF-Ng

В выпуске рассматриваются

Подписывайтесь на наш канал! (http://'https://www.youtube.com/channel/UCvypGICrfCky8tPtebmIvQw')

Оставляйте в комментариях свои идеи и пожелания для будущих видео
Название: Re: A-Parser 1.1 - продвинутый парсер поисковых систем, Suggest, PR, DMOZ, Whois...
Отправлено: A-Parser Support от 15-02-2016, 11:52:21
Сборник рецептов #12: парсим Instagram, собираем статистику и делаем свои парсеры подсказок (http://"http://a-parser.com/threads/2240/")

12-й выпуск Сборника рецептов. В нем мы рассмотрим пример парсинга Instagram, проверим новую возможность вывода статистики и научимся составлять кастомные парсеры подсказок. А также:
Парсинг Instagram (http://'http://a-parser.com/threads/1948/')
Instagram на сегодня является одним из самых популярных приложений для обмена фото с элементами социальной сети (осенью 2015 года аудитория превысила 400 млн пользователей). Такая популярность делает данный сервис привлекательным для парсинга, с целью получения различной информации. Как парсить Инстаграм с помощью А-Парсера - по ссылке выше.
(http://img.a-parser.com/zk1jr.png)

Статистика по результатам парсинга (http://'http://a-parser.com/threads/1966/')
Начиная с версии 1.1.336 в А-Парсере появилась возможность вести и обрабатывать статистику парсинга, благодаря поддержке шаблонизатора в Начальном и Конечных текстах. Теперь в выдаче можно подсчитать количество ссылок на каждом домене, количество сабдоменов для каждого домена, частоту каждого сабдомена; получить списки доменов, имеющих сабдомены и многое другое... Несколько примеров показаны по ссылке выше.
(http://img.a-parser.com/A5qxD.png)

Как сделать свой парсер подсказок? (http://'http://a-parser.com/threads/2158/')
В A-Parser уже существуют парсеры подсказок для Google, Yandex, AOL, Bing и Yahoo. Но есть и другие сервисы, которые также выдают подсказки. О том, как сделать свой парсер подсказок, а также примеры для Baidu, Rambler, Mail.Ru, LiveInternet, DuckDuckGo и GooglePlay смотрите по ссылке выше.
(http://img.a-parser.com/5s8VN.png)

Кроме этого еще несколько рецептов:

Еще больше различных рецептов в нашем Каталоге примеров (http://'http://a-parser.com/threads/1738/')!


Название: Re: A-Parser 1.1 - продвинутый парсер поисковых систем, Suggest, PR, DMOZ, Whois...
Отправлено: A-Parser Support от 29-02-2016, 10:08:39
A-Parser - 1.1.434 - парсинг частотности Яндекс.Директ с большой скоростью, улучшения использования памяти (http://"http://a-parser.com/threads/2299/")

В этой версии проделана большая работа по добавлению поддержки агрегации запросов. Теперь парсер частотности ключевых слов (http://a-parser.com/img/parsers/se-yandex-direct-frequency.png) SE::Yandex::Direct::Frequency может получать данные со скоростью 20000-50000 слов\минуту

Улучшения
Исправления в связи с изменениями выдачи
Исправления

Все изменения и описания новых возможностей скоро будут доступны в документации
Название: Re: A-Parser 1.1 - продвинутый парсер поисковых систем, Suggest, PR, DMOZ, Whois...
Отправлено: A-Parser Support от 16-03-2016, 12:08:26
A-Parser: видео урок - генерация sitemap.xml используя возможности JavaScript (http://"http://a-parser.com/threads/2345/")

Денис Бартаев рассказывает об использовании JavaScript в A-Parser:

http://www.youtube.com/watch?v=hxRIg93gde4

Подписывайтесь на наш канал! (http://'https://www.youtube.com/channel/UCvypGICrfCky8tPtebmIvQw')

Оставляйте в комментариях свои идеи и пожелания для будущих видео
Название: Re: A-Parser 1.1 - продвинутый парсер поисковых систем, Suggest, PR, DMOZ, Whois...
Отправлено: A-Parser Support от 23-03-2016, 08:13:38
A-Parser - 1.1.462 - цепочки заданий, сохранение JavaScript функций в пресете задания (http://"http://a-parser.com/threads/2370/")

Улучшения
Исправления в связи с изменениями выдачи

Исправления

Название: Re: A-Parser 1.1 - продвинутый парсер поисковых систем, Suggest, PR, DMOZ, Whois...
Отправлено: A-Parser Support от 07-04-2016, 09:28:32
A-Parser - 1.1.481 - множество оптимизаций скорости, использование пресетов в цепочках и планировщике (http://"http://a-parser.com/threads/2416/")

(http://a-parser.com/img/scr/u4cqw.png)

В этой версии был внедрен ряд качественных улучшений, призванных увеличить предельную скорость парсинга:
Другие улучшения:
Исправления в связи с изменениями в выдачи:
Исправления:
Название: Re: A-Parser 1.1 - продвинутый парсер поисковых систем, Suggest, PR, DMOZ, Whois...
Отправлено: A-Parser Support от 27-04-2016, 05:00:18
Сборник рецептов #13: сохраняем результат в файл дампа SQL и знакомимся с $tools.query (http://"http://a-parser.com/threads/2460/")

13-й выпуск Сборника рецептов. В нем мы научимся сохранять результат в файл дампа SQL, который будет сразу готов для импорта в базу данных; познакомимся с очень полезным инструментом $tools.query, с помощью которого можно объединять несколько заданий в одно и делать другие интересные вещи; а также увидим еще несколько полезных рецептов.

Вывод результата в формате дампа SQL (http://'http://a-parser.com/threads/2373/')
С вопросом "можно ли сохранять результаты сразу в базу данных" очень часто обращаюся пользователи в техподдержку. И так, как на данный момент напрямую сохранять результаты в БД нет возможности (но планируется), то предлагаю вариант выводить их в файл дампа, а потом импортировать в базу данных. Как это делается - показано по ссылке выше.
(http://img.a-parser.com/unEMZ.png)

Обзор инструмента $tools.query (http://'http://a-parser.com/threads/2452/')
$tools.query довольно часто встречается в примерах на форуме. В А-Парсере этот инструмент появился уже больше года назад, но обзора по нему до этого времени не было выпущено. Поэтому мы исправляемся и по ссылке выше вы сможете ознакомиться с некоторыми его возможностями.
(http://img.a-parser.com/floct.png)

Еще несколько рецептов:
Еще больше различных рецептов в нашем Каталоге примеров (http://'http://a-parser.com/threads/1738/')!

Подписывайтесь на наш канал на Youtube (http://'https://www.youtube.com/channel/UCvypGICrfCky8tPtebmIvQw') - там регулярно выкладываются видео с примерами использования A-Parser, а также следите за новостями в Twitter (http://'https://twitter.com/a_parser').

Предыдущие сборники
Название: Re: A-Parser 1.1 - продвинутый парсер поисковых систем, Suggest, PR, DMOZ, Whois...
Отправлено: A-Parser Support от 04-05-2016, 05:52:42
A-Parser - 1.1.500 - использование разных источников прокси в разных заданиях и парсерах (http://"http://a-parser.com/threads/2481/")

В этой версии проделана большая работа по улучшению проверки прокси и добавлению возможности использования разных источников прокси:
(http://a-parser.com/img/scr/wmrs2.png)
Благодаря этим нововведениям появилась возможность раздельной работы с разными прокси серверами, когда одни прокси подходят для парсинга сайтов, другие лучше для парсинга выдачи поисковых систем, а третьи могут быть "заточены" под определенный сервис

Другие улучшения:
Исправления в связи с изменениями в выдачи:
Печальная новость (http://'http://a-parser.com/threads/2338/') коснулась (http://a-parser.com/img/parsers/se-google-pr.png) SE::Google::pR - Google прекратил отображать PageRank для сайтов, но у нас в арсенале (http://'http://a-parser.com/wiki/parsers/') есть множество парсеров для гораздо более точной оценки рейтинга домена!
Название: Re: A-Parser 1.1 - продвинутый парсер поисковых систем, Suggest, PR, DMOZ, Whois...
Отправлено: A-Parser Support от 25-05-2016, 08:58:30
1.1.532 - парсинг регистратора в Whois, множество исправлений (http://"http://a-parser.com/threads/2544/")

Улучшения

Исправления в связи с изменениями в выдачи

Исправления

Название: Re: A-Parser 1.1 - продвинутый парсер поисковых систем, Suggest, PR, DMOZ, Whois...
Отправлено: A-Parser Support от 08-06-2016, 10:22:55
A-Parser - 1.1.566 - кэширование запросов, удобная работа с настройками, множество улучшений (http://"http://a-parser.com/threads/2575/")

(http://a-parser.com/img/scr/grf1e.png) 
Улучшения
Исправления в связи с изменениями в выдаче
Исправления
Название: Re: A-Parser 1.1 - продвинутый парсер поисковых систем, Suggest, PR, DMOZ, Whois...
Отправлено: A-Parser Support от 23-06-2016, 05:28:08
A-Parser: видео урок - парсим Rambler с XPath (http://"http://a-parser.com/threads/2600/")

Денис Бартаев рассказывает, как в несколько кликов создать парсер любой поисковой системы на примере Rambler.ru. Мы получим всю необходимую информацию: ссылки, анкоры, сниппеты, число результатов, связанные ключевые слова и проверку на опечатку в запросе.

http://www.youtube.com/watch?v=rIolMVOq4wE

В уроке рассмотрены

Подписывайтесь на наш канал! (http://'https://www.youtube.com/channel/UCvypGICrfCky8tPtebmIvQw')

Оставляйте в комментариях свои идеи и пожелания для будущих видео
Название: Re: A-Parser 1.1 - продвинутый парсер поисковых систем, Suggest, PR, DMOZ, Whois...
Отправлено: A-Parser Support от 20-07-2016, 09:40:40
A-Parser - 1.1.594 - Улучшение скорости парсинга Google в 10-20 раз (http://"http://a-parser.com/threads/2638/")

(http://a-parser.com/img/scr/h1sij.png)

После ужесточения парсинга со стороны гугла A-Parser стал парсить его быстрее чем раньше, результаты тестирования парсинга в 1000 потоков, 1 страница по 100 результатов - более 4000 запросов в минуту

(http://a-parser.com/img/scr/3efgi.png)

Улучшения
Исправления
Название: Re: A-Parser 1.1 - продвинутый парсер поисковых систем, Suggest, PR, DMOZ, Whois...
Отправлено: A-Parser Support от 17-08-2016, 06:18:31
A-Parser - 1.1.619 - большая оптимизация потребления памяти, увеличение скорости парсинга Яндекса (http://"http://a-parser.com/threads/2675/")

(http://a-parser.com/img/scr/28wkr.png)

В этой версии проделана большая работа по оптимизации потребления памяти, а также стабильной работе парсера 24/7 с множеством числом заданий

Улучшения
Исправления в связи с изменениями в выдаче
Исправления
Название: Re: A-Parser 1.1 - продвинутый парсер поисковых систем, Suggest, PR, DMOZ, Whois...
Отправлено: A-Parser Support от 05-09-2016, 15:15:24
A-Parser - 1.1.626 - парсер Яндекс картинок, поддержка каптчи при логине в Яндекс, удаление нерабочих аккаунтов (http://"http://a-parser.com/threads/2695/")

(http://a-parser.com/img/scr/eosv5.png)

В версии 1.1.626 добавлена поддержка каптчи при логине в Яндекс аккаунт в парсерах (http://a-parser.com/img/parsers/se-yandex.png) SE::Yandex, (http://a-parser.com/img/parsers/se-yandex-wordstat.png) SE::Yandex::WordStat и (http://a-parser.com/img/parsers/se-yandex-direct-frequency.png) SE::Yandex::Direct::Frequency:

(http://a-parser.com/img/scr/5nwml.png)

Также для этих парсеров добавлена настройка Remove bad accounts, которая автоматически удаляет аккаунты с неверным логин/паролем или требующие подтверждения по телефону. Опция включена по умолчанию

Добавлен новый парсер картинок (http://a-parser.com/img/parsers/se-yandex-images.png) SE::Yandex::Images, поддерживает все фильтры(размер, ориентация, тип, цвет, тип файла...). Как известно Яндекс отлично индексирует все картинки для взрослых - отличный способ набрать контента для своих доров/тюбов. В дополнении есть возможность выставить безопасный поиск

(http://a-parser.com/img/scr/2cgwv.png)

Парсер Яндекс картинок также поддерживает работу с антигeйтом(anti-captcha, rucaptcha, CapMonster - любой сервис с поддержкой API антигeйта)

Исправления в связи с изменениями в выдачи
Название: Re: A-Parser 1.1 - продвинутый парсер поисковых систем, Suggest, PR, DMOZ, Whois...
Отправлено: A-Parser Support от 20-09-2016, 07:22:56
Сборник рецептов #15: анализируем скорость и юзабилити сайтов, парсим Яндекс.Картинки и Baidu (http://"http://a-parser.com/threads/2712/")

15-й выпуск Сборника рецептов. В нем мы будем парсить Google PageSpeed Insights, который позволяет оценивать скорость загрузки, юзабилити сайтов и даже получать их скриншоты; сделаем кастомный парсер Яндекс.Картинок и научимся получать полные ссылки из выдачи Baidu. Поехали!

Анализ скорости загрузки и юзабилити сайтов (http://'http://a-parser.com/threads/2682/')
У Google есть довольно неплохой сервис PageSpeed Insights, который измеряет скорость загрузки веб-страниц, оценивает их юзабилити и даже делает скриншоты страниц. При этом оценивается обычная и мобильная версия парсера. Поэтому мы не могли обойти стороной такой сервис и не сделать для него парсер. О том, что получилось - читайте по ссылке выше.
(http://files.a-parser.com/img/BN5wQ.png) 

Кастомный парсер Яндекс Картинок (http://'http://a-parser.com/threads/2684/')
На форуме неоднократно спрашивали когда в А-Парсер будет добавлен парсер картинок Яндекса. На данный момент такой парсер уже есть: (http://a-parser.com/img/parsers/se-yandex-images.png) SE::Yandex::Images. Но в данной статье будет показан пример кастомного парсера Яндекс.Картинок, который довольно хорошо демонстрирует возможности (http://a-parser.com/img/parsers/net-http.png) Net::HTTP. Подробности - по ссылке выше.
(http://files.a-parser.com/img/SjOA0.png)

Как получить полные ссылки из Baidu (http://'http://a-parser.com/threads/2630/')
Также довольно часто спрашивают как получить полные ссылки из Baidu. Дело в том, что этот поисковик обрезает ссылки в выдаче, и на выходе получаются ссылки такого вида:
Цитировать
http://www.51testing.com/html (http://www.51testing.com/html)...
http://baike.baidu.com/link?u (http://baike.baidu.com/link?u)...
http://en.wikipedia.org/wiki (http://en.wikipedia.org/wiki)....
Поэтому в данной статье будет показан способ получения полных ссылок с помощью A-Parser.
(http://files.a-parser.com/img/66pko.png)

Кроме этого:
Еще больше различных рецептов в нашем Каталоге примеров (http://'http://a-parser.com/threads/1738/')!

Подписывайтесь на наш канал на Youtube (http://'https://www.youtube.com/channel/UCvypGICrfCky8tPtebmIvQw') - там регулярно выкладываются видео с примерами использования A-Parser, а также следите за новостями в Twitter (http://'https://twitter.com/a_parser').

Предыдущие сборники:
Название: Re: A-Parser 1.1 - продвинутый парсер поисковых систем, Suggest, PR, DMOZ, Whois...
Отправлено: A-Parser Support от 28-09-2016, 07:47:27
A-Parser - 1.1.652 - динамический лимит потоков, поддержка цифровой каптчи для Google (http://a-parser.com/threads/2728/)

(http://a-parser.com/img/scr/dw290.png)

В версии 1.1.652 добавлена поддержка динамического лимита потоков, позволяющая распределить лимит между (http://a-parser.com/threads/2726/) всеми запущенными заданиями, тем самым увеличивается общая скорость выполнения заданий в очереди

Помимо этого парсер (http://a-parser.com/img/parsers/se-google.png) SE::Google теперь поддерживает работу с цифровыми каптчами, а сервис Cheap-Captcha предоставил пользователям A-Parser уникальную скидку: всего 25 центов за 1000 распознанных каптч (http://a-parser.com/threads/2698/)

Улучшения
Исправления в связи с изменениями в выдачи
Исправления
Название: Re: A-Parser 1.1 - продвинутый парсер поисковых систем, Suggest, PR, DMOZ, Whois...
Отправлено: A-Parser Support от 13-10-2016, 14:31:22
Новые видео уроки: от покупки до настройки и запуска задания (http://"http://a-parser.com/threads/2745/")

Смотрите новые видео уроки от Дениса Бартаева, подписывайтесь на наш канал (http://'https://www.youtube.com/channel/UCvypGICrfCky8tPtebmIvQw')!

A-Parser: обзор личного кабинета и процесса оплаты (http://'https://www.youtube.com/watch?v=hKi8hZdNRYM')

http://www.youtube.com/watch?v=hKi8hZdNRYM

A-Parser: установка, запуск и обновление (http://'https://www.youtube.com/watch?v=zgOsRjjtdy0')

http://www.youtube.com/watch?v=QBKHxe9UWhQ

A-Parser: настройка, добавление прокси, запуск задания (http://'https://www.youtube.com/watch?v=-CU646Fiod4')

http://www.youtube.com/watch?v=x6Ea9qisD4c


Оставляйте в комментариях пожелания для будущих видео!
Название: Re: A-Parser 1.1 - продвинутый парсер поисковых систем, Suggest, PR, DMOZ, Whois...
Отправлено: A-Parser Support от 25-10-2016, 08:12:41
A-Parser - 1.1.669 - 64 битная Linux версия, проверка позиций по множеству доменов (http://a-parser.com/threads/2775/)

(http://a-parser.com/img/scr/sqz76.png)

Начиная с версии 1.1.669 A-Parser доступен в 64 битной версии для Linux, основные преимущества:
Напоминаю что A-Parser одинаково хорошо работает на Windows, Linux и FreeBSD

Другая хорошая новость - сервис Cheap-Captcha.com дарит (http://a-parser.com/threads/2767/) всем пользователям A-Parser'а $5 на разгадывание 20000 каптч для Google или Яндекса

Улучшения
Исправления в связи с изменениями в выдаче
Исправления
Название: Re: A-Parser 1.1 - продвинутый парсер поисковых систем, Suggest, PR, DMOZ, Whois...
Отправлено: A-Parser Support от 07-11-2016, 13:09:04
Сборник рецептов #16: парсинг OpenSiteExplorer с авторизацией, Яндекс.Каталога и Яндекс.Новостей (http://a-parser.com/threads/2808/)

16-й выпуск Сборника рецептов. В нем мы научимся парсить OpenSiteExplorer с авторизацией, попробуем забирать все сайты из Яндекс.Каталога и сделаем парсер Яндекс.Новостей. Поехали!

Парсинг OpenSiteExplorer (MOZ) с авторизацией (http://a-parser.com/threads/2802/)
С помощью рассмотренного в статье способа, можно парсить OSE с авторизацией, что в свою очередь позволяет обходить ограничение на 10 запросов с одного IP в сутки. Плюс ко всему, значительно расширен набор возвращаемых параметров по сравнению со стандартным парсером. Кроме этого, можно совсем не использовать прокси, что дает значительный прирост в скорости! Сам пресет и описание - по ссылке выше.
(http://files.a-parser.com/img/cgqJw.png)

Парсинг всех сайтов из указанной категории Я.Каталога (http://a-parser.com/threads/2768/)
Многие пользователи A-Parser неоднократно спрашивали о возможности спарсить все сайты из Яндекс.Каталога. Поэтому мы публикуем сам пресет и подробное описание процесса его создания и работы. Все это - по ссылке выше.
(http://files.a-parser.com/img/J4pYc.png)

Как парсить Яндекс.Новости? (http://a-parser.com/threads/2777/#post-9147)
В А-Парсере в стандартном парсере Google можно парсить новости. А вот для Яндекса на данный момент нету такой возможности. Но решается это довольно просто. Как именно - читайте по ссылке выше. Плюс бонусом небольшой пресет для парсинга подсказок из Я.Новостей - еще один способ парсить ключевые слова :)
(http://files.a-parser.com/img/t52pd.png)

Кроме этого:

Еще больше различных рецептов в нашем Каталоге примеров (http://a-parser.com/threads/1738/)!

Подписывайтесь на наш канал на Youtube (https://www.youtube.com/channel/UCvypGICrfCky8tPtebmIvQw) - там регулярно выкладываются видео с примерами использования A-Parser, а также следите за новостями в Twitter (https://twitter.com/a_parser).

Название: Re: A-Parser 1.1 - продвинутый парсер поисковых систем, Suggest, PR, DMOZ, Whois...
Отправлено: A-Parser Support от 15-11-2016, 07:51:14
A-Parser - 1.1.681 - обход защиты CloudFlare, улучшения в конструкторах запросов (https://a-parser.com/threads/2823/)

(https://a-parser.com/img/scr/pz888.png)
В версии A-Parser 1.1.681 добавлен автоматический обход проверки CloudFlare на браузер, тем самым позволяя собирать информацию с сайтов под защитой самого популярного облачного провайдера. Работает в парсерах (http://a-parser.com/img/parsers/net-http.png) Net::HTTP, (http://a-parser.com/img/parsers/html-linkextractor.png) HTML::LinkExtractor и (http://a-parser.com/img/parsers/html-textextractor.png) HTML::TextExtractor

В конструкторах запросов улучшена логика (https://a-parser.com/threads/2779/) при разделении запроса на части

Исправления в связи с изменениями в выдачи
Исправления
Название: Re: A-Parser 1.1 - продвинутый парсер поисковых систем, Suggest, PR, DMOZ, Whois...
Отправлено: A-Parser Support от 01-12-2016, 13:21:33
Доброго времени суток, друзья!


Отныне в A-Parser добавлена уникальная возможность создавать свои парсеры на языке JavaScript:


(https://a-parser.com/img/scr/s81f4.png)


Давайте более подробно рассмотрим нововведения:


Мы ежедневно работаем над улучшениями и предоставляем вам только качественный продукт!
Благодарим вас за использование A-Parser :P
Название: Re: A-Parser 1.1 - продвинутый парсер поисковых систем, Suggest, PR, DMOZ, Whois...
Отправлено: A-Parser Support от 12-12-2016, 12:37:48
Всем привет!


Друзья, рады сообщить что мы обновили Каталог примеров и добавили 32 примера и 1 видео.
 
Более подробно вы можете всё просмотреть здесь: https://a-parser.com/threads/1738/




(https://a-parser.com/img/scr/V1qpV.png)


Всем профитной недели и приятной работы в месте с A-Parser!
Название: Re: A-Parser 1.1 - продвинутый парсер поисковых систем, Suggest, PR, DMOZ, Whois...
Отправлено: A-Parser Support от 16-12-2016, 15:44:55
Дорогие друзья!

(https://a-parser.com/img/scr/e2s2f.png)

Рады сообщить о том, что мы впервые запустили новогодний розыгрыш 3 лицензий A-Parser'а. Две "Lite" и одну "Pro". Подробнее об условиях и дате вы можете узнать в нашей группе Вконтакте: https://vk.cc/5YBNVX

Не упустите этот момент, возможно розыгрыш произойдёт только один раз :)

С любовью, команда A-Parser!
Название: Re: A-Parser 1.1 - продвинутый парсер поисковых систем, Suggest, PR, DMOZ, Whois...
Отправлено: A-Parser Support от 26-12-2016, 15:25:36
1.1.712 - новогодняя юбилейная 100-ая версия, JavaScript парсеры (http://"https://a-parser.com/threads/2912/")

(https://a-parser.com/img/scr/0atmu.png)

Всех с наступающим новым годом! Участвуйте в конкурсе и получайте бесплатные лицензии, но об этом ниже

Сегодня я хочу вам представить юбилейную 100-ую версию A-Parser'a! Да, мы выпустили ровно 100 версий (http://a-parser.com/categories/13/) за почти 5 лет существования нашего парсера. Разработка парсера никогда не останавливается, сейчас он буквально пухнет от возможностей! Это хорошо подчеркивает все принципы и подходы заложенные в A-Parser еще в далеком 2012 году.

Одно из главных новшеств новой версии - JavaScript парсеры, теперь каждый кто обладает хотя бы минимальными знаниями программирования сможет создавать высокопроизводительные парсеры на языке JavaScript используя все возможности A-Parser'а(многопоточность, работу с прокси, шаблонизатор, обработка запросов и результатов, и многое другое)

(https://a-parser.com/img/scr/65cdn.png)

A-Parser давно перестал быть просто парсером, на сегодняшний день это полнофункциональная платформа для сбора информации в промышленных масштабах, которая позволит вам собирать информацию из самых разных источников и множеством разных способов. В следующем году вас ждет еще больше новых возможностей, следите за новостями!

Улучшения
Исправления в связи с изменениями в выдачи

Исправления


Напоминаем, что мы разыгрываем 3 лицензии на A-Parser общей стоимостью $437, участвуйте в конкурсе (http://a-parser.com/threads/2891/), победитель будет выбран 5ого января 2017!
Название: Re: A-Parser 1.1 - продвинутый парсер ПС, кейвордов, контента, показателей, 70+ парс
Отправлено: A-Parser Support от 15-05-2017, 13:36:03
1.1.873 - парсинг Google со скоростью 10000+ запросов в минуту (http://"https://a-parser.com/threads/3387/")

В версии A-Parser 1.1.873 добавлен новый парсер (https://a-parser.com/img/parsers/se-google-fast.png)SE::Google::Fast позволяющий парсить Google со скоростью 10к+ запросов в минуту без использования антикаптчи

(https://a-parser.com/img/scr/r5ege.png)

Улучшения
Исправления в связи с изменениями в выдаче
Исправления
Название: Re: A-Parser 1.1 - продвинутый парсер ПС, кейвордов, контента, показателей, 70+ парс
Отправлено: A-Parser Support от 05-06-2017, 12:28:01
Новый каталог парсеров и пресетов (https://a-parser.com/threads/3464/)

Представляем наш новый каталог парсеров и пресетов (https://a-parser.com/resources/) - это бесплатные дополнения и примеры для всех пользователей A-Parser Pro и A-Parser Enterprise. Каталог полностью интегрирован с парсером, установка из каталога происходит в один клик

(https://files.a-parser.com/img/7MKvw.png)  (https://a-parser.com/resources/)

Подавляющее большинство примеров были перенесены из старого каталога, часть из них была обновлена. Небольшое кол-во примеров переехали в наш FAQ (https://a-parser.com/threads/1744/), т.к. их формат не совсем вписывался в новый каталог. Более того, теперь в каталоге доступны все наши обучающие видео и статьи. Также добавлены примеры JavaScript-парсеров. Каталог разбит на категории, что облегчает поиск нужного примера

На данный момент в каталоге 100 парсеров и пресетов, 9 видео и 2 обзорных статьи, вот некоторые из них:
Любой пользователь может добавить в каталог свой пресет, за что ему будет большая благодарность :) Присылайте свои идеи для новых парсеров, самые интересные и востребованные мы обязательно реализуем!
Название: Re: A-Parser 1.1 - продвинутый парсер ПС, кейвордов, контента, показателей, 70+ парс
Отправлено: A-Parser Support от 26-06-2017, 16:35:56
Сборник рецептов #17: картинки из Flickr, язык ключевых слов, список лайков в ВК (https://a-parser.com/threads/3544/)
 
17-й сборник рецептов. В нем мы будем парсить картинки из популярного фотохостинга Flickr; научимся писать JavaScript парсеры и определять язык ключевых слов; разберемся, как получать список пользователей, которые лайкнули пост во Вконтакте. Поехали!
 
Парсер изображений с Flickr (https://a-parser.com/resources/142/)
Flickr - это один из наиболее популярных фотохостингов. Согласно Википедии еще в 2011 году кол-во фото на нем превысило отметку в 6 млрд и продолжает активно расти. Именно поэтому поиск фото на данном хостинге - это актуальная задача, и она легко решается с помощью A-Parser. Подробности по ссылке выше.
(https://files.a-parser.com/img/pskBZ.png)
 
JS::Yandex::LangDetect::Key - определение языка ключевого слова через Яндекс Переводчик (https://a-parser.com/resources/141/)
Как известно, в юбилейном 100-м релизе А-Парсера (https://a-parser.com/threads/2912/) появился давно ожидаемый функционал: JavaScript парсеры (https://a-parser.com/wiki/js-parsers/). Благодаря этому возможности парсера значительно выросли, а также теперь можно выполнять задачи еще быстрее и эффективнее.
Бывает, что нужно получить ключевые слова только на каком-то определенном языке, и возникает задача определения этого самого языка для каждого ключа. С этим неплохо справляются различные переводчики. К примеру Яндек.Переводчик. В этом примере будет показано создание JS-парсера для решения данной задачи, подробности, как обычно, по ссылке выше.
(https://files.a-parser.com/img/ukpgB.png)
 
Получение списка пользователей, которые лайкнули пост в VK (https://a-parser.com/resources/143/)
Вконтакте - это одна из самых популярных социальных сетей на територии СНГ. Поэтому парсинг различных данных из нее - это очень востребованные задачи. В нашем каталоге (https://a-parser.com/resources/) можно найти несколько таких пресетов, а в данном примере будет показан парсинг списка пользователей, которые лайкнули определенный пост. Это может быть полезно, например, при проведении различных акций, когда требуется получить такой список пользователей. Детали по ссылке выше.
(https://files.a-parser.com/img/uNqFi.png)
 
Кроме этого:
Еще больше различных рецептов в нашем обновленном Каталоге (https://a-parser.com/resources/)!
 
Подписывайтесь на наш канал на Youtube (https://www.youtube.com/channel/UCvypGICrfCky8tPtebmIvQw) - там регулярно выкладываются видео с примерами использования A-Parser, а также следите за новостями в Twitter (https://twitter.com/a_parser).
 
Название: Re: A-Parser 1.1 - продвинутый парсер ПС, кейвордов, контента, показателей, 70+ парс
Отправлено: A-Parser Support от 11-07-2017, 10:39:52
1.1.888 - парсер рoскомНадзора и переводчики Google и Яндекса (http://"https://a-parser.com/threads/3596/")

(https://a-parser.com/img/scr/xrwsw.png)

Улучшения
Исправления в связи с изменениями в выдачи
Исправления
Название: Re: A-Parser 1.1 - продвинутый парсер ПС, кейвордов, контента, показателей, 70+ парс
Отправлено: SpySerp от 21-07-2017, 13:33:41
Больше, лучше, быстрее - расширение команды поддержки
 (http://"https://a-parser.com/threads/3645/")

Всем привет, мы расширили команду поддержки пользователей!

(https://a-parser.com/img/scr/200h200-2_bez_ramki.png)
Встречайте наших героев:
Также мы увеличили количество каналов (http://'https://a-parser.com/pages/support/') для ваших вопросов:
И самое главное: мы обновили документацию (http://'https://a-parser.com/wiki/index/') и продолжаем наполнять наш каталог (http://'https://a-parser.com/resources/') парсеров и пресетов - уже более 140 готовых примеров! Предлагайте свои идеи и мы обязательно их реализуем!
Название: Re: A-Parser 1.1 - продвинутый парсер ПС, кейвордов, контента, показателей, 70+ парс
Отправлено: A-Parser Support от 31-07-2017, 17:25:18
1.1.899 - автоматическое распознавание Яндекс каптчи и новый парсер мобильной выдачи Google
(http://"https://a-parser.com/threads/3694/")
В A-Parser 1.1.899 добавлено автоматическое распознавание новой Яндекс каптчи, без использования антигeйта:

(https://a-parser.com/img/scr/93eop.png)

Как следствие скорость парсинга Яндекса сильно выросла:

(https://a-parser.com/img/scr/nhupu.png)

Улучшения:
Исправления в связи с изменениями в выдаче:
Название: Re: A-Parser 1.1 - продвинутый парсер ПС, кейвордов, контента, показателей, 70+ парс
Отправлено: A-Parser Support от 10-08-2017, 06:32:42
Видео урок по созданию парсера на языке JavaScript (https://a-parser.com/threads/3716/)

Задача: Оценить страницу сайта на предмет тематики, рассчитать плотность ключевых слов на странице сайта и упорядочить результат по убыванию плотности ключевых слов.

http://www.youtube.com/watch?v=1sQcmqEwH8I

Готовый парсер можно взять в нашем каталоге пресетов: Подсчет плотности ключевых слов (https://a-parser.com/resources/210/)

Оставляйте комментарии и подписывайтесь на наш канал на YouTube! (https://www.youtube.com/c/AParser_channel)
Название: Re: A-Parser 1.1 - продвинутый парсер ПС, кейвордов, контента, показателей, 70+ парс
Отправлено: A-Parser Support от 23-08-2017, 13:09:47
1.1.918 - улучшена работа с override и отдельные append/preppend text для каждого файла (https://a-parser.com/threads/3752/)

(https://files.a-parser.com/img/cb4qp.png)

Улучшения:
(https://files.a-parser.com/img/7ZvI1.png)
Исправления в связи с изменениями в выдаче:
Исправления:
Название: Re: A-Parser 1.1 - продвинутый парсер ПС, кейвордов, контента, показателей, 70+ парс
Отправлено: A-Parser Support от 05-09-2017, 15:22:19
Видео урок: Парсинг пользователей ВК, которые лайкнули определенный пост (https://youtu.be/HFAbEDBEMj8)
В этом уроке будет рассмотрен пример получения с помощью А-Парсер списка пользователей социальной сети Вконтакте, которые лайкнули выбранный пост. Такую информацию можно использовать для дальнейшего маркетинга, например, для рассылки сообщений только заинтересованным пользователям или проведения различных акций.

http://www.youtube.com/watch?v=HFAbEDBEMj8

Урок включает в себя:
Готовый парсер можно взять в нашем каталоге пресетов: Получение списка пользователей, которые лайкнули пост в VK (https://a-parser.com/resources/143/)

Оставляйте комментарии и подписывайтесь на наш канал на YouTube! (https://www.youtube.com/c/AParser_channel)

Название: Re: A-Parser 1.1 - продвинутый парсер ПС, кейвордов, контента, показателей, 70+ парс
Отправлено: A-Parser Support от 28-09-2017, 13:36:49
Сборник рецептов #18: скриншоты сайтов, lite выдача Яндекса и проверка сайтов (https://a-parser.com/threads/3862/)

18-й сборник рецептов. В нем мы будем смотреть как выглядят сайты сразу в нескольких браузерах, прoтестируем облегченную выдачу Яндекса и проверим сайты в Яндексы. Кроме этого в сборнике предоставлены парсер для проверки существования e-mailов и пресет для получения позиций сразу по нескольким регионам. Итак, поехали!

Автоматизация тестирования сайтов в разных браузерах (https://a-parser.com/resources/224/)

Наверное каждый разработчик сайтов сталкивается с вопросом тестирования своих наработок в различных браузерах. Можно конечно держать для этого несколько виртуальных машин, что далеко не совсем рационально. Можно собирать отзывы от пользователей, что негативно влияет на общее впечатление от сайта тех же пользователей. А можно воспользоваться специализированными сервисами. Например BrowserStack. А с помощью А-Парсера этот процесс можно еще и автоматизировать, если к примеру нужно сразу прoтестировать множество сайтов. Как это сделать - читайте по ссылке выше.
(https://files.a-parser.com/img/bscreen2.png)

Парсинг lite выдачи Яндекса (https://a-parser.com/resources/228/)

Недавно на Хабре была опубликована статья о lite выдаче поиска Яндекса. Нам стало интересно, насколько такая выдача может быть полезной в сравнении с обычной с точки зрения парсинга. Мы с помощью функционала JS парсеров сделали новый парсер и сравнили его со стандартным. Как это было, что из этого вышло и какие получились выводы, а также готовый парсер lite выдачи Яндекса - по ссылке выше.
(https://files.a-parser.com/img/0d99H.png)

Проверка сайта в Яндекс (https://a-parser.com/resources/229/)

Поисковую выдачу Яндекса можно использовать для решения самых разных задач. Одна из них - проверка сайтов на различные типы угроз. Яндекс отмечает такие сайты в выдаче специальными метками. С помощью A-Parser можно быстро проверить большие списки сайтов на наличие таких меток. Как это сделать - описано по ссылке выше.
(https://files.a-parser.com/img/wb2iX.png)

Кроме этого:
Еще больше различных рецептов в нашем обновленном Каталоге (https://a-parser.com/resources/)!
Предлагайте ваши идеи для новых парсеров здесь (https://a-parser.com/threads/3464/), лучшие будут реализованы и опубликованы.

Подписывайтесь на наш канал на Youtube (https://www.youtube.com/channel/UCvypGICrfCky8tPtebmIvQw) - там регулярно выкладываются видео с примерами использования A-Parser, а также следите за новостями в Twitter (https://twitter.com/a_parser).

Предыдущие сборники
Название: Re: A-Parser 1.1 - продвинутый парсер ПС, кейвордов, контента, показателей, 70+ парс
Отправлено: A-Parser Support от 09-10-2017, 12:00:16
Получение позиций сайта одновременно для нескольких регионов (http://"https://a-parser.com/resources/231/")
Написание JS парсера для получения позиций сайта сразу по нескольким регионам

http://www.youtube.com/watch?v=f8Ocp7fHjs0

Обычно для получения позиций сайта в Яндексе используется (https://a-parser.com/img/parsers/se-yandex-position.png)SE::Yandex::position (http://"https://a-parser.com/wiki/se-yandex-position/"). Но если возникает задача получить позиции для нескольких регионов, при этом для каждого региона нужно проверять позицию отдельного поддомена, то нужно делать много однотипных заданий с разными регионами, что несколько неудобно. Решение можно значительно упрoстить, использовав функционал JavaScript парсеров и написав небольшую обертку вокруг (https://a-parser.com/img/parsers/se-yandex-position.png)SE::Yandex::position (http://"https://a-parser.com/wiki/se-yandex-position/")

Урок включает в себя:


Оставляйте комментарии и подписывайтесь на наш канал на YouTube (http://"https://www.youtube.com/c/AParser_channel")!
Название: Re: A-Parser 1.1 - продвинутый парсер ПС, кейвордов, контента, показателей, 70+ парс
Отправлено: A-Parser Support от 11-10-2017, 13:44:25
Прием оплаты криптовалютами (Bitcoin и т.п.) (http://"https://a-parser.com/threads/3888/")

После отключения приема Интеркассой биткоинов, мы добавили собственную возможность оплаты в личном кабинете различными криптовалютами. Поддерживаются Bitcoin, BCH, LTC, ETH и другие альткоины.
(https://files.a-parser.com/img/crypto.png)

Для того чтобы сделать оплату, достаточно выбрать в личном кабинете соответствующий способ:
(https://files.a-parser.com/img/FireShot_Capture_3_-_Lichnyi_kabinet_I_A-Parser_-_parser___-_https___a-parser.com_pages_members-area_.png)

И проследовать дальнейшим инструкциям, выбрав нужную криптовалюту.

Оставляйте комментарии и подписывайтесь на наш канал на YouTube (http://"https://www.youtube.com/c/AParser_channel")!
Название: Re: A-Parser 1.1 - продвинутый парсер ПС, кейвордов, контента, показателей, 70+ парс
Отправлено: A-Parser Support от 19-10-2017, 14:48:05
Сборник рецептов #19: публикация сообщений в Wordpress, парсинг Chrome Webstore и AliExpress (https://a-parser.com/threads/3910/)

19-й сборник рецептов. В нем мы будем постить сообщения в блоги Wordpress, парсить Chrome Webstore и AliExpress. Поехали!

Постинг сообщений в Wordpress блоги (https://a-parser.com/resources/232/)
Как известно, А-Парсер - это многофункциональный парсер. И он настолько многофункционален, что может не только парсить, но и постить! О том, как это сделать, пойдет речь в этой статье. В качестве примера выбран один из самых популярных движков - Wordpress. Все подробности, а также готовый постер - по ссылке выше.

(http://files.a-parser.com/img/WPPost2.png)

Получение ссылок на плагины из Chrome Webstore (https://a-parser.com/resources/234/)
Браузер Chrome является одним из самых популярных в мире. И в нем практически с самого начала существования есть поддержка расширений, которые доступны в специальном магазине. Данный магазин представляет собой обычный сайт, который, как и любые другие, можно парсить. Полученная информация может быть использована к примеру для создания собственного магазина расширений или парсинга текстовок. Детальнее о том, как создавать такие парсеры - в статье по ссылке выше.

(https://files.a-parser.com/img/3kwix_171019120822.png)

Парсер AliExpress (https://a-parser.com/resources/213/)
AliExpress - это одна из крупнейших торговых онлайн площадок. Парсинг данных о товарах из алиэкспресс позволяет проводить сравнение цен, получать картинки и названия товаров. Готовый парсер JS::Shop::AliExpress доступен в нашем каталоге по ссылке выше.

(https://files.a-parser.com/img/ali2.png)

Кроме этого:
Еще больше различных рецептов в нашем обновленном Каталоге (https://a-parser.com/resources/)!
Предлагайте ваши идеи для новых парсеров здесь (https://a-parser.com/threads/3464/), лучшие будут реализованы и опубликованы.

Подписывайтесь на наш канал на Youtube (https://www.youtube.com/channel/UCvypGICrfCky8tPtebmIvQw) - там регулярно выкладываются видео с примерами использования A-Parser, а также следите за новостями в Twitter (https://twitter.com/a_parser).

Предыдущие сборники:
Название: Re: A-Parser 1.1 - продвинутый парсер ПС, кейвордов, контента, показателей, 70+ парс
Отправлено: A-Parser Support от 09-11-2017, 12:04:06
1.2.0 - обновленный интерфейс и множество улучшений

Мы рады представить релиз A-Parser 1.2.0 - результат почти двухмесячной разработки на бета-канале!
Полностью обновленный интерфейс, переработан ряд парсеров, реализовано множество различных улучшений.

(https://files.a-parser.com/img/yreu5_171109011859.png)

Новые парсеры

Улучшения

Исправления
Исправления в связи с изменениями в выдачи
Впереди у нас еще очень много планов, поэтому оставайтесь с нами и следите за новостями!
Название: Re: A-Parser 1.1 - продвинутый парсер ПС, кейвордов, контента, показателей, 70+ парс
Отправлено: A-Parser Support от 21-11-2017, 12:16:14
Сборник статей #1: A-Parser для маркетологов, SEO-специалистов и реальный опыт работы (http://"https://a-parser.com/threads/4009/")

Мы начинаем публикацию статей об использовании A-Parser для решения различных задач.
В этом сборнике будет рассмотрено использование А-Парсера SEO-специалистами и маркетологами, а также описан реальный пользовательский опыт работы. Поехали!

A-Parser для SEO специалиста (http://"https://a-parser.com/resources/242/")

В статье рассмотрена актуальность использования A-Parsera в работе SEO мастера. Определено место парсера в системе SEO оптимизации. На конкретных примерах продемонстрирована его практическая ценность.
(https://files.a-parser.com/img/stat4mod.png)

Интернет-маркетинг и A-Parser (http://"https://a-parser.com/resources/243/")

В статье рассмотрены понятия интернет-маркетинга и место в нем A-Parser. Актуализирован вопрос целесообразности использования парсера для интернет-маркетинга. Показаны практические примеры использования парсера в области интернет-маркетинга.
(https://files.a-parser.com/img/mark.png)

Как я пришел к покупке A-Parser в 2016 году! (http://"https://a-parser.com/threads/4005/")

Описание реального опыта использования парсера одним из наших пользователей. На примере одной из задач показан подход к ее решению и реальная финансовая выгода.

(https://files.a-parser.com/img/hjhdjfu74tjhbfh.png)

Если вы хотите, чтобы мы более подробно раскрыли какой-то функционал парсера, у вас есть идеи для новых статей или вы желаете поделиться собственным опытом использования A-Parser (за небольшие плюшки :) ) - отписывайтесь здесь (http://"https://a-parser.com/threads/3464/").

Подписывайтесь на наш канал на Youtube (http://"https://www.youtube.com/channel/UCvypGICrfCky8tPtebmIvQw") - там регулярно выкладываются видео с примерами использования A-Parser, а также следите за новостями в Twitter (http://"https://twitter.com/a_parser").
Название: Re: A-Parser 1.1 - продвинутый парсер ПС, кейвордов, контента, показателей, 70+ парс
Отправлено: A-Parser Support от 04-12-2017, 13:02:35
1.2.31 - x64 для Windows, обновление JS движка, улучшения работы с сохраненными заданиями

Улучшения
(https://files.a-parser.com/img/oz41l_171204112551.png)

Исправления в связи с изменениями в выдачи
Исправления
Название: Re: A-Parser 1.1 - продвинутый парсер ПС, кейвордов, контента, показателей, 70+ парс
Отправлено: A-Parser Support от 15-12-2017, 13:41:53
Сборник рецептов #20: автообновление цен в ИМ, анализ текстов и регистрация аккаунтов (https://a-parser.com/threads/4074/)

В 20-м сборнике рецептов наш пользователь glukmaster поделится опытом решения реальной задачи на практике с помощью A-Parser. А также мы будем анализировать тексты и автоматизировать регистрацию аккаунтов Яндекса. Поехали!

Автоматическое обновление цен 5000 товаров в интернет-магазине на Bitrix (https://a-parser.com/resources/245/)
Цикл видео из 7 частей, в которых очень детально и наглядно показано, как решать такую задачу, как обновление цен в интернет магазине. Для парсинга используется A-Parser. Посмотреть видео можно по ссылке выше.
(https://files.a-parser.com/img/mypic.png)

Анализ текста (https://a-parser.com/resources/99/)
Одним из самых популярных кейсов по применению А-Парсера является парсинг текстов. При этом возникает задача их анализа. Полноценно решить эту задачу позволяют специальные ресурсы. Ранее мы уже публиковали пресет по парсингу одного из таких сервисов. Теперь же это решение полностью переписано в виде JS-парсера, добавлена возможность анализировать не только тексты, а и полностью страницы, т.е. подавать на вход ссылки. Все детали и сам парсер - по ссылке выше.
(https://files.a-parser.com/img/istio.png)

Автоматизация регистрации аккаунтов Яндекса (https://a-parser.com/resources/240/)
Как известно, для парсинга WordStat нужны аккаунты Яндекса. А-Парсер умеет их регистрировать, но их срок жизни невелик, т.к. спустя 1-2 суток включается проверка номера телефона. Поэтому возникает необходимость периодической регистрации новых аккаунтов. И это можно легко автоматизировать. По ссылке выше показано как это сделать.
(https://files.a-parser.com/img/2okcs_171107102640.png)

Кроме этого:
Еще больше различных рецептов в нашем обновленном Каталоге (https://a-parser.com/resources/)!
Предлагайте ваши идеи для новых парсеров здесь (https://a-parser.com/threads/3464/), лучшие будут реализованы и опубликованы.
Подписывайтесь на наш канал на Youtube (https://www.youtube.com/channel/UCvypGICrfCky8tPtebmIvQw) - там регулярно выкладываются видео с примерами использования A-Parser, а также следите за новостями в Twitter (https://twitter.com/a_parser).

Предыдущие сборники рецептов:
Сборники статей:
Название: Re: A-Parser 1.1 - продвинутый парсер ПС, кейвордов, контента, показателей, 70+ парс
Отправлено: A-Parser Support от 26-12-2017, 13:47:38
1.2.50 - улучшение стабильности, поддержка Xevil и множество исправлений в стандартных парсерах (http://"http://www.maultalk.com/go.php?https://a-parser.com/threads/4101/#post-13088")
(http://files.a-parser.com/img/new_version800px2.png)
Улучшения
Исправления в связи с изменениями в выдаче
Исправления
Команда A-Parser поздравляет всех с Новым годом и Рождеством! Спасибо что вы с нами!
Название: Re: A-Parser 1.1 - продвинутый парсер ПС, кейвордов, контента, показателей, 70+ парс
Отправлено: A-Parser Support от 09-01-2018, 14:19:49
Как известно, в A-Parser есть возможность создавать свои собственные парсеры, которые могут иметь практически любую логику и в то же время позволяют пользоваться всеми преимуществами А-Парсера. Для написания таких парсеров используется язык JavaScript. В нашей документации (https://a-parser.com/wiki/js-parsers/) подробно описаны все функции и методы, которые можно использовать при написании парсеров. А в сегодняшнем сборнике мы на практических примерах покажем наиболее часто применяемые функции. Поехали!
(https://files.a-parser.com/img/drcxx_180109125728.png)
Для каждой статьи в конце будет продемонстрирован результат работы и дана ссылка на готовый парсер.

Если вы хотите, чтобы мы более подробно раскрыли какой-то функционал парсера, у вас есть идеи для новых статей или вы желаете поделиться собственным опытом использования A-Parser (за небольшие плюшки :) ) - отписывайтесь здесь (https://a-parser.com/threads/3464/).

Подписывайтесь на наш канал на Youtube (https://www.youtube.com/channel/UCvypGICrfCky8tPtebmIvQw) - там регулярно выкладываются видео с примерами использования A-Parser, а также следите за новостями в Twitter (https://twitter.com/a_parser).

Предыдущие сборники статей
Название: Re: A-Parser 1.1 - продвинутый парсер ПС, кейвордов, контента, показателей, 70+ парс
Отправлено: A-Parser Support от 24-01-2018, 10:25:20
1.2.78 - поддержка сессий в JS парсерах, улучшение SE::Google::Modern, правки в интерфейсе (http://"https://a-parser.com/threads/4178/")

(https://files.a-parser.com/img/1_2_78_800px.png)

Улучшения

Исправления в связи с изменениями в выдаче
Исправления
Название: Re: A-Parser 1.1 - продвинутый парсер ПС, кейвордов, контента, показателей, 70+ парс
Отправлено: A-Parser Support от 03-02-2018, 17:46:54
Видео урок: Создание JS парсеров. Получение результатов от стандартного парсера (https://a-parser.com/threads/4208/)

Это видео начинает цикл уроков по созданию JavaScript парсеров. Здесь рассказано о том, как начать писать собственные парсеры, используя функционал JS парсеров в А-Парсере.

(https://files.a-parser.com/img/js_picture.jpg) (https://www.youtube.com/watch?v=GVBH9oM2VSc)

В уроке рассмотрено:
Полезные ссылки:
Статья и готовый парсер: https://a-parser.com/resources/254/ (https://a-parser.com/resources/254/)

Оставляйте комментарии и подписывайтесь на наш канал на YouTube! (https://www.youtube.com/c/AParser_channel)
Название: Re: A-Parser 1.1 - продвинутый парсер ПС, кейвордов, контента, показателей, 70+ парс
Отправлено: A-Parser Support от 14-02-2018, 10:11:15
Видео урок: Создание JS парсеров. Парсинг сайта с проходом по страницах (http://"https://a-parser.com/threads/4243/")

Второе видео в цикле уроков по созданию JavaScript парсеров. Здесь рассказано о том, как написать несложный парсер сайта, который будет "листать" страницы, используя функционал JS парсеров в А-Парсере.

http://www.youtube.com/watch?v=2-tASbijWiQ

В уроке рассмотрено:

Статья и готовый парсер: https://a-parser.com/resources/255/ (https://a-parser.com/resources/255/)

Оставляйте комментарии и подписывайтесь на наш канал на YouTube! (http://"https://www.youtube.com/c/AParser_channel")
Название: Re: A-Parser 1.1 - продвинутый парсер ПС, кейвордов, контента, показателей, 70+ парс
Отправлено: A-Parser Support от 23-02-2018, 13:18:14
1.2.138 - поддержка Node.js модулей, обработка ReCaptcha2 во всех парсерах Google, парсер AliExpress (http://"https://a-parser.com/threads/4269/")

(https://files.a-parser.com/img/logo1_2_138_plus_npm.png)

В A-Parser 1.2.138 добавлена (http://"https://a-parser.com/threads/3120/") эмуляция node (http://"https://nodejs.org/") версии 8.9.x с поддержкой загрузки модулей и частичной реализацией fs и net модулей. Это дает возможность обращаться из JavaScript парсеров напрямую к файловой системе, а также использовать подключение по TCP из модулей к другим сервисам(например mysql, redis, chrome...).

Все это позволило загружать и использовать node модули из каталога npm, в котором собраны множество полезных библиотек для обработки данных, коннекторы к базам данных и множество других интересных вещей. На данный момент прoтестированы следующие модули: md5, async-redis, jsdom, puppeter.

Улучшения
Исправления в связи с изменениями в выдаче
Исправления
Название: Re: A-Parser 1.1 - продвинутый парсер ПС, кейвордов, контента, показателей, 70+ парс
Отправлено: A-Parser Support от 06-03-2018, 10:17:01
Использование Xevil совместно с A-Parser для разгадывания ReCaptcha2

(https://files.a-parser.com/img/ap+xevil_logo.png)

Как известно, сейчас Google при парсинге очень часто выдает рекаптчу, что значительно усложняет и замедляет сбор данных.
В A-Parser есть возможность обходить данную проблему, разгадывая рекаптчу с помощью сторонних сервисов. Поддерживаются различные онлайн сервисы, а также программные решения.

Одним из таких решений есть XEvil. Его использование дает хороший прирост в скорости, а также значительно удешевляет парсинг, ведь здесь нету оплаты за количество разгаданных каптч/рекаптч, как в онлайн сервисах. Кроме этого, XEvil умеет разгадывать практически любые обычные каптчи (в виде картинки) и данная возможность также поддерживается в A-Parser.

(https://files.a-parser.com/img/Ispolzovanie_Xevil_sovmestno_A-Parser_dlya_razgadyvaniya_ReCaptcha2___A-Parser_-_parser_dlya_professionalov_SEO_-_Google_Chrome_2018-03-05_12.50.16.jpg) (https://www.youtube.com/watch?v=jbhpPUBWy5g)

На данный момент использовать разгадывание рекаптчи с помощью XEvil можно в таких парсерах:
В видео показано:

Ознакомиться более детально с возможностями XEvil можно по ссылкам:
Оставляйте комментарии и подписывайтесь на наш канал на YouTube! (https://www.youtube.com/c/AParser_channel/)
Название: Re: A-Parser 1.1 - продвинутый парсер ПС, кейвордов, контента, показателей, 70+ парс
Отправлено: A-Parser Support от 16-03-2018, 10:04:39
Сборник рецептов #21: уведомления в Telegram из A-Parser, мультифильтр и парсинг IMDb (https://a-parser.com/threads/4318/)

21-й сборник рецептов. В нем мы научимся отправлять сообщения в Telegram прямо из A-Parser, изучим работу с модулями Node.js в JS парсерах на примере решения задачи фильтрации по множеству признаков, а также спарсим весь IMDb. Поехали!

Уведомления в Telegram из A-Parser (https://a-parser.com/threads/4316/)

Telegram является одним из самых популярных мессенджеров благодаря своей простоте, и в то же время большому функционалу. Среди прочего, в Телеграме можно создавать ботов, с помощью которых можно делать чаты более интерактивными. Взаимодействие с ботом на на стороне сервера происходит через Telegram Bot API. Используя эти возможности, можно легко и буквально за несколько минут настроить уведомления себе в Telegram прямо из парсера. О том, как это сделать, а также несколько реальных примеров - по ссылке выше.

(https://files.a-parser.com/img/oz78y_180315000445.png)
(https://files.a-parser.com/img/ai5di_180314231615.png)

Фильтрация по множеству признаков (https://a-parser.com/resources/270/)

Как известно, для фильтрации в А-Парсере используется встроенный функционал фильтров. Но бывают ситуации, когда список признаков, наличие которых нужно проверять, очень большой и его сложно вписать в строку стандартного фильтра.
Начиная с версии 1.2.127 в A-Parser добавлена поддержка модулей Node.js. Благодаря этому появилась возможность читать список признаков из файла и использовать его для проверки страниц. О том, как это сделать, а также готовый парсер с мультифильтром - по ссылке выше.

(https://files.a-parser.com/img/3cbbe_180315100634.png)

Парсинг рекомендаций фильмов из IMDb (https://a-parser.com/resources/269/)

Пример решения задачи по сбору данных о фильмах и их рекомендаций на IMDb. Данная статья показывает, как можно решать задачи, которые на первый взгляд требуют много времени и ресурсов, буквально за несколько часов. Узнать о том, как спарсить весь IMDb за 1,5 часа, а также посмотреть пресет и забрать готовую базу можно по ссылке выше.

(https://files.a-parser.com/img/ecaoq_180220140515.png)

Еще больше различных рецептов в нашем обновленном Каталоге (https://a-parser.com/resources/)!
Предлагайте ваши идеи для новых парсеров здесь (https://a-parser.com/threads/3464/), лучшие будут реализованы и опубликованы.

Подписывайтесь на наш канал на Youtube (https://www.youtube.com/channel/UCvypGICrfCky8tPtebmIvQw) - там регулярно выкладываются видео с примерами использования A-Parser, а также следите за новостями в Twitter (https://twitter.com/a_parser).

Сборники статей:
Название: Re: A-Parser 1.1 - продвинутый парсер ПС, кейвордов, контента, показателей, 70+ парс
Отправлено: A-Parser Support от 27-03-2018, 10:21:25
1.2.160 - поддержка SQLite, проверка доменов на клей, Parse all results в SE::Yahoo (http://'https://a-parser.com/threads/4353/')

(https://files.a-parser.com/img/ap+sqlite.png)
Улучшения
Исправления в связи с изменениями в выдаче
Исправления
Название: Re: A-Parser 1.1 - продвинутый парсер ПС, кейвордов, контента, показателей, 70+ парс
Отправлено: A-Parser Support от 06-04-2018, 10:16:57
Видео урок: Создание JS парсеров. Работа с CAPTCHA (http://"https://a-parser.com/threads/4383/")

Третье видео в цикле уроков по созданию JavaScript парсеров. Здесь рассказано о том, как написать JS парсер, в котором будет поддержка антигeйта для разгадывания каптч на страницах.

http://www.youtube.com/watch?v=di5oe7lMhrU

В уроке рассмотрено:

Статья и готовый парсер: https://a-parser.com/resources/257/ (https://a-parser.com/resources/257/)

Оставляйте комментарии и подписывайтесь на наш канал на YouTube! (http://"https://www.youtube.com/c/AParser_channel")
Название: Re: A-Parser 1.1 - продвинутый парсер ПС, кейвордов, контента, показателей, 70+ парс
Отправлено: A-Parser Support от 17-04-2018, 10:06:08
Сборник рецептов #22: проверка индексации в нескольких ПС, многоуровневый парсинг и поиск сабдоменов

22-й сборник рецептов. В нем мы разберемся, как проверять индексацию всех страниц сайта одновременно в нескольких поисковиках, научимся парсить данные по ссылкам из выдачи одним заданием и будем искать сабдомены на сайтах. Поехали!

Получение страниц сайта и проверка индексации в Google и Яндекс (https://a-parser.com/resources/250/)

Данный пресет позволяет спарсить ссылки на все страницы сайта и одновременно проверить их на предмет индексации поисковиками (в примере Google и Яндекс, можно по аналогии добавить другие ПС). Готовый пресет и описание по ссылке выше.
(https://files.a-parser.com/img/bo3i2_180416114011.png)

Парсим title и description для TOP10 поисковой выдачи по ключевому слову (https://a-parser.com/resources/263/)

Пример использования tools.query.add в JavaScript парсерах. Данный парсер получает ссылки из выдачи, после чего собирает из каждой страницы title и description. И все это одним заданием с максимальной производительностью, благодаря многопоточному парсингу. Парсер с описанием доступны по ссылке выше.
(https://files.a-parser.com/img/gwzy0_180416114857.png)

Поиск сабдоменов сайта (https://a-parser.com/resources/235/)

Небольшой пример, который демонстрирует, как собрать поддомены одного или нескольких сайтов. Используется (https://a-parser.com/img/parsers/html-linkextractor.png) HTML::LinkExtractor (https://a-parser.com/wiki/html-linkextractor/) и Parse to level (http://a-parser.com/wiki/advanced-options/#parse-to-level/) для прохода вглубь по страницам сайта. При этом Конструктором результатов извлекаются из внутренних ссылок домены и выводятся с уникализацией по строке. Готовый пресет - по ссылке выше.
(https://files.a-parser.com/img/vmbxk_171020103911.png)

Кроме этого:
Еще больше различных рецептов в нашем Каталоге (https://a-parser.com/resources/)!
Предлагайте ваши идеи для новых парсеров здесь (https://a-parser.com/threads/3464/), лучшие будут реализованы и опубликованы.

Подписывайтесь на наш канал на Youtube (https://www.youtube.com/channel/UCvypGICrfCky8tPtebmIvQw) - там регулярно выкладываются видео с примерами использования A-Parser, а также следите за новостями в Twitter (https://twitter.com/a_parser).

Предыдущие сборники рецептов:
Название: Re: A-Parser 1.1 - продвинутый парсер ПС, кейвордов, контента, показателей, 70+ парс
Отправлено: A-Parser Support от 08-05-2018, 10:05:07
1.2.185 - увеличение скорости в SE::Google::Modern, новые возможности Net:: DNS, множество улучшений (https://a-parser.com/threads/4471/)

(https://files.a-parser.com/img/1.2.185.png)
Улучшения
Исправления в связи с изменениями в выдаче
Исправления
Название: Re: A-Parser 1.1 - продвинутый парсер ПС, кейвордов, контента, показателей, 70+ парс
Отправлено: A-Parser Support от 17-05-2018, 10:59:07

Видео урок: Создание JS парсеров. Работа с ReCaptcha2 (http://"https://a-parser.com/threads/4493/")


Очередное видео в цикле уроков по созданию JavaScript парсеров. Здесь показано, как реализовать разгадывание рекаптч в JS парсере.

http://www.youtube.com/watch?v=mFnseLvKkfE

В уроке рассмотрено:

Ссылки:
Оставляйте комментарии и подписывайтесь на наш канал на YouTube! (https://www.youtube.com/c/AParser_channel)
Название: Re: A-Parser 1.1 - продвинутый парсер ПС, кейвордов, контента, показателей, 70+ парс
Отправлено: A-Parser Support от 29-05-2018, 10:14:43
Сборник рецептов #23: категории сайтов, парсинг в YML и преобразование дат (https://a-parser.com/threads/4517/)

23-й сборник рецептов. В нем мы будем парсить категории сайтов из Google, научимся формировать файлы YML, а также разберемся, как парсить даты и преобразовывать их в единый формат. Поехали!

Получение категорий сайтов из Google (https://a-parser.com/resources/285/)

Категоризация сайтов - довольно актуальная задача, но существует немного сервисов, которые могут ее решить. Поэтому, по ссылке выше можно взять небольшой парсер, который позволяет получать категории сайтов из Google.
(https://files.a-parser.com/img/tdhcp_180525110933.png)

Выгрузка товаров в формате YML (https://a-parser.com/resources/284/)

YML - это стандарт, разработанный Яндексом для работы с Маркетом. По своей сути, это файлы, схожие с XML, в которых содержится информация о товарах в интернет-магазине. Данный формат обеспечивает регулярное автоматическое обновление каталога на Яндекс.Маркет и позволяет отражать все актуальные изменения (наличие, цена, появление новых товаров). Пример парсинга интернет-магазина и сохранения собранных данных в YML можно посмотреть по ссылке выше.
(https://files.a-parser.com/img/00xer_180528101714.png)

Парсим Google новости с датой и преобразуем ее (https://a-parser.com/resources/281/)

В поисковой выдаче Google возле новостей публикуется дата. Как правило, это могут быть метки "10 ч. назад" или "26 мая 2018 г.". Иногда может возникнуть задача спарсить все даты и привести их к единому виду. Как именно это сделать, можно узнать по ссылке выше.
(https://files.a-parser.com/img/7adjc_180507103637.png)

Кроме этого:
Еще больше различных рецептов в нашем Каталоге (https://a-parser.com/resources/)!

Предлагайте ваши идеи для новых парсеров здесь (https://a-parser.com/threads/3464/), лучшие будут реализованы и опубликованы.

Подписывайтесь на наш канал на Youtube (https://www.youtube.com/channel/UCvypGICrfCky8tPtebmIvQw) - там регулярно выкладываются видео с примерами использования A-Parser, а также следите за новостями в Twitter (https://twitter.com/a_parser).

Предыдущие сборники рецептов:
Название: Re: A-Parser 1.1 - продвинутый парсер ПС, кейвордов, контента, показателей, 70+ парс
Отправлено: A-Parser Support от 12-06-2018, 10:05:46
1.2.216 - улучшения в SE::Google::Modern и JS парсерах, а также множество других (https://a-parser.com/threads/4563/)

(https://files.a-parser.com/img/1.2.216.png)

Улучшения
Исправления в связи с изменениями в выдаче
Исправления
Название: Re: A-Parser 1.1 - продвинутый парсер ПС, кейвордов, контента, показателей, 70+ парс
Отправлено: A-Parser Support от 22-06-2018, 10:56:14
Сборник рецептов #24: уведомление в Telegram об экспайре доменов, чекер РКН и работа с SQLite (https://a-parser.com/threads/4591/)

24-й сборник рецептов. В нем мы научимся мониторить окончание срока регистрации доменов с уведомлением в Телеграм, сделаем альтернативный чекер сайтов в базе РКН, а также на простом примере парсера курсов валют изучим работу с базами данных. Поехали!

Получаем уведомления в Telegram об окончании срока регистрации доменов (https://a-parser.com/resources/287/)

Мониторинг сроков регистрации доменов - это довольно распространенная задача. A-Parser позволяет легко автоматизировать этот процесс. Более того, можно настроить получение прямо в Телеграм уведомлений о доменах, срок регистрации которых скоро закончится. Готовое решение для автоматической проверки с уведомлением - по ссылке выше.
(https://files.a-parser.com/img/180620_185942_00001.png)

Проверка блoкировки рoскомНадзора через GitHub (https://a-parser.com/resources/286/)

В А-Парсере есть стандартный парсер (https://a-parser.com/img/parsers/check-roskomnadzor.png) Check::RosKomNadzor (https://a-parser.com/wiki/check-roskomnadzor/), который позволяет проверять наличие сайтов в базе РКН. Данные получаются напрямую из официального сервиса, для работы обязательно нужно подключать антигeйт. Кроме того, официальный сервис РКН часто подвергается атакам, в связи с чем может быть недоступен. Но существуют альтернативные источники данных, доступность которых значительно выше и к тому же не требующие проверки в виде каптчи. Парсинг одного из таких источников и реализован в пресете по ссылке выше.
(https://files.a-parser.com/img/js9b9_180621103423.png)

Простой парсер обменника с записью в БД SQLite (https://a-parser.com/resources/275/)

Как известно, в A-Parser есть возможность чтения/записи данных в БД SQLite. В этом рецепте показано использование этого функционала на примере парсинга курсов валют. Готовый парсер доступен по ссылке выше.
(https://files.a-parser.com/img/Lati2.png)

Еще больше различных рецептов в нашем Каталоге (https://a-parser.com/resources/)!

Предлагайте ваши идеи для новых парсеров здесь (https://a-parser.com/threads/3464/), лучшие будут реализованы и опубликованы.

Подписывайтесь на наш канал на Youtube (https://www.youtube.com/channel/UCvypGICrfCky8tPtebmIvQw) - там регулярно выкладываются видео с примерами использования A-Parser, а также следите за новостями в Twitter (https://twitter.com/a_parser).

Предыдущие сборники рецептов:
Название: Re: A-Parser 1.1 - продвинутый парсер ПС, кейвордов, контента, показателей, 70+ парс
Отправлено: A-Parser Support от 03-07-2018, 10:10:43
1.2.246 - обновление базы Rank::CMS и новые функции в парсерах Baidu и MajesticSEO (https://a-parser.com/threads/4614/)

(https://files.a-parser.com/img/1.2.246.png)
Улучшения
Исправления в связи с изменениями в выдаче
Исправления
Название: Re: A-Parser 1.1 - продвинутый парсер ПС, кейвордов, контента, показателей, 70+ парс
Отправлено: A-Parser Support от 13-07-2018, 10:14:11
Сборник статей #4: добавление товаров в OpenCart и парсинг JSON (https://a-parser.com/threads/4647/)

В 4-м сборнике статей будет рассмотрено добавление товаров в OpenCart, а также описано создание универсального парсера JSON. В каждой статье приложены готовые JS парсеры, используя которые, можно на реальных примерах изучить описанные методы и поэксперементировать с ними. Поехали!

Работаем с OpenCart. Часть 1. Вступление. (https://a-parser.com/resources/291/)

Данная статья начинает цикл об одной из наиболее часто запрашиваемых возможностей - заливке товаров в интернет-магазин. A-Parser - это универсальный инструмент, который кроме прочего может решать и такие задачи. Для тестов выбран движок OpenCart, в 1-й статье будет рассмотрена авторизация, получение списка товаров и добавление товара. Подробности, а также пример парсера - по ссылке выше.
(https://files.a-parser.com/img/32t3m_180712101444.png)

Парсинг JSON ответов и работа с их содержимым (https://a-parser.com/resources/289/)

JSON - это довольно популярный способ предоставления данных, который, например, часто используется при работе с API различных сервисов. В А-Парсере есть встроенные инструменты для работы с ним, но не всегда их применение может быть простым, иногда требуется дополнительно писать сложные шаблоны, используя шаблонизатор. Поэтому в статье по ссылке выше будет рассказано, как написать простой универсальный парсер JSON.
(https://files.a-parser.com/img/a52w5_180711161912.png)

Если вы хотите, чтобы мы более подробно раскрыли какой-то функционал парсера, у вас есть идеи для новых статей или вы желаете поделиться собственным опытом использования A-Parser (за небольшие плюшки :) ) - отписывайтесь здесь (https://a-parser.com/threads/3464/).

Подписывайтесь на наш канал на Youtube (http://www.youtube.com/c/AParser_channel') - там регулярно выкладываются видео с примерами использования A-Parser, а также следите за новостями в Twitter (https://twitter.com/a_parser').

Предыдущие сборники статей
Название: Re: A-Parser 1.1 - продвинутый парсер ПС, кейвордов, контента, показателей, 70+ парс
Отправлено: A-Parser Support от 25-07-2018, 12:07:25
Видео урок: Создание JS парсеров. Работа с SQLite

Продолжение цикла уроков по созданию JavaScript парсеров. В этом видео показано, как работать с базой данных SQLite в JS парсере.

(https://files.a-parser.com/img/h39aj_180723113239.png) (https://www.youtube.com/watch?v=-8plKZpHO4M)

В этом уроке рассмотрены:
- Знакомство с языком запросов SQL
- Создание простейшей базы данных SQLite при работе с JS-парсером
- Получение и запись данных в базу SQLite при работе с JS-парсером

Ссылки:
- http://www.sql-tutorial.ru/ru/content.html (http://www.sql-tutorial.ru/ru/content.html) - учебник по SQL
- http://samoychiteli.ru/document29118.html (http://samoychiteli.ru/document29118.html) - тоже учебник по SQL
- https://finance.i.ua/converter/ (https://finance.i.ua/converter/) - сайт, который использовался в качестве примера
- https://a-parser.com/resources/276/ (https://a-parser.com/resources/276/) - статья и готовый парсер

Оставляйте комментарии и подписывайтесь на наш канал на YouTube! (https://www.youtube.com/c/AParser_channel)
Название: Re: A-Parser 1.1 - продвинутый парсер ПС, кейвордов, контента, показателей, 70+ парс
Отправлено: A-Parser Support от 03-08-2018, 10:02:33
1.2.270 - новый парсер Rank::Curlie, множество доработок в Node.js функционале (https://a-parser.com/threads/4688/)

(https://files.a-parser.com/img/1.2.270.png)

Улучшения
Исправления в связи с изменениями в выдаче
Исправления
Название: Re: A-Parser 1.1 - продвинутый парсер ПС, кейвордов, контента, показателей, 70+ парс
Отправлено: A-Parser Support от 14-08-2018, 07:43:03
25-й сборник рецептов (https://a-parser.com/threads/4722/)
25-й сборник рецептов. В нем будет показан способ периодического парсинга с дозаписью результатов в таблицу, рассмотрен парсинг с помощью Node.js модуля Cheerio без использования регулярных выражений, а также показан парсер первой мобильной поисковой системы в Китае - Shenma. Поехали!

Периодическая проверка обратных ссылок с дозаписью результатов в таблицу (https://a-parser.com/resources/294/)
Пример решения одной из наиболее запрашиваемых задач - дозапись периодически получаемых результатов в одну и ту же таблицу. В качестве хранилища данных используется SQLite, при каждом запуске данные добавляются и выводятся в таблицу. Готовый пресет с комментариями - по ссылке выше.
(https://files.a-parser.com/img/ta9lr_180808165040.png)

Парсер поисковой системы Haosou (https://a-parser.com/resources/296/)
Как известно, в основе почти любого парсера используются регулярные выражения, реже - XPath. Работа с этими методами требует определенных знаний, что в свою очередь может вызывать некоторые сложности. Поэтому существуют и другие методы. Использование одного из них на примере парсинга популярного в Китае поисковика Haosou, показано по ссылке выше.
(https://files.a-parser.com/img/r4ztg_180813111825.png)

Парсер китайского поисковика Shenma (https://a-parser.com/resources/295/)
Еще один китайский поисковик в этом сборнике - Shenma. Это первая мобильная поисковая система в Китае, ориентирована в первую очередь на мобильные сайты. Пресет - по ссылке выше.
(https://files.a-parser.com/img/bcw8p_180813111311.png)

Еще больше различных рецептов в нашем Каталоге (https://a-parser.com/resources/)!
Предлагайте ваши идеи для новых парсеров здесь (https://a-parser.com/threads/3464/), лучшие будут реализованы и опубликованы.

Подписывайтесь на наш канал на Youtube (https://www.youtube.com/channel/UCvypGICrfCky8tPtebmIvQw) - там регулярно выкладываются видео с примерами использования A-Parser, а также следите за новостями в Twitter (https://twitter.com/a_parser).

Предыдущие сборники рецептов:
Название: Re: A-Parser 1.1 - продвинутый парсер ПС, кейвордов, контента, показателей, 70+ парс
Отправлено: A-Parser Support от 24-08-2018, 11:15:12
Видео урок: Создание JS парсеров. Реализация подстановки запросов и их многопоточной обработки. (https://a-parser.com/threads/4738/)
Продолжение цикла уроков по созданию JavaScript парсеров. В этом видео будет показано, как "на лету" добавлять запросы в задание и многопоточно их обрабатывать.
http://www.youtube.com/watch?v=X5EDrAdMSRk
В одной из наших статей  (https://a-parser.com/resources/261/)мы рассмотрели способ разработки парсера, который собирает ТОП 10 из выдачи поисковика, а затем по очереди парсит нужные данные по полученным ссылкам. Вроде все неплохо, но если у вас не 10 запросов, несколько тысяч? Задание будет выполняться очень долго, а время это самый драгоценный и не восполняемый ресурс.
К счастью в A-Parser есть такая замечательная вещь, как многоуровневый парсинг, который позволяет многократно увеличить скорость парсинга, и в этом видео мы рассмотрим как этой возможностью пользоваться.

В этом уроке рассмотрено:
Ссылки:
Оставляйте комментарии и подписывайтесь на наш канал на YouTube (https://www.youtube.com/c/AParser_channel)!
Название: Re: A-Parser 1.1 - продвинутый парсер ПС, кейвордов, контента, показателей, 70+ парс
Отправлено: A-Parser Support от 04-09-2018, 12:03:28
1.2.292 - новый парсер Яндекс ИКС, улучшения в работе с кодировками, оптимизации встроенных парсеров (https://a-parser.com/threads/4762/)
(https://files.a-parser.com/img/1.2.292.png)
Улучшения
Исправления в связи с изменениями в выдаче
Исправления
Название: Re: A-Parser 1.1 - продвинутый парсер ПС, кейвордов, контента, показателей, 70+ парс
Отправлено: goodloto1 от 04-09-2018, 14:41:43
Запарсить абсолютно всё можно?
Название: Re: A-Parser 1.1 - продвинутый парсер ПС, кейвордов, контента, показателей, 70+ парс
Отправлено: A-Parser Support от 04-09-2018, 14:51:17
Зависит от решаемой задачи, но в общем - можно парсить почти все :)
Название: Re: A-Parser 1.1 - продвинутый парсер ПС, кейвордов, контента, показателей, 70+ парс
Отправлено: A-Parser Support от 14-09-2018, 11:11:16
Сборник статей #5: собственный канал в Telegram и массовое добавление товаров в OpenCart (https://a-parser.com/threads/4783/)
В 5-м сборнике статей на реальном примере будет показано, как создать свой канал в Телеграме и полностью автоматизировать его наполнение контентом. Также мы продолжаем цикл статей по работе с OpenCart и во 2-й части будет рассмотрен вопрос массового добавления товаров. Как обычно, в каждой статье приложены готовые JS парсеры, используя которые, можно на реальных примерах изучить описанные методы и поэксперементировать с ними. Поехали!

Полноценный Telegram канал на базе A-Parser (https://a-parser.com/resources/300/)
В этой статье будет описан способ создания полноценного канала в Telegram c автоматизированным сбором контента и постингом сообщений через заданные интервалы. И конечно, все это на базе A-Parser. Все подробности, а также готовые пресеты - по ссылке выше.
(https://files.a-parser.com/img/2018-09-13_11.28.45.png)

Работаем с OpenCart. Часть 2. Массовое добавление товаров (https://a-parser.com/resources/302/)
Мы продолжаем цикл статей о заливке товаров в интернет-магазин на базе OpenCart. Во второй части будет рассмотрено массовое добавление товара. Подробности, а также пример готового парсера - по ссылке выше.
(https://files.a-parser.com/img/0iwja_180913140622.png)

Если вы хотите, чтобы мы более подробно раскрыли какой-то функционал парсера, у вас есть идеи для новых статей или вы желаете поделиться собственным опытом использования A-Parser (за небольшие плюшки :) ) - отписывайтесь здесь (https://a-parser.com/threads/3464/).

Подписывайтесь на наш канал на Youtube (http://www.youtube.com/c/AParser_channel) - там регулярно выкладываются видео с примерами использования A-Parser, а также следите за новостями в Twitter (https://twitter.com/a_parser).

Предыдущие сборники статей
Название: Re: A-Parser 1.1 - продвинутый парсер ПС, кейвордов, контента, показателей, 70+ парс
Отправлено: A-Parser Support от 25-09-2018, 12:06:24
Видео урок: Массовое добавление товаров в OpenCart (https://a-parser.com/threads/4798/)
Данный парсер является примером для разработки парсера работающего с OpenCart. Решение демонстрирует возможность сбора данных о товарах из стороннего сайта и заливку их на собственный сайт на базе OpenCart через API.
http://www.youtube.com/watch?v=G19jZyx39Tk
В этом уроке рассмотрены:

Статья и готовый пресет опубликованы в нашем Каталоге: https://a-parser.com/resources/302/ (https://a-parser.com/resources/302/)

Оставляйте комментарии и подписывайтесь на наш канал на YouTube! (https://www.youtube.com/c/AParser_channel)
Название: Re: A-Parser 1.1 - продвинутый парсер ПС, кейвордов, контента, показателей, 70+ парс
Отправлено: jina от 01-10-2018, 09:28:25
Мощный конечно функционал, особенно, если в связки с Пандорой. Интересно, есть где то видео уроки, как пользоваться с доргеном?
Название: Re: A-Parser 1.1 - продвинутый парсер ПС, кейвордов, контента, показателей, 70+ парс
Отправлено: A-Parser Support от 16-10-2018, 11:11:46
Интересно, есть где то видео уроки, как пользоваться с доргеном?
Видеоуроков по использованию доргена нет. В целом канал с видеоуроками доступен по этой ссылке
https://www.youtube.com/channel/UCvypGICrfCky8tPtebmIvQw


Добавлено: 16-10-2018, 11:12:24

Видео урок: Полноценный Telegram канал на базе A-Parser (https://a-parser.com/threads/4866/)
Это видео демонстрирует возможность создания полноценного Telegram канала на базе A-Parser. Парсер периодически и без вмешательства пользователя будет собирать контент и публиковать его на канале.
(https://files.a-parser.com/img/zc9ho_181015131430.png) (https://www.youtube.com/watch?v=q2XYojXHeDA)
В уроке рассмотрены:
Статья с подробным описанием процесса создания: https://a-parser.com/resources/300/ (https://a-parser.com/resources/300/)
Ссылки на готовые пресеты:
https://a-parser.com/resources/38/ (https://a-parser.com/resources/38/)
https://a-parser.com/resources/298/ (https://a-parser.com/resources/298/)
https://a-parser.com/resources/299/ (https://a-parser.com/resources/299/)
Оставляйте комментарии и подписывайтесь на наш канал на YouTube! (https://www.youtube.com/c/AParser_channel)
Название: Re: A-Parser 1.1 - продвинутый парсер ПС, кейвордов, контента, показателей, 70+ парс
Отправлено: A-Parser Support от 26-10-2018, 11:45:10
Сборник рецептов #26: мобильные версии сайтов, список регионов Яндекса и упоминания домена в индексе (https://a-parser.com/threads/4899/)
26-й сборник рецептов. В нем будут показаны: проверка наличия мобильной версии сайта через Bing, парсинг полного списка регионов Яндекса и способ поиска упоминаний домена в индексе поисковой системы. Также показан пример работы с Node.js модулем mysql2, который позволяет работать с MySQL базами данных. Поехали!

Проверка наличия мобильной версии через Bing (https://a-parser.com/resources/306/)
На сегодняшний день наличие мобильной версии является одним из важнейших критериев качества сайта. По данным различных организаций доля мобильного трафика уже давно превышает десктопный. Именно поэтому мобильная версия сайта позволяет увеличить посещаемость сайта, ведь большинство крупных поисковиков отдают предпочтение в выдаче сайтам, имеющим полноценную мобильную версию. Проверить наличие и соответствие стандартам можно с помощью небольшого пресета по ссылке выше.
(https://files.a-parser.com/img/4bqcm_181023235947.png)

Получение полного списка регионов Яндекса (https://a-parser.com/resources/307/)
Яндекс не публикует в открытом виде полного списка всех регионов, используемых в поиске. И как оказалось, найти полную и актуальную базу в интернете практически невозможно. Поэтому мы исправляем это и по ссылке выше публикуем JavaScript парсер, который позволяет собрать свежую и максимально полную базу регионов Яндекса.
(https://files.a-parser.com/img/2of3y_181024152530.png)

Проверка упоминаний домена в индексе Гугла (https://a-parser.com/resources/305/)
Иногда возникает задача по поиску упоминаний домена в индексе поисковой системы. Именно с такой задачей к нам обратился один из пользователей A-Parser. Поэтому по ссылке выше мы публикуем пресет, решающий данную задачу.
(https://files.a-parser.com/img/gwr92_181018190314.png)

Кроме этого:
Еще больше различных рецептов в нашем Каталоге! (https://a-parser.com/resources/)
Предлагайте ваши идеи для новых парсеров здесь (https://a-parser.com/threads/3464/), лучшие будут реализованы и опубликованы.

Подписывайтесь на наш канал на Youtube (https://www.youtube.com/channel/UCvypGICrfCky8tPtebmIvQw) - там регулярно выкладываются видео с примерами использования A-Parser, а также следите за новостями в Twitter (https://twitter.com/a_parser).
Название: Re: A-Parser 1.1 - продвинутый парсер ПС, кейвордов, контента, показателей, 70+ парс
Отправлено: A-Parser Support от 06-11-2018, 11:02:36
1.2.335 - новые парсеры картинок, оптимизации в JS парсерах, общие улучшения работы (https://a-parser.com/threads/4919/)
(https://files.a-parser.com/img/1.2.335.png)
Улучшения
Исправления в связи с изменениями в выдаче
Исправления
Название: Re: A-Parser 1.1 - продвинутый парсер ПС, кейвордов, контента, показателей, 70+ парс
Отправлено: A-Parser Support от 16-11-2018, 13:52:28
Видео урок: Массовое добавление товаров в OpenCart, часть 2 (https://a-parser.com/threads/4942/)

Это вторая часть из цикла видео уроков о парсинге товаров из стороннего сайта и заливке их на собственный сайт на базе OpenCart через API.

http://www.youtube.com/watch?v=yi35Xn48AuM

В этом уроке показано:
Первая часть: https://a-parser.com/threads/4798/ (https://a-parser.com/threads/4798/)
Статья и готовый пресет опубликованы в нашем Каталоге: https://a-parser.com/resources/302/ (https://a-parser.com/resources/302/)
Оставляйте комментарии и подписывайтесь на наш канал на YouTube (https://www.youtube.com/c/AParser_channel)!
Название: Re: A-Parser 1.1 - продвинутый парсер ПС, кейвордов, контента, показателей, 70+ парс
Отправлено: A-Parser Support от 23-11-2018, 10:45:29
(https://files.a-parser.com/img/blackfriday2018.jpg) (https://a-parser.com/)
Название: Re: A-Parser 1.1 - продвинутый парсер ПС, кейвордов, контента, показателей, 70+ парс
Отправлено: A-Parser Support от 04-12-2018, 06:39:45
Сборник рецептов #27: парсинг HH, сбор списка user-agent и парсинг Авито с записью в MySQL (https://a-parser.com/threads/4971/)
27-й сборник рецептов. В нем собраны рецепты для парсинга списка соискателей на hh.ru, сбора списка юзерагентов и парсинга Авито с записью результатов в MySQL базу данных. Также показан пример отправки файлов в POST запросе. Поехали!

Сбор списка соискателей на HeadHunter (https://a-parser.com/resources/309/)
HeadHunter - это один из самых популярных ресурсов для поиска работы. Соответственно, сбор списка соискателей может быть интересен рекрутерам для более эффективного анализа потенциальных кандидатов. Готовое решение для парсинга доступно по ссылке выше.
(https://files.a-parser.com/img/gxd1b_181106115235.png)

Получение списка user-agent (https://a-parser.com/resources/311/)
Сейчас существует много различных браузеров, которые работают на разных платформах. Многие сайты ограничивают работу со старыми браузерами, а некоторые не отдают контент даже при запросе с юзерагентом относительно нового браузера. В A-Parser можно задавать user-agent для запросов, также существует специальный инструмент, который позволяет при каждом запросе выбирать рандомный из заранее подготовленного списка. Пресет для парсинга таких списков, с возможностью фильтрации по различным параметрам, доступен по ссылке выше.
(https://files.a-parser.com/img/o60s7_181114181054.png)

Парсер Avito с записью в MySQL (https://a-parser.com/resources/313/)
Предыдущий пресет для парсинга Авито пользуется большой популярностью. Также наши пользователи часто спрашивают о возможности записи собранных результатов напрямую в базу данных. Поэтому мы подготовили JS парсер, который решает эту задачу. Как обычно, он доступен по ссылке выше.
(https://files.a-parser.com/img/lvi3y_181127232540.png)

Кроме этого:
Еще больше различных рецептов в нашем Каталоге (https://a-parser.com/resources/)!

Предлагайте ваши идеи для новых парсеров здесь (https://a-parser.com/threads/3464/), лучшие будут реализованы и опубликованы.

Подписывайтесь на наш канал на Youtube (https://www.youtube.com/channel/UCvypGICrfCky8tPtebmIvQw) - там регулярно выкладываются видео с примерами использования A-Parser, а также следите за новостями в Twitter (https://twitter.com/a_parser).
Название: Re: A-Parser 1.1 - продвинутый парсер ПС, кейвордов, контента, показателей, 70+ парс
Отправлено: A-Parser Support от 14-12-2018, 11:41:26
Видео урок: Разбираем методы для работы с API используя Postman (https://a-parser.com/threads/5009/)
В данном видео будет сделан краткий обзор некоторых методов API.
http://www.youtube.com/watch?v=wqp7cEc6ABg
В этом уроке рассмотрены:
Оставляйте комментарии и подписывайтесь на наш канал на YouTube! (https://www.youtube.com/c/AParser_channel)
Название: Re: A-Parser 1.1 - продвинутый парсер ПС, кейвордов, контента, показателей, 70+ парс
Отправлено: A-Parser Support от 26-12-2018, 11:44:04
1.2.360 - поддержка https/tls в Node.js модулях, парсинг мобильной выдачи Яндекса, 2 новых парсера (https://a-parser.com/threads/5028/)
(https://files.a-parser.com/img/1.2.360_NY.png)
 уходящем году одним из приоритетных направлений стало развитие JavaScript парсеров и функционала по работе с Node.js. Одним из финальных этапов стал данный релиз, в котором была реализована долгожданная поддержка https/tls в Node.js модулях. Также усилия были сосредоточены на повышении стабильности и производительности. В результате этого было сделано множество наработок, которые уже в первой половине 2019 года планируется выпустить в виде нового A-Parser 2.0, где будет много новых и крутых возможностей.
Команда A-Parser поздравляет всех с Новым годом и Рождеством! Мы желаем вам успехов в делах, прибыльных проектов и ярких идей. Пускай Новый 2019 год будет годом новых возможностей, все задуманное сбывается, а работа приносит удовольствие!
Спасибо что Вы с нами!!!
В новогоднем релизе, кроме снеговика:), было сделано следующее:
Улучшения
Исправления в связи с изменениями в выдаче
Исправления
Название: Re: A-Parser 1.1 - продвинутый парсер ПС, кейвордов, контента, показателей, 70+ парс
Отправлено: Stream111 от 26-12-2018, 12:04:08
И на фига козе баян?  >:(
Название: Re: A-Parser 1.1 - продвинутый парсер ПС, кейвордов, контента, показателей, 70+ парс
Отправлено: A-Parser Support от 05-01-2019, 13:16:04
Сборник статей #6: работа с API, сохранение в YML и мануал по подключению Node.js модулей (https://a-parser.com/threads/5055/)
Это 6-й сборник статей, и в нем мы разберемся, как подключать к парсеру Node.js модули, научимся сохранять собранные данные в формате YML, а также изучим работу с API на реальном примере с созданием простого приложения. Поехали!
Работаем с API, часть 1 (https://a-parser.com/resources/314/)
В этой статье на реальном примере будет показана работа с A-Parser через API. В результате будет создано простое приложение, которое будет получать позицию сайта по ключу в Гугл или Яндекс. Все подробности - по ссылке выше.
(https://files.a-parser.com/img/vnsiw_181209015926.png)

Выгрузка товаров для Я.Маркета в формате YML (https://a-parser.com/resources/282/)
YML (Yandex Market Language) - это стандарт представления данных, который используется для загрузки/выгрузки информации о товарах в Яндекс.Маркете. Используя А-Парсер, можно спарсить товары с различных сайтов и сохранить их в данном формате для дальнейшего импорта в Маркет. О том, как это сделать, можно почитать в статье по ссылке выше.
(https://files.a-parser.com/img/A-Parser__screen.jpg)

Подключение пакетов Node.js в A-Parser (https://a-parser.com/resources/317/)
Как известно, в A-Parser можно использовать Node.js модули для более эффективного парсинга. Поэтому, по ссылке выше мы опубликовали небольшой мануал по их установке и использованию.
(https://files.a-parser.com/img/rlazs_181224010614.png)

Если вы хотите, чтобы мы более подробно раскрыли какой-то функционал парсера, у вас есть идеи для новых статей или вы желаете поделиться собственным опытом использования A-Parser (за небольшие плюшки :) ) - отписывайтесь здесь (https://a-parser.com/threads/3464/).

Подписывайтесь на наш канал на Youtube (http://www.youtube.com/c/AParser_channel) - там регулярно выкладываются видео с примерами использования A-Parser, а также следите за новостями в Twitter (https://twitter.com/a_parser).

Предыдущие сборники статей
Название: Re: A-Parser 1.1 - продвинутый парсер ПС, кейвордов, контента, показателей, 70+ парс
Отправлено: A-Parser Support от 15-01-2019, 12:47:09
Сборник рецептов #28: скидки в Google Play, автоматизация парсинга WordStat и типы Яндекс подсказок (https://a-parser.com/threads/5076/)
28-й сборник рецептов. В нем будет показан способ автоматизации парсинга данных из Wordstat, пример парсинга информации о приложениях со скидками в Google Play, а также готовое решение для сбора подсказок из Яндекс вместе с их типами. Поехали!

Парсинг приложений со скидками в Google Play (https://a-parser.com/resources/298/)
Периодически в Google Play разработчики предлагают скидки на приложения, иногда на короткий срок платные становятся полностью бесплатными. С помощью A-Parser можно искать подобные предложения. Кроме этого, в этом парсере собирается множество дополнительных данных и используется сохранение в sqlite базу данных, поэтому его можно рассматривать как еще один пример работы с базами данных в А-Парсере. Готовое решение доступно в каталоге по ссылке выше.
(https://files.a-parser.com/img/3ro38_180913105232.png)

Парсер поисковых подсказок Яндекс (https://a-parser.com/resources/315/)
В A-Parser есть стандартный парсер Яндекс подсказок, который по заданным ключевым словам собирает подсказки. Но Яндекс классифицирует подсказки по различным типам, которые в свою очередь позволяют использовать их более рационально, применяя соответствующие фильтры. Стандартный парсер подсказок не возвращает типы, поэтому по ссылке выше опубликован JS парсер для сбора подсказок вместе с их типами.
(https://files.a-parser.com/img/190114_120340_00001.png)

Автоматизация парсинга Wordstat (https://a-parser.com/resources/318/)
В этом парсере реализован автоматический сбор данных из WordStat. При этом, парсер проверяет наличие необходимых для данной задачи аккаунтов, и если требуется - то автоматически регистрирует их. Такое решение может быть полезно для организации периодического парсинга WordStat в автоматическом режиме. Готовое решение - по ссылке выше.
(https://files.a-parser.com/img/xm1w8_190114121648.png)

Предлагайте ваши идеи для новых парсеров здесь (https://a-parser.com/threads/3464/), лучшие будут реализованы и опубликованы.
Подписывайтесь на наш канал на Youtube (https://www.youtube.com/channel/UCvypGICrfCky8tPtebmIvQw) - там регулярно выкладываются видео с примерами использования A-Parser, а также следите за новостями в Twitter (https://twitter.com/a_parser).
Название: Re: A-Parser 1.1 - продвинутый парсер ПС, кейвордов, контента, показателей, 70+ парс
Отправлено: bumer от 15-01-2019, 14:02:15
Софт очень стоящий, планируются какие-либо скидки ? у многих больших таких программ, типо зенопостер, хрумер и т.д. есть сезон скидок, сезон подарков. А у вас какая фишка?
 Может стоит сделать покупку в рассрочку, подумайте как-нить над этим.
Название: Re: A-Parser 1.1 - продвинутый парсер ПС, кейвордов, контента, показателей, 70+ парс
Отправлено: A-Parser Support от 25-01-2019, 08:11:12
Здравствуйте. Скидок нет и не планируется. В рассрочку приобрести тоже нельзя

Добавлено: 25-01-2019, 08:12:18

1.2.387 - улучшенный Просмотр логов, новый парсер Яндекс SafeBrowsing, улучшения в JS парсерах (https://a-parser.com/threads/5106/)
(https://files.a-parser.com/img/1.2.387.png)
Улучшения

Исправления в связи с изменениями в выдаче
Исправления
Название: Re: A-Parser 1.1 - продвинутый парсер ПС, кейвордов, контента, показателей, 70+ парс
Отправлено: A-Parser Support от 05-02-2019, 10:33:17
Сборник рецептов #29: язык ключевых слов, нормализация запросов и сбор тайтлов в глубину (https://a-parser.com/threads/5131/)
29-й сборник рецептов, в котором опубликован JS парсер для определения языка ключевых слов, предложен вариант решения для нормализации запросов, а также показано, как парсить карту сайту и одновременно собирать тайтлы страниц. Поехали!

Определение языка ключевого слова через Яндекс Переводчик (https://a-parser.com/resources/141/)
В A-Parser есть несколько встроенных парсеров для определения языка страницы. Но иногда возникают задачи отфильтровать список ключевых слов по одному или нескольким языкам. Определять язык текстовой строки довольно неплохо умеют различные переводчики, поэтому для решения задачи был выбран Яндекс Переводчик, и по ссылке выше доступен JavaScript парсер, реализующий определение языка ключевого слова.
(https://files.a-parser.com/img/fh617_190204133517.png)

Нормализатор запросов (https://a-parser.com/resources/319/)
При сборе семантического ядра часто возникает вопрос - какая форма запроса является наиболее частотной, например: "купить диван" или "диван купить". Если запрос 3-х или 4-хсловный, то вариантов становится еще больше. Решение такой задачи на базе парсера WordStat доступно в нашем Каталоге по ссылке выше.
(https://files.a-parser.com/img/hf3qn_190204135540.png)

Карта сайта и заголовки (https://a-parser.com/resources/239/)
Сбор карты сайта - это довольно простая задача для А-Парсера, которая решается встроенным парсером ссылок. Но иногда, кроме простого сбора ссылок, нужно еще и собрать тайтлы. И это можно делать параллельно с проходом по ссылкам в глубину. Готовый пресет доступен по ссылке выше.
(https://files.a-parser.com/img/8z4mj_190204140109.png)

Еще больше различных рецептов в нашем Каталоге (https://a-parser.com/resources/)!
Предлагайте ваши идеи для новых парсеров здесь (https://a-parser.com/threads/3464/), лучшие будут реализованы и опубликованы.

Подписывайтесь на  наш канал на Youtube  (https://www.youtube.com/channel/UCvypGICrfCky8tPtebmIvQw)- там регулярно выкладываются видео с примерами использования A-Parser, а также следите за новостями в Twitter (https://twitter.com/a_parser).
Название: Re: A-Parser 1.1 - продвинутый парсер ПС, кейвордов, контента, показателей, 70+ парс
Отправлено: A-Parser Support от 15-02-2019, 10:23:39
Видео урок: Создание JS парсеров. Использование Node.js модулей (https://a-parser.com/threads/5167/)
Продолжение цикла уроков по созданию JavaScript парсеров. В этом уроке показано как использовать Node.js модули при написании собственных парсеров.
http://www.youtube.com/watch?v=m-n43FuM_uM
В уроке рассмотрено:
Ссылки:
Оставляйте комментарии и подписывайтесь на наш канал на YouTube! (https://www.youtube.com/c/AParser_channel)
Название: Re: A-Parser 1.1 - продвинутый парсер ПС, кейвордов, контента, показателей, 70+ парс
Отправлено: A-Parser Support от 26-02-2019, 15:16:11
Сборник рецептов #30: оценка страниц, форматирование дат и парсинг дропов (https://a-parser.com/threads/5197/)
30-й сборник рецептов, в котором опубликован пресет для оценки сайтов с помощью open source инструмента Lighthouse, рассмотрен способ форматирования дат в парсере SE::Google::Trends SE::Google::Trends, а также показан способ поиска удаленных доменов. Поехали!

Оценка страниц с использованием Lighthouse (https://a-parser.com/resources/323/)
Еще один сервис по оценке сайтов, на этот раз от Google. С его помощью можно оценить веб-страницу по 4-м критериям: Performance, Accessibility, Best Practices и SEO. Пресет доступен в нашем Каталоге по ссылке выше.
(https://files.a-parser.com/img/gteue_190224203242.png)

Форматирование даты в парсере SE::Google::Trends (https://a-parser.com/resources/322/)
В A-Parser есть парсер, который позволяет собирать данные из Google Trends. Но даты в этом парсере возвращаются в формате Unixtime, что немного усложняет анализ получаемых данных. По ссылке выше показан простой способ преобразования дат к более удобному виду.
(https://files.a-parser.com/img/5wsu8_190224205023.png)

Парсер expired domains (https://a-parser.com/resources/320/)
Пресет для поиска и сбора дропов, а также их характеристик с сайта expireddomains.net. В качестве запросов нужно указывать ключевые слова, которые должны быть в доменном имени.
(https://files.a-parser.com/img/yplsa_190224210745.png)

Еще больше различных рецептов в нашем Каталоге (https://a-parser.com/resources/)!
Подписывайтесь на наш канал на Youtube (https://www.youtube.com/channel/UCvypGICrfCky8tPtebmIvQw) - там регулярно выкладываются видео с примерами использования A-Parser, а также следите за новостями в Twitter (https://twitter.com/a_parser).
Название: Re: A-Parser 1.1 - продвинутый парсер ПС, кейвордов, контента, показателей, 70+ парс
Отправлено: A-Parser Support от 08-03-2019, 10:42:51
1.2.434 - множество улучшений и новых возможностей в парсерах, оптимизация работы, поддержка SOCKS4 (https://a-parser.com/threads/5230/)
(https://files.a-parser.com/img/1.2.434.png)
Улучшения
Исправления в связи с изменениями в выдаче
Исправления
Название: Re: A-Parser 1.1 - продвинутый парсер ПС, кейвордов, контента, показателей, 70+ парс
Отправлено: A-Parser Support от 19-03-2019, 14:06:14
Сборник статей #7: сохранение в xlsx, работа с API и обзор методов автоматизации (https://a-parser.com/threads/5259/)
7-й сборник статей. В нем мы научимся сохранять результаты в виде Excel файлов, продолжим изучение работы через API, а также ознакомимся с 5-ю способами автоматизации последовательного выполнения нескольких заданий. Поехали!

Сохранение результатов в формате Excel (.xlsx) (https://a-parser.com/resources/325/)
Вывод результатов в виде xlsx файлов (стандартный формат Excel) - это очень популярный вопрос среди пользователей A-Parser. Ранее такой возможности не было, но с добавлением поддержки Node.js модулей это стало возможным. Поэтому мы публикуем статью, в которой показан реальный пример парсинга с сохранением в Excel. Ознакомиться со всеми подробностями можно по ссылке выше.
(https://files.a-parser.com/img/nm16w_190317135228.png)

Работаем с API, часть 2 (https://a-parser.com/resources/327/)
Это вторая часть из цикла статей по работе с A-Parser через API. В ней на примере парсинга e-mail будет рассмотрен метод addTask. Все детали - по ссылке выше.
(https://files.a-parser.com/img/m1jau_190317211446.png)

Обзор вариантов последовательного выполнения нескольких заданий (https://a-parser.com/resources/326/)
Очень часто возникают задачи, решение которых требует использования возможностей сразу нескольких разных парсеров и при этом результаты работы одного нужно передавать в следующий. А-Парсер - это очень гибкий инструмент, поэтому существует сразу несколько способов, как автоматизировать последовательное выполнение нескольких заданий, при этом максимально автоматизируя работу и повышая производительность. Описание всех возможных методов читайте в обзоре по ссылке выше.

Если вы хотите, чтобы мы более подробно раскрыли какой-то функционал парсера, у вас есть идеи для новых статей или вы желаете поделиться собственным опытом использования A-Parser (за небольшие плюшки :) ) - отписывайтесь здесь (https://a-parser.com/threads/3464/).

Подписывайтесь на наш канал на Youtube (http://www.youtube.com/c/AParser_channel) - там регулярно выкладываются видео с примерами использования A-Parser, а также следите за новостями в Twitter (https://twitter.com/a_parser).
Название: Re: A-Parser 1.1 - продвинутый парсер ПС, кейвордов, контента, показателей, 70+ парс
Отправлено: A-Parser Support от 29-03-2019, 11:42:20
Видео урок: Работа с API, часть 2 (https://a-parser.com/threads/5267/)
Вторая часть из цикла уроков о работе с API A-Parser. В видео на реальных примерах показана работа с методами addTask, getTaskState, getTaskConf и getTaskResultsFile.
http://www.youtube.com/watch?v=E7tsAvgxSmo
В этом уроке рассмотрены:
Документация по API: https://a-parser.com/wiki/user-api/

Также рекомендуем статью с несколькими интересными кейсами использования A-Parser от руководителя оптимизаторов в «Ашманов и партнёры» Никиты Тарасова: https://vc.ru/seo/61162-pravilno-sobrat-semanticheskoe-yadro-dlya-prodvizheniya-sayta

Оставляйте комментарии и подписывайтесь на наш канал на YouTube (https://www.youtube.com/c/AParser_channel)!
Название: Re: A-Parser 1.1 - продвинутый парсер ПС, кейвордов, контента, показателей, 70+ парс
Отправлено: A-Parser Support от 09-04-2019, 11:02:31
1.2.455 - поддержка puppeteer, все методы в Net::HTTP, обновление Bypass Cloudflare (https://a-parser.com/threads/5295/)
(https://files.a-parser.com/img/ap+puppeteer.png)
Начиная с версии 1.2.455 мы начинаем официальную поддержку Node.JS модуля puppeteer - средства автоматизации работы с браузером Chrome(Chromium), благодаря чему возможен полноценный рендеринг DOM с поддержкой JS. В качестве примера мы выкладываем парсер, который делает скриншоты сайтов в формате PNG, доступен выбор размера скриншота. Chromium может быть запущен как на Windows, так и на Linux серверах без GUI.
Улучшения

Исправления в связи с изменениями в выдаче
Исправления
Название: Re: A-Parser 1.1 - продвинутый парсер ПС, кейвордов, контента, показателей, 70+ парс
Отправлено: A-Parser Support от 19-04-2019, 11:12:21
Сборник рецептов #31: скидка -50% на XEvil, скриншоты страниц, подсказки Я.Маркета и правописание (https://a-parser.com/threads/5314/)
31-й сборник рецептов. В нем будет показан способ создания скриншотов веб-страниц, парсинг подсказок Яндекс Маркета, а также проверка правописания в Google. Кроме этого, только до конца апреля доступна возможность купить XEvil со скидкой. Далее обо всем по порядку.

Скидка -50% на покупку XEvil для существующих и новых пользователей A-Parser (https://a-parser.com/threads/5308/)
Для всех существующих и новых пользователей A-Parser действует скидка на покупку XEvil -50%!
XEvil - это простая, быстрая и удобная программа для полностью автоматического распознавания и обхода подавляющего числа капч и рекапч, без необходимости подключения каких-либо сторонних сервисов. Использование XEvil в связке с A-Parser позволяет значительно удешевить парсинг ресурсов, где необходимо разгадывать капчи/рекапчи, при этом практически не теряя в скорости.
Акция действует до конца апреля. Количество промокодов ограничено, поэтому не упустите возможность воспользоваться скидкой!
Для получения промокода на покупку XEvil пишите в тикеты.
(http://files.a-parser.com/img/ap+xevil-50.png)

JS::Chrome::ScreenshotsMaker (https://a-parser.com/resources/330/)
Возможность загружать страницы с полной обработкой всех скриптов, аналогично браузеру - это один из самых популярных фичреквестов для A-Parser. Поэтому буквально недавно была добавлена поддержка Node.js модуля puppeteer, с помощью которого теперь можно получать полностью отрендеренные страницы. И мы публикуем первый пример по работе с ним - парсер для создания скриншотов веб-страниц. Больше информации, пример работы и готовый парсер - все это доступно по ссылке выше.
(https://files.a-parser.com/img/screenshot_2019-04-08_12.42.06.png)

Парсер подсказок Яндекс.Маркет (https://a-parser.com/resources/328/)
Еще один парсер подсказок, на этот раз из Яндекс Маркета. Собираются подсказки, их популярность (частота), тип, а также, опционально, категория (включая полный путь родительских категорий). Готовый парсер, как обычно, доступен в нашем Каталоге по ссылке выше.
(https://files.a-parser.com/img/8kskt_190418110350.png)

Проверка правописания в Google (https://a-parser.com/resources/100/)
Данный парсер позволяет проверить ключевые слова через поиск Google на предмет опечаток и получить исправленные варианты. Готовый пресет доступен по ссылке выше.
(https://files.a-parser.com/img/aaih3_190418111655.png)

Еще больше различных рецептов в нашем Каталоге (https://a-parser.com/resources/)!
Предлагайте ваши идеи для новых парсеров здесь (https://a-parser.com/threads/3464/), лучшие будут реализованы и опубликованы.

Подписывайтесь на наш канал на Youtube (https://www.youtube.com/channel/UCvypGICrfCky8tPtebmIvQw) - там регулярно выкладываются видео с примерами использования A-Parser, а также следите за новостями в Twitter (https://twitter.com/a_parser).
Название: Re: A-Parser 1.1 - продвинутый парсер ПС, кейвордов, контента, показателей, 70+ парс
Отправлено: A-Parser Support от 30-04-2019, 13:31:28
Видео урок: Работа с MySQL (https://a-parser.com/threads/5329/)
Видеоурок по работе с MySQL в A-Parser. В нем на реальном примере показано как работать с базами данных MySQL, используя Node.js модуль mysql2.

http://www.youtube.com/watch?v=C9XLgv-0_Y4

В этом уроке рассмотрены:

Полезные ссылки:
Оставляйте комментарии и подписывайтесь на наш канал на YouTube! (https://www.youtube.com/c/AParser_channel)
Название: Re: A-Parser 1.1 - продвинутый парсер ПС, кейвордов, контента, показателей, 70+ парс
Отправлено: A-Parser Support от 10-05-2019, 13:03:18
Сборник рецептов #32: Yahoo Answers, контакты фрилансеров и оценка ключевых слов (https://a-parser.com/threads/5351/)

32-й сборник рецептов, в котором подобраны 3 JS парсера для парсинга Yahoo Answers, оценки ключевых слов и сбора контактных данных фрилансеров.

Парсер Yahoo Answers (https://a-parser.com/resources/332/)
Полноценный парсер сервиса Yahoo Answers, который по ключевым словам позволяет собирать непосредственно вопросы, ответы, а также их категории, дату создания и ссылки на страницы обсуждений.
(https://files.a-parser.com/img/5xq9g_190506181553.png)

Парсинг контактов фрилансеров (https://a-parser.com/resources/334/)
Парсер, который ищет по ключевым словам фрилансеров и собирает их контакты. Данные собираются с сервиса fl.ru.
(https://files.a-parser.com/img/f261w_190508215538.png)

Анализ ключевых слов (https://a-parser.com/threads/5351/)
Парсер для сервиса seranking.com. Кейворды оцениваются по 4-м показателям: частотность, стоимость клика (CPC), стоимость трафика и KEI. Также есть возможность собирать похожие, релевантные и подсказки к начальному запросу вместе с их показателями.
(https://files.a-parser.com/img/3znul_190508144508.png)

Еще больше различных рецептов в нашем Каталоге! (https://a-parser.com/resources/)
Предлагайте ваши идеи для новых парсеров здесь (https://a-parser.com/threads/3464/), лучшие будут реализованы и опубликованы.

Подписывайтесь на наш канал на Youtube (https://www.youtube.com/channel/UCvypGICrfCky8tPtebmIvQw) - там регулярно выкладываются видео с примерами использования A-Parser, а также следите за новостями в Twitter (https://twitter.com/a_parser).
Название: Re: A-Parser 1.1 - продвинутый парсер ПС, кейвордов, контента, показателей, 70+ парс
Отправлено: A-Parser Support от 21-05-2019, 11:58:43
1.2.484 - 4 новых парсера, улучшение работы и исправление существующих (https://a-parser.com/threads/5367/)
(https://files.a-parser.com/img/1.2.484.png)
Улучшения

Исправления в связи с изменениями в выдаче
Исправления
Название: Re: A-Parser 1.1 - продвинутый парсер ПС, кейвордов, контента, показателей, 70+ парс
Отправлено: A-Parser Support от 31-05-2019, 11:40:45
Видео урок: Получение уведомлений в Telegram об окончании срока регистрации доменов (https://a-parser.com/threads/5383/)
В этом видеоуроке будет показано, как настроить периодическую проверку окончания срока регистрации доменов, и получать уведомления в телеграм, если он меньше заданного количества дней.
http://www.youtube.com/watch?v=6zACZH_1QWk
В уроке рассмотрено:
Полезные ссылки:
Оставляйте комментарии и подписывайтесь на наш канал на YouTube! (https://www.youtube.com/c/AParser_channel)

(https://files.a-parser.com/img/btn_AP_TG.png) (https://telegram.me/joinchat/B52bKz_xVDH2GDiEU1MPsQ)
Название: Re: A-Parser 1.1 - продвинутый парсер ПС, кейвордов, контента, показателей, 70+ парс
Отправлено: A-Parser Support от 11-06-2019, 11:26:44
1.2.503 - обновление JavaScript движка и множество улучшений (https://a-parser.com/threads/5395/)
(https://files.a-parser.com/img/1.2.503.png)
Улучшения
Исправления в связи с изменениями в выдаче
Исправления
(https://files.a-parser.com/img/btn_AP_TG.png) (https://telegram.me/joinchat/B52bKz_xVDH2GDiEU1MPsQ)
Название: Re: A-Parser 1.1 - продвинутый парсер ПС, кейвордов, контента, показателей, 70+ парс
Отправлено: A-Parser Support от 21-06-2019, 12:27:17
Сборник рецептов #33: парсинг Google карт, сбор вопросов из поиска, перевод текстов целиком (https://a-parser.com/threads/5423/)
33-й сборник рецептов, в котором мы будем собирать данные из Google maps в указанной местности, спарсим блок вопросов и ответов в поиске Гугла и научимся использовать файлы целиком в качестве запросов. Поехали!

Сбор всех организаций в определенной местности (https://a-parser.com/resources/336/)
Начиная с версии 1.2.482 в A-Parser появились парсеры карт Google и Яндекс. Принцип работы обоих одинаков - в настройках указываются координаты точки и зум, парсер собирает результаты поиска по ключевым словам в этой точке и области вокруг нее, ограниченной зумом. Но если стоит задача собрать данные, например, со всего города, то для ее решения нужно указывать диапазон координат и "заставить" парсер пройтись по ним. Как это сделать, а также пример пресета - все это показано по ссылке выше.
(https://files.a-parser.com/img/b8o1c_190619122130.png)

Парсер собирающий вопросы и ответы из выдачи Google (https://a-parser.com/resources/337/)
Google по некоторым запросам показывает в поисковой выдаче блок вопросов и ответов People also ask (Похожие запросы). Наши пользователи периодически интересуются, как можно парсить этот блок, получая отдельно вопросы и ответы на них. Поэтому мы публикуем в нашем каталоге пример такого парсера, а забрать его можно по ссылке выше.
(https://files.a-parser.com/img/o5ugn_190620111544.png)

Использование файлов целиком в качестве запросов (https://a-parser.com/resources/338/)
Общеизвестно, что в А-Парсере каждая строка в исходном файле - это отдельный запрос. Но существуют задачи, когда необходимо использовать все содержимое файла как один запрос, игнорируя разбивку на строки. Благодаря JavaScript парсерам такая возможность есть и по ссылке выше опубликован пример парсера, который получает все содержимое файла, переводит его на заданный язык и сохраняет в новый файл.
(https://files.a-parser.com/img/9wqxu_190619152424.png)

Еще больше различных рецептов в нашем Каталоге (https://a-parser.com/resources/)!
Предлагайте ваши идеи для новых парсеров здесь, лучшие будут реализованы и опубликованы.
Подписывайтесь на наш канал на Youtube (https://www.youtube.com/channel/UCvypGICrfCky8tPtebmIvQw) - там регулярно выкладываются видео с примерами использования A-Parser, а также следите за новостями в Twitter (https://twitter.com/a_parser).

(https://files.a-parser.com/img/button_a-parser_350.png) (https://telegram.me/joinchat/B52bKz_xVDH2GDiEU1MPsQ)
Название: Re: A-Parser 1.1 - продвинутый парсер ПС, кейвордов, контента, показателей, 70+ парс
Отправлено: A-Parser Support от 02-07-2019, 15:05:40
Видео урок: Макросы подстановок (https://a-parser.com/threads/5453/)
В этом видеоуроке мы изучим один из инструментов для работы с запросами - макросы подстановок. С их помощью можно значительно увеличивать количество запросов, листать страницы и многое другое.
http://www.youtube.com/watch?v=FTdPl-YXGik
В уроке рассмотрено:

Полезные ссылки:
Оставляйте комментарии и подписывайтесь на наш канал на YouTube! (https://www.youtube.com/c/AParser_channel)

(https://files.a-parser.com/img/button_a-parser_400.png) (https://telegram.me/joinchat/B52bKz_xVDH2GDiEU1MPsQ)
Название: Re: A-Parser 1.1 - продвинутый парсер ПС, кейвордов, контента, показателей, 70+ парс
Отправлено: A-Parser Support от 12-07-2019, 12:05:57
1.2.534 - 6 новых парсеров, поддержка Node.js в tools.js, множество исправлений в парсерах (https://a-parser.com/threads/5466/)
(https://files.a-parser.com/img/1.2.534.png)
Улучшения
Исправления в связи с изменениями в выдаче
Исправления
(https://files.a-parser.com/img/button_a-parser_small.png) (https://telegram.me/joinchat/B52bKz_xVDH2GDiEU1MPsQ)
Название: Re: A-Parser 1.1 - продвинутый парсер ПС, кейвордов, контента, показателей, 70+ парс
Отправлено: A-Parser Support от 23-07-2019, 11:25:24
Сборник статей #8: ссылки с GET параметрами, скачивание Google документов, очистка очереди через API (https://a-parser.com/threads/5483/)
8-й сборник статей. В нем мы научимся парсить ссылки с GET параметрами, искать в поиске Google и скачивать документы, а также узнаем как очищать очередь заданий через API. Поехали!

Сбор ссылок с GET параметрами (https://a-parser.com/resources/346/)
В техническую поддержку часто задают вопрос, как собирать ссылки с GET параметрами для поиска SQL уязвимостей. Поэтому, по ссылке выше мы расскажем как это сделать, используя стандартный парсер Google.
(https://files.a-parser.com/img/gagz5_190722113529.png)

Поиск и скачивание Google документов (https://a-parser.com/resources/344/)
За последнее время уже несколько раз появлялись новости о том, что Google индексирует пользовательские документы, размещенные в их одноименном сервисе и открытые для доступа по ссылке. Соответственно все эти файлы становятся доступны в поиске. И пока Google разбирается с этим, по ссылке выше мы рассказываем как можно искать и скачивать такие документы.
(https://files.a-parser.com/img/j8v5t_190720165716.png)

Работаем с API, часть 3 (https://a-parser.com/resources/339/)
Третья и заключительная часть из цикла статей по работе с A-Parser через API. В ней на примере очистки очереди задач будет рассмотрена работа со вспомогательными запросами, которые позволяют работать с очередью заданий. Все детали - по ссылке выше.

Если вы хотите, чтобы мы более подробно раскрыли какой-то функционал парсера, у вас есть идеи для новых статей или вы желаете поделиться собственным опытом использования A-Parser (за небольшие плюшки :) ) - отписывайтесь здесь (https://a-parser.com/threads/3464/).

Подписывайтесь на наш канал на Youtube (http://www.youtube.com/c/AParser_channel) - там регулярно выкладываются видео с примерами использования A-Parser, а также следите за новостями в Twitter (https://twitter.com/a_parser).

(https://files.a-parser.com/img/button_a-parser_small.png) (https://telegram.me/joinchat/B52bKz_xVDH2GDiEU1MPsQ)
Название: Re: A-Parser 1.1 - продвинутый парсер ПС, кейвордов, контента, показателей, 70+ парс
Отправлено: A-Parser Support от 02-08-2019, 10:53:41
Сборник рецептов #34: оценка трафика, парсинг Ahrefs и информация об IP адресах (https://a-parser.com/threads/5495/)

34-й сборник рецептов, в котором опубликован пресет для оценки количества трафика на сайтах, парсер Ahrefs через API и пресет для парсинга информации об IP адресах. Поехали!

Чек трафика сайта (https://a-parser.com/resources/236/)
Пресет для проверка трафика сайта через сервис siteworthtraffic.com. Собираются данные о количестве уникальных постетителей и просмотров, а также о доходе с рекламы. Оценка трафика на сайтах может быть полезна для фильтрации списка сайтов по критерию прибыльности и популярности. Пресет доступен по ссылке выше.
(https://files.a-parser.com/img/9syo2_190731155238.png)

Парсер Ahrefs на основе Ahrefs API (https://a-parser.com/resources/348/)
Парсер для сбора данных из популярного сервиса Ahrefs через их официальное API. Собирается множество данных, которые позволяют оценивать домены по различным характеристикам. Для использования нужен API ключ, который приобретается отдельно.
(https://files.a-parser.com/img/g5ykb_190725184610.png)

Парсинг подсети и организации по IP (https://a-parser.com/resources/190/)
Небольшой пресет для сбора информации об IP адресе, а именно: подсеть, организация, страна и город. Данные собираются из сервиса whoer.net.
(https://files.a-parser.com/img/3lgog_190731154735.png)

Еще больше различных рецептов в нашем Каталоге (https://a-parser.com/resources/)!
Предлагайте ваши идеи для новых парсеров здесь (https://a-parser.com/threads/3464/), лучшие будут реализованы и опубликованы.

Подписывайтесь на наш канал на Youtube (https://www.youtube.com/channel/UCvypGICrfCky8tPtebmIvQw) - там регулярно выкладываются видео с примерами использования A-Parser, а также следите за новостями в Twitter (https://twitter.com/a_parser).

Все сборники рецептов (https://a-parser.com/search/22332632/?q=%D0%A1%D0%B1%D0%BE%D1%80%D0%BD%D0%B8%D0%BA+%D1%80%D0%B5%D1%86%D0%B5%D0%BF%D1%82%D0%BE%D0%B2&t=post&o=date&g=1&c%5Btitle_only%5D=1&c%5Bnode%5D=14)

(https://files.a-parser.com/img/button_a-parser_small_500.png) (https://telegram.me/joinchat/B52bKz_xVDH2GDiEU1MPsQ)
Название: Re: A-Parser 1.1 - продвинутый парсер ПС, кейвордов, контента, показателей, 70+ парс
Отправлено: A-Parser Support от 20-08-2019, 18:25:15
1.2.570 - новые парсеры API::Server::Redis и SE::Startpage, улучшения в существующих парсерах (https://a-parser.com/threads/5523/)
(https://files.a-parser.com/img/1.2.570.png)
Улучшения
Исправления в связи с изменениями в выдаче
Исправления
(https://files.a-parser.com/img/button_a-parser_small_550.png) (https://telegram.me/joinchat/B52bKz_xVDH2GDiEU1MPsQ)
Название: Re: A-Parser 1.1 - продвинутый парсер ПС, кейвордов, контента, показателей, 70+ парс
Отправлено: A-Parser Support от 30-08-2019, 14:05:31
Видео урок: Поиск страниц контактов (https://a-parser.com/threads/5553/)
В этом видео уроке рассмотрен пример решения задачи по поиску страниц контактов у заданного списка сайтов. Также парсится тайтл и все это сохраняется в CSV файл.
http://www.youtube.com/watch?v=1ZjbFj1x6IQ
В уроке рассмотрено:
Оставляйте комментарии и подписывайтесь на наш канал на YouTube (https://www.youtube.com/c/AParser_channel)!

(https://files.a-parser.com/img/button_a-parser_small_550.png) (https://telegram.me/joinchat/B52bKz_xVDH2GDiEU1MPsQ)
Название: Re: A-Parser 1.1 - продвинутый парсер ПС, кейвордов, контента, показателей, 70+ парс
Отправлено: A-Parser Support от 10-09-2019, 10:21:04
Сборник рецептов #35: комментарии на Youtube, контакты на сайтах и японский Yahoo (https://a-parser.com/threads/5572/)
35-й сборник результатов, где мы будем собирать комментарии из Youtube, искать контакты (телефоны и почты) на сайтах, а также парсить японскую выдачу Yahoo. Поехали!
Парсинг комментариев из Youtube (https://a-parser.com/resources/352/)
Представляем вашему вниманию JS парсер комментариев для видео на Youtube. С его помощью можно собирать тексты комментариев, а также информацию об авторах комментариев индивидуально для каждого видео. Также реализована возможность указывать количество страниц с комментарими, что позволяет при необходимости ограничить их сбор и тем самым увеличить скорость работы.
(https://files.a-parser.com/img/mctw5_190909115641.png)

Извлекаем телефоны, начинающиеся на 3 с помощью HTML::EmailExtractor
Пресет, в котором показано, как с помощью HTML::EmailExtractor HTML::EmailExtractor собирать контакты со страниц сайтов. Данный пресет предназначен для сбора e-mail и телефонов, начинающихся с 3 (Украина), но при необходимости можно немного изменить регулярные выражения и собирать телефоны других стран.
(https://files.a-parser.com/img/80rx0_190909130311.png)

SE::Yahoo::JP (https://a-parser.com/resources/351/)
JS парсер для парсинга японской выдачи Yahoo. Используется домен search.yahoo.co.jp. Собираются ссылки, анкоры и сниппеты, а также есть возможность задать количество страниц для парсинга.
(https://files.a-parser.com/img/dxwci_190909122454.png)

Еще больше различных рецептов в нашем Каталоге (https://a-parser.com/resources/)!

Предлагайте ваши идеи для новых парсеров здесь, лучшие будут реализованы и опубликованы.

Подписывайтесь на наш канал на Youtube (https://www.youtube.com/channel/UCvypGICrfCky8tPtebmIvQw) - там регулярно выкладываются видео с примерами использования A-Parser, а также следите за новостями в Twitter (https://twitter.com/a_parser).

(https://files.a-parser.com/img/button_a-parser_small_600.png) (https://telegram.me/joinchat/B52bKz_xVDH2GDiEU1MPsQ)
Название: Re: A-Parser 1.1 - продвинутый парсер ПС, кейвордов, контента, показателей, 70+ парс
Отправлено: A-Parser Support от 20-09-2019, 21:53:02
1.2.595 - новый парсер Ahrefs, инструмент для создания CSV и много других улучшений (https://a-parser.com/threads/5597/)

(https://files.a-parser.com/img/1.2.595.png)

Улучшения
Исправления в связи с изменениями в выдаче
Исправления
(https://files.a-parser.com/img/button_a-parser_small_600.png)  (https://telegram.me/joinchat/B52bKz_xVDH2GDiEU1MPsQ)
Название: Re: A-Parser 1.1 - продвинутый парсер ПС, кейвордов, контента, показателей, 70+ парс
Отправлено: A-Parser Support от 01-10-2019, 11:16:17
Видео урок: Парсинг Google Maps для сбора всех организаций в определенной местности (https://a-parser.com/threads/5616/)

В этом видео уроке рассмотрен способ сбора данных об организациях в указанной местности из Google Maps, используя встроенный парсер Гугл карт. Также показано как определить необходимые координаты на карте и задать их в парсере.

http://www.youtube.com/watch?v=61Q5gm28dFs

В уроке рассмотрено:

Полезные ссылки:
Оставляйте комментарии и подписывайтесь на наш канал на YouTube! (https://www.youtube.com/c/AParser_channel)

(https://files.a-parser.com/img/button_a-parser_small_650.png)  (https://telegram.me/joinchat/B52bKz_xVDH2GDiEU1MPsQ)
Название: Re: A-Parser 1.1 - продвинутый парсер ПС, кейвордов, контента, показателей, 70+ парс
Отправлено: A-Parser Support от 30-10-2019, 14:30:46
Сборник статей #9: анализ страниц сайта, парсинг всех страниц сайта из индекса и проверка запросов (https://a-parser.com/resources/356/)

9-й сборник статей. В нем мы разберемся, как делать пресеты для анализа всех страниц сайта, научимся парсить все ссылки сайта из индекса ПС и будем проверять существование запросов. Поехали!

Создание пресета для анализа страниц сайта (https://a-parser.com/resources/356/)
Анализ страниц на сайте - это один из самых популярных кейсов использования А-Парсера. При этом можно собирать очень много различных параметров, начиная от проверки доступности и заканчивая поиском определенных слов на странице.
О том, как сделать простой анализатор сайта и пойдет речь в этой статье.
(https://files.a-parser.com/img/jawyq_191029121649.png)

Парсинг разными способами максимум результатов из индекса поисковых систем (https://a-parser.com/resources/355/)
Парсинг из индекса поисковых систем всех страниц сайта - это еще один популярный кейс для A-Parser. ПС ограничивают кол-во результатов по одному запросу, поэтому нужно как-то обходить это ограничение. Как это сделать - описано в нашей статье.
(https://files.a-parser.com/img/7gyeh_191029192345.png)

Проверка существования запросов (https://a-parser.com/resources/354/)
Пресет из этого примера позволяет проверить базу ключевых слов и определить, был ли запрос одноразовым без постоянного спроса или нет. Тем самым появляется возможность отфильтровать семантику и оставить только "хорошие" запросы. Больше деталей, а также готовый пресет - по ссылке выше.
(https://files.a-parser.com/img/2672s_191030120713.png)


Если вы хотите, чтобы мы более подробно раскрыли какой-то функционал парсера, у вас есть идеи для новых статей или вы желаете поделиться собственным опытом использования A-Parser (за небольшие плюшки :) ) - отписывайтесь здесь (https://a-parser.com/threads/3464/).

Подписывайтесь на наш канал на Youtube (http://www.youtube.com/c/AParser_channel) - там регулярно выкладываются видео с примерами использования A-Parser, а также следите за новостями в Twitter (https://twitter.com/a_parser).

Предыдущие сборники статей
(https://files.a-parser.com/img/button_a-parser_small_750.png)  (https://telegram.me/joinchat/B52bKz_xVDH2GDiEU1MPsQ)
Название: Re: A-Parser 1.1 - продвинутый парсер ПС, кейвордов, контента, показателей, 70+ парс
Отправлено: A-Parser Support от 12-11-2019, 15:41:57
1.2.678 - оптимизация работы с прокси, улучшения во встроенных парсерах, исправления ошибок (https://a-parser.com/threads/5701/)

(https://files.a-parser.com/img/1.2.678..png)

Улучшения

Исправления в связи с изменениями в выдаче
Исправления

(https://files.a-parser.com/img/button_a-parser_small_800.png) (https://telegram.me/joinchat/B52bKz_xVDH2GDiEU1MPsQ)
Название: Re: A-Parser 1.1 - продвинутый парсер ПС, кейвордов, контента, показателей, 70+ парс
Отправлено: A-Parser Support от 22-11-2019, 16:32:44
Видео урок: Парсинг сайта в глубину на основе парсера HTML::LinkExtractor (http://"https://a-parser.com/threads/5717/")

В этом видео уроке рассмотрен способ создания пресета для анализа сайта в глубину.

http://www.youtube.com/watch?v=QD2COZ6aIx0

В уроке рассмотрено:
Полезные ссылки:
Оставляйте комментарии и подписывайтесь на наш канал на YouTube! (http://'https://www.youtube.com/c/AParser_channel')

(https://files.a-parser.com/img/button_a-parser_small_800.png)   (http://'https://telegram.me/joinchat/B52bKz_xVDH2GDiEU1MPsQ')
Название: Re: A-Parser 1.1 - продвинутый парсер ПС, кейвордов, контента, показателей, 70+ парс
Отправлено: A-Parser Support от 05-12-2019, 05:53:00
Сборник рецептов #36: уникальность текста, парсер GitHub, посещаемость сайтов, результаты розыгрыша (http://'https://a-parser.com/threads/5756/')

36-й сборник рецептов, в котором опубликованы парсер для проверки текстов на уникальность, парсер GitHub и парсер для получения информации о посещаемости сайтов. А также список обновленных пресетов из нашего Каталога.

Но, в первую очередь хотим поделиться результатами розыгрыша, который был проведен в связи с Черной пятницей. Мы разыграли 5 лицензий на А-Парсер среди всех новых участников нашего telegram чата (http://'https://telegram.me/joinchat/B52bKz_xVDH2GDiEU1MPsQ'), которые присоединились к нему в период проведения акции. Результаты розыгрыша в видео:

http://www.youtube.com/watch?v=rZ8wwlBn74Y


А теперь перейдем непосредственно к сборнику.

Проверка текста на уникальность (http://'https://a-parser.com/resources/360/')

Задача проверки текстов на уникальность является одной из самых частых для копирайтеров. Возможность осуществлять такую проверку предоставляют много ресурсов. И парсер для одного из таких сервисов опубликован по ссылке выше.

(https://files.a-parser.com/img/7w2s9_191128181818.png)

Парсер Github (http://'https://a-parser.com/resources/359/')

Согласно Википедии, GitHub - это крупнейший веб-сервис для хостинга IT-проектов и их совместной разработки. Поэтому мы не могли обойти его стороной и публикуем парсер данных о репозиториях при поиске по ключевому слову на данном ресурсе.

(https://files.a-parser.com/img/7k62o_191128123550.png)

Парсинг количества трафика на сайтах (http://'https://a-parser.com/resources/361/')

Этот парсер позволяет получать информацию о просмотрaх и посещениях страниц за день, месяц и год. В качестве источника данных используется один из известных сервисов.

(https://files.a-parser.com/img/npth3_191202155600.png)

Кроме этого были обновлены:
Еще больше различных рецептов в нашем Каталоге (http://'https://a-parser.com/resources/')!
Предлагайте ваши идеи для новых парсеров здесь (http://'https://a-parser.com/threads/3464/'), лучшие будут реализованы и опубликованы.

Подписывайтесь на наш канал на Youtube (http://'https://www.youtube.com/channel/UCvypGICrfCky8tPtebmIvQw') - там регулярно выкладываются видео с примерами использования A-Parser, а также следите за новостями в Twitter (http://'https://twitter.com/a_parser').

Все сборники рецептов (https://a-parser.com/search/32036916/?q=%D0%A1%D0%B1%D0%BE%D1%80%D0%BD%D0%B8%D0%BA+%D1%80%D0%B5%D1%86%D0%B5%D0%BF%D1%82%D0%BE%D0%B2&t=post&o=date&g=1&c=1&c=14)

(https://files.a-parser.com/img/button_a-parser_small_1200.png) (http://'https://telegram.me/joinchat/B52bKz_xVDH2GDiEU1MPsQ')
Название: Re: A-Parser 1.1 - продвинутый парсер ПС, кейвордов, контента, показателей, 70+ парс
Отправлено: A-Parser Support от 14-12-2019, 07:19:33
1.2.713 - новые парсеры: Telegram и eBay, оптимизации во встроенных парсерах, новые инструменты (https://a-parser.com/threads/5780/)

(https://files.a-parser.com/img/1.2.713.png)

Улучшения


Исправления в связи с изменениями в выдаче
Исправления
(https://files.a-parser.com/img/button_a-parser_small_1100.png)  (https://telegram.me/joinchat/B52bKz_xVDH2GDiEU1MPsQ)
Название: Re: A-Parser 1.1 - продвинутый парсер ПС, кейвордов, контента, показателей, 70+ парс
Отправлено: A-Parser Support от 24-12-2019, 14:56:19
Сборник рецептов #37: парсинг Twitter, поиск и скачивание картинок, парсинг групп в Telegram (https://a-parser.com/threads/5799)

37-й сборник рецептов. В него вошли: парсер Twitter, который умеет собирать сообщения, их авторов и т.п.; JS парсер, в котором объединены поиск и скачивание картинок; а также 2 пресета для парсинга Telegram, которые демонстрируют возможности по сбору данных из публичных групп.

Парсер постов из Twitter (https://a-parser.com/resources/364/)
Публикуем парсер, который по ключевому слову парсит данные из сообщений в Twitter. Собираются имя и логин автора, текст сообщения, дата публикация, количество лайков, ответов и ретвитов. Есть возможность указать количество страниц для парсинга.

(https://files.a-parser.com/img/j3ox3_191221193628.png)

JS::ImagesFromSE (https://a-parser.com/resources/365/)
Ранее мы уже публиковали JavaScript парсер, в котором объединены парсинг выдачи ПС и парсинг текста со страниц. Теперь представляем вашему вниманию JS парсер, в котором объединены поиск и скачивание картинок.

(https://files.a-parser.com/img/jah8t_191223125310.png)

Пресеты для парсинга публичных групп в Telegram
Начиная с версии 1.2.709 в А-Парсер был добавлен (https://a-parser.com/img/parsers/telegram-groupscraper.png) Telegram::GroupScraper (https://a-parser.com/wiki/telegram-groupscraper/). Для демонстрации его возможностей мы опубликовали в Каталоге 2 пресета:


Еще больше различных рецептов в нашем Каталоге (https://a-parser.com/resources/)!
Предлагайте ваши идеи для новых парсеров здесь (https://a-parser.com/threads/3464/), лучшие будут реализованы и опубликованы.

Подписывайтесь на наш канал на Youtube (https://www.youtube.com/channel/UCvypGICrfCky8tPtebmIvQw) - там регулярно выкладываются видео с примерами использования A-Parser, а также следите за новостями в Twitter (https://twitter.com/a_parser).

Все сборники рецептов (https://a-parser.com/search/22332632/?q=%D0%A1%D0%B1%D0%BE%D1%80%D0%BD%D0%B8%D0%BA+%D1%80%D0%B5%D1%86%D0%B5%D0%BF%D1%82%D0%BE%D0%B2&t=post&o=date&g=1&c)

(https://files.a-parser.com/img/button_a-parser_small_1100.png)  (https://telegram.me/joinchat/B52bKz_xVDH2GDiEU1MPsQ)
Название: Re: A-Parser 1.1 - продвинутый парсер ПС, кейвордов, контента, показателей, 70+ парс
Отправлено: A-Parser Support от 04-01-2020, 09:46:55
Сборник статей #10: отслеживание цен с уведомлением, парсинг характеристик товаров, редиректы (https://a-parser.com/threads/5812/)

10-й сборник статей, в котором будет показано, как с помощью А-Парсера получать уведомления в Телеграм об изменении цен на товары, как парсить характеристики товаров и выводить их в виде удобной таблицы, а также подробно описана работа с редиректами.

Периодический мониторинг цен с уведомлением в Telegram (https://a-parser.com/resources/367/)

В этой статье пошагово описан процесс создания парсера, с помощью которого можно отслеживать изменение цен товаров. При этом парсер будет присылать уведомление в Телеграм, а также можно легко добавить поддержку других сайтов.

(https://files.a-parser.com/img/wud8v_191230180827.png)

Сбор характеристик товара (https://a-parser.com/resources/368/)

Одной из частых задач для А-Парсера является сбор характеристик товаров в интернет-магазинах. И если сам парсинг совсем не проблема, то формирование итоговой таблицы, при условии, что характеристики должны быть распределены по отдельным столбцам, вызывает вопросы. Поэтому, в данной статье будет описан способ такого парсинга.

(https://files.a-parser.com/img/sstoc_200103092306.png)

Всё о редиректах (https://a-parser.com/resources/370/)

Большая справочная статья, посвященная тематике редиректов.

(https://files.a-parser.com/img/pii2f_200103134519.png)

Если вы хотите, чтобы мы более подробно раскрыли какой-то функционал парсера, у вас есть идеи для новых статей или вы желаете поделиться собственным опытом использования A-Parser (за небольшие плюшки :) ) - отписывайтесь здесь (https://a-parser.com/threads/3464/).

Подписывайтесь на наш канал на Youtube (http://www.youtube.com/c/AParser_channel) - там регулярно выкладываются видео с примерами использования A-Parser, а также следите за новостями в Twitter (https://twitter.com/a_parser).

Предыдущие сборники статей


(https://files.a-parser.com/img/button_a-parser_small_1100.png)  (https://telegram.me/joinchat/B52bKz_xVDH2GDiEU1MPsQ)
Название: Re: A-Parser 1.1 - продвинутый парсер ПС, кейвордов, контента, показателей, 70+ парс
Отправлено: A-Parser Support от 20-01-2020, 07:53:46
Видео урок: Парсинг тематических доменов из Google и получение различных параметров по доменам (https://a-parser.com/threads/5852/)

В этом видео уроке рассмотрен способ создания пресета для парсинга тематических доменов по ключевой фразе из поисковой выдачи Google, и получение для доменов различных параметров.

http://www.youtube.com/watch?v=Aed7jSVr8k8

В уроке рассмотрено:

Полезные ссылки:


Оставляйте комментарии и подписывайтесь на наш канал на YouTube! (https://www.youtube.com/c/AParser_channel)

(https://files.a-parser.com/img/button_a-parser_small_1200.png) (https://telegram.me/joinchat/B52bKz_xVDH2GDiEU1MPsQ)
Название: Re: A-Parser 1.1 - продвинутый парсер ПС, кейвордов, контента, показателей, 70+ парс
Отправлено: A-Parser Support от 28-01-2020, 20:06:45
1.2.752 - полноценная поддержка Node.js, функция Memory Saver, оптимизация производительности (https://a-parser.com/threads/5877/)

(https://files.a-parser.com/img/1.2.752.png)

Улучшения


Исправления в связи с изменениями в выдаче


Исправления


(https://files.a-parser.com/img/button_a-parser_small_1200.png) (https://telegram.me/joinchat/B52bKz_xVDH2GDiEU1MPsQ)
Название: Re: A-Parser 1.1 - продвинутый парсер ПС, кейвордов, контента, показателей, 70+ парс
Отправлено: A-Parser Support от 08-02-2020, 03:37:40
Сборник рецептов #38: парсер Яндекс.Кью, парсер сайтов из Яндекс.Радар и определение типов сайтов (https://a-parser.com/threads/5898/)

38-й сборник рецептов. В нем опубликованы: парсер сервиса вопросов-ответов Яндекс.Кью, парсер для сбора сайтов из Яндекс.Радара, а также парсер для определения типа сайта.

Парсер Яндекс Кью (https://a-parser.com/resources/376/)

Яндекс.Кью - это сервис вопросов-ответов, запущенный в конце 2019 года. Он объединил в себе несколько других сервисов, поэтому уже на момент запуска обладал большой базой информации. Мы не могли оставить это просто так и публикуем парсер для сбора данных из этого сервиса.

(https://files.a-parser.com/img/bvd7vsvdbs848sj.png)

Парсинг сайтов из Яндекс.Радар (https://a-parser.com/resources/375/)

Яндекс.Радар - это сравнительно новый сервис Яндекса, который в отчасти заменил ранее популярный Яндекс.Каталог. Это большой каталог популярных в рунете сайтов с данными о их посещаемости и некоторой информацией о посетителях. Мы подготовили парсер, с помощью которого можно собрать список сайтов с необходимыми фильтрами.

(https://files.a-parser.com/img/6j5q6_200204160703.png)

Определение типа сайта по Яндекс Радару (https://a-parser.com/resources/374/)

И еще один парсер для Яндекс.Радар от нашего пользователя. С его помощью можно определять типы сайтов, если они есть в базе Яндекс.Радара.

(https://files.a-parser.com/img/925f798dbf.jpg)

Еще больше различных рецептов в нашем Каталоге (https://a-parser.com/resources/)!
Предлагайте ваши идеи для новых парсеров здесь (https://a-parser.com/threads/3464/), лучшие будут реализованы и опубликованы.

Подписывайтесь на наш канал на Youtube (https://www.youtube.com/channel/UCvypGICrfCky8tPtebmIvQw) - там регулярно выкладываются видео с примерами использования A-Parser, а также следите за новостями в Twitter (https://twitter.com/a_parser).

Все сборники рецептов (https://a-parser.com/search/22332632/?q=%D0%A1%D0%B1%D0%BE%D1%80%D0%BD%D0%B8%D0%BA+%D1%80%D0%B5%D1%86%D0%B5%D0%BF%D1%82%D0%BE%D0%B2&t=post&o=date)

(https://files.a-parser.com/img/button_a-parser_small_1200.png) (https://telegram.me/joinchat/B52bKz_xVDH2GDiEU1MPsQ)
Название: Re: A-Parser 1.1 - продвинутый парсер ПС, кейвордов, контента, показателей, 70+ парс
Отправлено: A-Parser Support от 19-02-2020, 16:10:14
Сборник статей #11: анализ содержимого картинок, добавление ссылок в индекс Google и поиск RSS лент (https://a-parser.com/threads/5927/)

11-й сборник статей, в котором рассказано, как в А-Парсере анализировать содержимое картинок, добавлять страницы своих сайтов в индекс Google и искать RSS ленты необходимой тематики.

Фильтрация картинок по их содержимому (https://a-parser.com/resources/380/)

В этой статье на примере поиска картинок с определенным содержимым, показана работа с Google Vision. С помощью "компьютерного зрения" для каждого изображения присваивается набор меток, который описывает содержимое.

(https://files.a-parser.com/img/bvh74g37fa.png)

Инструкция по использованию Google Indexing API (https://a-parser.com/resources/378/)

В данной статье рассмотрена работа с Google Indexing API, который позволяет владельцам сайтов напрямую уведомлять Google о добавлении или удалении страниц. Таким образом ваш сайт будет быстрее просканирован Google, что способствует повышению качества трафика.

(https://files.a-parser.com/img/3p4a3_200214180729.png)

Поиск и сбор rss лент (https://a-parser.com/resources/381/)

В этой статье рассмотрен простой пример поиска ссылок на rss ленты по заданной тематике. Решение состоит из 3-х пресетов, каждый из которых отвечает за определенный этап работы.

(https://files.a-parser.com/img/cbyuefeteg.png)

Если вы хотите, чтобы мы более подробно раскрыли какой-то функционал парсера, у вас есть идеи для новых статей или вы желаете поделиться собственным опытом использования A-Parser (за небольшие плюшки :) ) - отписывайтесь здесь (https://a-parser.com/threads/3464/).

Подписывайтесь на наш канал на Youtube (http://www.youtube.com/c/AParser_channel) - там регулярно выкладываются видео с примерами использования A-Parser, а также следите за новостями в Twitter (https://twitter.com/a_parser).

Все сборники статей (https://a-parser.com/search/35422295/?q=%D0%A1%D0%B1%D0%BE%D1%80%D0%BD%D0%B8%D0%BA+%D1%81%D1%82%D0%B0%D1%82%D0%B5%D0%B9&t=post&o=date&g=1)

(https://files.a-parser.com/img/site/tg_chat_btn.png) (https://telegram.me/joinchat/B52bKz_xVDH2GDiEU1MPsQ)
Название: Re: A-Parser 1.1 - продвинутый парсер ПС, кейвордов, контента, показателей, 70+ парс
Отправлено: A-Parser Support от 04-03-2020, 07:39:47
1.2.799 - новый парсер для поиска картинок, улучшения в существующих парсерах (https://a-parser.com/threads/5944/)

(https://files.a-parser.com/img/1.2.799.png)

Улучшения


Исправления в связи с изменениями в выдаче


Исправления



(https://files.a-parser.com/img/site/tg_chat_btn.png) (https://telegram.me/joinchat/B52bKz_xVDH2GDiEU1MPsQ)
Название: Re: A-Parser 1.1 - продвинутый парсер ПС, кейвордов, контента, показателей, 70+ парс
Отправлено: A-Parser Support от 16-03-2020, 14:08:31
Парсинг booking.com с помощью A-Parser (http://"https://a-parser.com/threads/5983/")

В этом видео уроке рассмотрен парсинг ресурса booking.com, получение результатов поиска квартир и отелей на сайте. Подробную информацию о них будем получать при помощи парсера  (https://a-parser.com/img/parsers/net-http.png) Net::HTTP (http://"https://a-parser.com/wiki/net-http/")

http://www.youtube.com/watch?v=A5pgDiRwntw
 

В видео рассмотрено

Полезные ссылки
Оставляйте комментарии и подписывайтесь на наш канал на YouTube! (http://'https://www.youtube.com/c/AParser_channel')
(https://files.a-parser.com/img/button_a-parser_small_1400.png) (http://'https://telegram.me/joinchat/B52bKz_xVDH2GDiEU1MPsQ')
Название: Re: A-Parser 1.1 - продвинутый парсер ПС, кейвордов, контента, показателей, 70+ парс
Отправлено: A-Parser Support от 28-03-2020, 09:49:50
Сборник рецептов #39: бот-опросник, парсер hotline.ua и copart.com (https://a-parser.com/threads/6019/)

Представляем вашему вниманию 39-й сборник рецептов, в который вошли:
Телеграмм бот опросник (https://a-parser.com/resources/387/)

Данный бот позволяет организовать ежедневный опрос сотрудников, при этом список вопросов можно гибко менять. Все настройки берутся из Google таблицы, а также туда пишутся ответы по каждому сотруднику.
Также, этот пример демонстрирует возможность создания телеграмм бота на базе A-Parser и работу с Google таблицами.

http://www.youtube.com/watch?v=ypgj2T1axi0

Парсер hotline.ua (https://a-parser.com/resources/385/)

hotline.ua - это самый большой агрегатор цен в Украине. С его помощью можно мониторить и анализировать цены на товары у конкурентов или искать наиболее выгодные предложения среди большого количества интернет-магазинов.

(https://files.a-parser.com/img/3my28_200325142307.png)

Парсер copart.com (https://a-parser.com/resources/386/)

Copart является одним из крупнейших интернет аукционов, специализирующихся на продаже новых и б/у автомобилей. По официальной информации каждый день на аукционе выставляется на продажу более 150 000 транспортных средств.

(https://files.a-parser.com/img/ehamm_200325190721.png)

Еще больше различных рецептов в нашем Каталоге (https://a-parser.com/resources/)!
Предлагайте ваши идеи для новых парсеров здесь (https://a-parser.com/threads/3464/), лучшие будут реализованы и опубликованы.

Подписывайтесь на наш канал на Youtube (https://www.youtube.com/channel/UCvypGICrfCky8tPtebmIvQw) - там регулярно выкладываются видео с примерами использования A-Parser, а также следите за новостями в Twitter (https://twitter.com/a_parser).

Все сборники рецептов (https://a-parser.com/search/22332632/?q=%D0%A1%D0%B1%D0%BE%D1%80%D0%BD%D0%B8%D0%BA+%D1%80%D0%B5%D1%86%D0%B5%D0%BF%D1%82%D0%BE%D0%B2&t=post&o=date)

(https://files.a-parser.com/img/button_a-parser_small_1400.png) (https://telegram.me/joinchat/B52bKz_xVDH2GDiEU1MPsQ)