Сборник рецептов #23: категории сайтов, парсинг в YML и преобразование дат [url=https://a-parser.com/threads/4517/]
23-й сборник рецептов. В нем мы будем парсить категории сайтов из Google, научимся формировать файлы YML, а также разберемся, как парсить даты и преобразовывать их в единый формат. Поехали!
Получение категорий сайтов из Google [url=https://a-parser.com/resources/285/]
Категоризация сайтов - довольно актуальная задача, но существует немного сервисов, которые могут ее решить. Поэтому, по ссылке выше можно взять небольшой парсер, который позволяет получать категории сайтов из Google.
Выгрузка товаров в формате YML[url=https://a-parser.com/resources/284/]
YML - это стандарт, разработанный Яндексом для работы с Маркетом. По своей сути, это файлы, схожие с XML, в которых содержится информация о товарах в интернет-магазине. Данный формат обеспечивает регулярное автоматическое обновление каталога на Яндекс.Маркет и позволяет отражать все актуальные изменения (наличие, цена, появление новых товаров). Пример парсинга интернет-магазина и сохранения собранных данных в YML можно посмотреть по ссылке выше.
Парсим Google новости с датой и преобразуем ее[url=https://a-parser.com/resources/281/]
В поисковой выдаче Google возле новостей публикуется дата. Как правило, это могут быть метки "
10 ч. назад" или "
26 мая 2018 г.". Иногда может возникнуть задача спарсить все даты и привести их к единому виду. Как именно это сделать, можно узнать по ссылке выше.
Кроме этого:- Сохранение произвольных данных в сессиях - новый функционал по работе с сессиями [url=https://a-parser.com/resources/280/]
- Сохранение больших файлов напрямую на диск - возможность сохранять файлы в JS парсерах напрямую, минуя шаблонизатор [url=https://a-parser.com/resources/279/]
Еще больше различных рецептов в нашем Каталоге! [url=https://a-parser.com/resources/]
Предлагайте ваши идеи для новых парсеров здесь, лучшие будут реализованы и опубликованы. [url=https://a-parser.com/threads/3464/]
Подписывайтесь на Наш канал на Youtube [url=https://www.youtube.com/channel/UCvypGICrfCky8tPtebmIvQw] - там регулярно выкладываются видео с примерами использования A-Parser, а также следите за новостями в Twitter [url=https://twitter.com/a_parser].
Предыдущие сборники рецептов:- Сборник рецептов #1: Определяем CMS, оцениваем частотность ключевых слов и парсим Вконтакте [url=http://a-parser.com/threads/1250/]
- Сборник рецептов #2: собираем форумы для XRumer, парсим email со страниц контактов [url=http://a-parser.com/threads/1328/]
- Сборник рецептов #3: мобильные сайты, несколько парсеров, позиции ключевых слов [url=http://a-parser.com/threads/1660/]
- Сборник рецептов #4: поиск в выдаче, парсинг интернет-магазина и скачиваем файлы [url=http://a-parser.com/threads/1674/]
- Сборник рецептов #5: ссылки из JS, паблик прокси и карта сайта [url=http://a-parser.com/threads/1705/]
- Сборник рецептов #6: парсим базу номеров телефонов и сохраняем результаты красиво [url=http://a-parser.com/threads/1737/]
- Сборник рецептов #7: парсим RSS, качаем картинки и фильтруем результат по заголовкам [url=http://a-parser.com/threads/1778/]
- Сборник рецептов #8: парсим 2GIS, Google translate и подсказки Youtube [url=http://a-parser.com/threads/1809/]
- Сборник рецептов #9: проверяем сезонность ключевых слов и их полезность [url=http://a-parser.com/threads/1830/]
- Сборник рецептов #10: пишем кастомный парсер поисковика и парсим дерево категорий [url=http://a-parser.com/threads/1881/]
- Сборник рецептов #11: парсим Авито, работаем с JavaScript, анализируем тексты и участвуем в акции! [url=http://a-parser.com/threads/1938/]
- Сборник рецептов #12: парсим Instagram, собираем статистику и делаем свои парсеры подсказок [url=http://a-parser.com/threads/2240/]
- Сборник рецептов #13: сохраняем результат в файл дампа SQL и знакомимся с $tools.query [url=http://a-parser.com/threads/2460/]
- Сборник рецептов #14: используем XPath, анализируем сайты и создаем комбинированные пресеты [url=http://a-parser.com/threads/2613/]
- Сборник рецептов #15: анализируем скорость и юзабилити сайтов, парсим Яндекс.Картинки и Baidu [url=http://a-parser.com/threads/2712/]
- Сборник рецептов #16: парсинг OpenSiteExplorer с авторизацией, Яндекс.Каталога и Яндекс.Новостей [url=https://a-parser.com/threads/2808/]
- Сборник рецептов #17: картинки из Flickr, язык ключевых слов, список лайков в ВК [url=https://a-parser.com/threads/3544/]
- Сборник рецептов #18: скриншоты сайтов, lite выдача Яндекса и проверка сайтов [url=https://a-parser.com/threads/3862/]
- Сборник рецептов #19: публикация сообщений в Wordpress, парсинг Chrome Webstore и AliExpress [url=https://a-parser.com/threads/3910/]
- Сборник рецептов #20: автообновление цен в ИМ, анализ текстов и регистрация аккаунтов [url=https://a-parser.com/threads/4074/]
- Сборник рецептов #21: уведомления в Telegram из A-Parser, мультифильтр и парсинг IMDb [url=https://a-parser.com/threads/4318/]
- Сборник рецептов #22: проверка индексации в нескольких ПС, многоуровневый парсинг и поиск сабдоменов [url=https://a-parser.com/threads/4405/]