Часто задаваемые вопросы

Общий

Парсинг, сбор или извлечение - это процесс получения всей информации с какого-либо общедоступного сайта. Он автоматизирует ручной экспорт данных.

Сбор и извлечение общедоступных данных защищены Первой поправкой к Конституции США. Апелляционный суд девятого округа постановил, что автоматический сбор общедоступных данных не нарушает Закон о компьютерном мошенничестве и злоупотреблениях (CFAA). Тем не менее, вам следует обратиться за консультацией к адвокату по вашему конкретному вопросу, чтобы соблюсти законы вашей юрисдикции.

Проверить Документация API или посетите GitHub страницу, чтобы получить представление о том, как вы можете интегрировать сервисы с вашим кодом. Проверьте блог.

Платежи и подписки

Когда вы запускаете задачу и у вас нет активной подписки, будет создана новая подписка.

Вы можете прекратить подписку в любой момент на страница профиля или он будет завершен автоматически через один месяц.

Счет будет создан на основе использования услуги в течение подписка период (30 дней). Цены указаны на страница.

Уровень бесплатного пользования - это объем использования, который вы можете использовать бесплатно каждый месяц. Например, у некоторого продукта X есть уровень бесплатного пользования с 500 запросами в месяц. Это означает, что любое использование продукта ниже 500 запросов в течение месяца будет бесплатным.

Когда подписка будет завершена, вы получите счет за использование услуги в период подписки.

Если вы не можете произвести оплату в течение 3 дней, система попытается списать с вас средства автоматически.

Вы можете увидеть свое текущее использование на страница профиля «Текущие подписки». В конце подписки вы получите счет, основанный на этом использовании, соответственно с Цены.

Парсер Google Maps

Иногда Google добавляет другие категории к вашим поисковым запросам. Например, при поиске ресторанов вы можете увидеть бары, кофейни и т. д.

Outscraper предоставляет вам два инструмента, которые вы можете использовать для удаления этих категорий.

  1. Установите флажок «Категории цитат». Категории будут заключены в кавычки «». Оператор "" обычно используется, когда вы хотите, чтобы Google возвращал только те компании, которые точно соответствуют условиям вашей категории.
  2. Отфильтруйте результаты, применив фильтры к задаче извлечения. Чтобы избежать пустых результатов, убедитесь, что вы знакомы со значениями полей, прежде чем использовать фильтры с оператором «содержит».
Флажок категорий цитат парсера Google Maps

1. Флажок "Категории предложений".

фильтры результатов парсера Google Maps

2. Фильтры результатов

Бывают случаи, когда предопределенных местоположений и / или категорий недостаточно. Используйте параметры «Пользовательские местоположения» и / или «Пользовательские категории», чтобы вставить нужные категории и / или местоположения.

Есть ограничение Google Maps, которое показывает только до 400-500 мест за один поисковый запрос. Это может быть проблемой, когда в одной категории больше компаний. Например, для запроса «Рестораны, Бруклин».

Чтобы преодолеть это, мы предлагаем разделить локацию на подобласти. Например, используя почтовые индексы:
"Рестораны, Бруклин 11203",
"Рестораны, Бруклин 11211",
”Рестораны, Бруклин 11215,

Или используя запросы с подкатегориями:

«Азиатские рестораны, Бруклин»,

«Итальянские рестораны, Бруклин»,

«Мексиканские рестораны, Бруклин»,

Установите флажок «Использовать запросы» и введите запросы.

Чтобы заставить Google искать только определенные компании, заключите термин в кавычки "". В ” “ Оператор обычно используется вокруг стоп-слов (слов, которые в противном случае Google проигнорировал бы) или когда вы хотите, чтобы Google возвращал только те страницы, которые точно соответствуют вашим условиям поиска.

После нажатия кнопки «Извлечь данные…» вы увидите оценку задачи и запросы.

Рекомендуется нажать и открыть несколько запросов, чтобы проверить, как это выглядит на сайте Google Maps.

Есть две вещи, которым вы должны следовать, чтобы контролировать ожидаемое количество результатов.

1. Количество организаций на количество запросов - лимит организаций, которые можно взять из одного запроса.

2. Количество запросов - количество поисковых запросов, которые вы собираетесь сделать.

Бот сделает 6 запросов для извлечения данных из 2 категорий и 3 мест.

Следовательно, итоговая сумма будет не более 480 организаций (лимит 80 * 6 запросов).

Вы можете удалить дубликаты в одном задании, установив флажок "Убрать дубликаты".

Да, вы можете избавиться от дубликатов, используя флажок "Убрать дубликаты" (расширенные параметры). Кроме того, вы можете избавиться от них самостоятельно, используя поля "google_id" или "place_id" в качестве уникальных идентификаторов для места.

Точное количество результатов станет известно только после извлечения.

Вы можете использовать «Ограничение на общее количество мест», чтобы ограничить окончательное количество извлекаемых результатов.

Да. Вы можете использовать следующую ссылку в качестве запроса "https://www.google.com/maps/search/real+estate+agency/@41.4034,2.1718413,17z", где можно указать запрос (real+estate+agency), координаты (41.4034,2.1718413) и уровень масштабирования (17z). Вы можете найти эти значения при посещении Google Maps.

Также вы можете использовать параметр "координаты", если вы используете API.

Блог

Связаться с Нами

Вопросы, особые потребности, проблемы ... Всегда рады вас слышать.