Spis treści
Skrobak danych Map Google
Narzędzie do pobierania danych z Google Maps to jedna z usług firmy Outscraper w zakresie scrapingu. Outscraper umożliwia łatwe pobieranie danych publicznych z Google Maps bez żadnych ograniczeń.
Aby w pełni wykorzystać możliwości Google Maps Data Scraper, należy dokładnie ustawić parametry i filtry. Outscraper oferuje również usługi wzbogacania, aby przenieść skrobanie danych na wyższy poziom. Przed utworzeniem zadania scrapingowego zalecamy zapoznanie się z przewodnikiem dotyczącym wszystkich tych ustawień.
Parametry podstawowe
Podstawowe parametry są najbardziej krytycznymi ustawieniami do skrobania poprawnych docelowych firm/miejsc. Dokładne parametry zmniejszają ilość nieistotnych i zduplikowanych rekordów w pliku wyników.
Lokalizacja, limity i opcje duplikatów muszą być ustawione wyraźnie oprócz kategorii w podstawowych parametrach.
Kategorie
- Wybór kategorii. Google Maps ma ponad 5.000 kategorii. Kategorie te są dostępne w postaci gotowej listy na pulpicie nawigacyjnym.
- Możesz wybrać dowolne kategorie bezpośrednio z listy lub skorzystać z “Opcja ”Kategorie niestandardowe”.
- Custom Categories. Umożliwia określenie kategorii z wyjątkiem kategorii predefiniowanych. Języki inne niż angielski mogą mieć bardzo różne kategorie. Możesz użyć "Kategorii niestandardowych" do wyszukiwania w tych językach i różnych kategoriach.
Służy również do wyszukiwania nazw. Na przykład “Mcdonald’s”. Nie jest to kategoria, ale wyszukiwanie według nazwy zwróci wyniki.
- Exact Match Option. Czasami Mapy Google mogą dodać inne kategorie do wyników wyszukiwania.
Na przykład, chcesz szukaj "restauracja tajska" w dowolnym regionie. Jeśli nie ma wielu "tajskich restauracji" w wyszukiwanym obszarze, "japońskie restauracje" i "wietnamskie restauracje" również pojawią się w wynikach. Jeśli nie użyjesz opcji "Dokładne dopasowanie", wszystkie te restauracje zostaną znalezione w pliku wyników skrobania. Jeśli wolisz użyć opcji "Dokładne dopasowanie", Outscraper wyeliminuje pozostałe i doda do listy tylko "restaurację tajską".
Działa tylko w przypadku języka EN oraz przy użyciu gotowa lista kategorii.
Lokalizacje
- Wybór lokalizacji. Podobnie jak w przypadku Google Maps, podczas tworzenia zadania można wybrać dowolny kraj, miasto i region. Aby ułatwić wybór, dostępna jest gotowa lista. Jeśli poszukiwanej lokalizacji nie ma na liście, można skorzystać z opcji “Lokalizacje niestandardowe”.
- Niestandardowe lokalizacje. W tej opcji można określić lokalizacje w formacie “kod pocztowy + miasto + kraj”. Możliwe jest również użycie sformułowania “w pobliżu Los Angeles, CA, USA”.
- Wykorzystanie kodów pocztowych. Kody pocztowe powinny być używane do głębokiego skanowania i skrobania. Aby podać przykład, istnieją setki restauracji w Brooklynie w Nowym Jorku. Niestety, nie wszystkie te restauracje są wymienione w wynikach wyszukiwania Google Maps z jednym zapytaniem wyszukiwania.
Google Maps w wynikach jednego wyszukiwania pokazuje maksymalnie 500 restauracji.
I oczywiście, ponieważ Outscraper scrapuje również wyniki wyszukiwania dostarczane przez Google Maps, nie wszystkie te restauracje znajdą się w pliku wyników przy jednym zapytaniu.
Kody pocztowe są używane do tego scenariusza. Pozwala na szczegółowe wyszukiwanie i skrobanie obszaru. Generuje wiele zapytań wyszukiwania z kombinacją kodów zip i miast. Na przykład:
"restauracja, 11201, NY, USA"
"restauracja, 11202, NY, USA"
"restauracja, 11203, NY, USA"Użyj tej opcji, aby zeskrobać każde miejsce w obszarze bez pomijania żadnego miejsca.
Po więcej zapraszam do lektury: Jak zeskrobać gęsto zaludnione obszary i kategorie z Map Google?
*Korzystając z tej opcji, zawsze należy wybrać opcję “Usuń duplikaty”.
Limity i opcje
- Limit wyników ogółem. Ta opcja określa całkowitą liczbę wyników w pliku wyników zadania. Nawet jeśli potencjalna objętość zadania jest duża, po ustawieniu limitu na 100, proces skrobania zatrzymuje się po osiągnięciu 100 miejsc.
Jeśli limit jest ustawiony na 0, skrobanie trwa do końca zadania. Przy 0, w pliku wynikowym nie będzie limitu.
- Usuń duplikaty. Mapy Google mogą pokazywać te same miejsca/biznesy na różnych stronach w tych samych wynikach wyszukiwania. Może to powodować zduplikowane rekordy w pliku wyników. Ponieważ Outscraper wydobywa dane, które widać na Mapach Google.
W drugim przypadku Mapy Google mogą pokazywać te same wyniki w różnych zapytaniach wyszukiwania z różnymi, ale powiązanymi kategoriami. Wyszukiwanie "Bary, Nowy Jork" i wyszukiwanie "Restauracje, Nowy Jork" może pokazać te same wyniki. Jeśli w zadaniu wybrane są dwie lub więcej kategorii, istnieje duża szansa na zduplikowane wyniki w powiązanych kategoriach.
Opcja "Drop duplicates" powinna być zaznaczona, aby uniknąć tej sytuacji. Jeśli opcja "Drop duplicates" nie zostanie wybrana, zduplikowane wyniki zostaną umieszczone w pliku wyników i zostaną rozliczone.
- Zignoruj. Bez maili. Ta opcja pomijania ma zastosowanie wyłącznie w przypadku dodania usługi “Emails & Contacts Scraper”.
Usuwa z pliku wynikowego miejsca, które nie mają co najmniej jednego adresu e-mail. Wyświetlane są wyłącznie miejsca/firmy posiadające adresy e-mail. Jest to idealne rozwiązanie dla osób, które chcą pozyskać adresy e-mail z Google Maps na potrzeby marketingu e-mailowego.
* Nie będziesz rozliczany za ignorowane rekordy (bez posiadania e-maili).
Usługi wzbogacania
Istnieją 4 usługi wzbogacające, które współpracują z usługą Google Maps Data Scraper. Usługi te można wybrać z listy rozwijanej. Każda usługa wzbogacania ma inne możliwości i ceny.
Gdy usługi wzbogacające zostaną dodane do zadania skrobania, wszystkie dane wyodrębnione przez usługi wzbogacające znajdą się w tym samym pliku wynikowym.
- Emails & Contacts Scraper. Ta usługa rozszerzająca umożliwia pobieranie adresów e-mail i danych kontaktowych za pośrednictwem Google Maps.
Narzędzie Google Maps Data Scraper najpierw pobiera ogólne dane dotyczące miejsc i firm. Dane te obejmują również informacje o stronach internetowych. Usługa Emails & Contacts Scraper wykorzystuje te informacje i wyodrębnia z nich adresy e-mail, dane kontaktowe oraz konta w mediach społecznościowych.
* Dodanie tej usługi wzbogacającej do zadania aktywuje opcje "Ignoruj bez maili" i "Zrzuć duplikaty maili".
"Ignoruj bez maili" opcja zapewnia, że tylko firmy z adresem mailowym są umieszczane w pliku wyników.
"Zrzuć duplikaty email" opcja służy do usuwania z pliku wynikowego firm z tym samym adresem email. Firmy posiadające wiele oddziałów mają tę samą stronę internetową, więc wyodrębnione z oddziałów adresy e-mail mogą być takie same. Dzięki tej opcji pozostaje tylko 1 rekord, a pozostałe duplikaty są porzucane. W ten sposób zapobiega się nadmiernemu użyciu i uzyskuje się w ten sposób czysty plik wynikowy.
Aby uzyskać więcej informacji na temat wyodrębniania wiadomości e-mail i kontaktów: Jak wyodrębnić wiadomości e-mail z Map Google?
Dowiedz się, jak usługa "Emails & Contacts Scraper" może znaleźć kontakty i e-maile z różnych źródeł: Znajdowanie kontaktów i e-maili w Google Places
Video Tutorial: Jak skrobać e-maile, telefony, kontakty i linki Social Media z dowolnych stron?
- Walidator e-maili. Usługa wzbogacająca "Emails Validator" służy do walidacji emaili wyekstrahowanych z usługi "Emails & Contacts Scraper". Waliduje format emaila, sprawdza czy email znajduje się na czarnej liście, sprawdza rekordy DNS, oraz sprawdza czy email istnieje na serwerze poprzez wykonywanie zapytań SMTP.
* Aby usługa wzbogacania danych “Emails Validator” działała, należy ją dodać do zadania wraz z usługą “Emails & Contacts Scraper”.
- Wzbogacacz telefonów. Służy do uzyskania dodatkowych szczegółów o numerach telefonów wyodrębnionych z Google Maps. Pokazuje typy przewoźników, oraz nazwy i zatwierdza numery telefonów.
- Wzbogacacz danych spółek amerykańskich. Ta usługa wzbogacania pozwala zebrać więcej informacji o firmach w Stanach Zjednoczonych. Takie jak liczba pracowników, wielkość sprzedaży, kod NAICS i inne.
* Aby usługa działała, lokalizacją muszą być Stany Zjednoczone.
Aby uzyskać więcej informacji, prosimy o zapoznanie się z poniższym tekstem: Usługi wzbogacania dla Google Maps Scraper
Parametry zaawansowane
Jedną z najcenniejszych umiejętności Outscraper jest zaawansowane filtrowanie. Filtry telefonu, strony internetowej, podtypu i statusu działalności są jednym z nich. W prosty sposób można wyeliminować niechciane dane dzięki wielu różnym możliwościom filtrowania.
- Filtry. Głównym celem stosowania filtrów jest ignorowanie nieistotnych wyników. Każdy filtr decyduje o tym, czy dane miejsce/branża ma być wymienione w pliku wyników, czy też zignorowane.
Filtry mogą być stosowane do wielu przypadki użycia. Znajdowanie firm, które nie mają stron internetowych, znajdowanie firm, które nie są zweryfikowane, znajdowanie firm ze złymi ocenami.
Aby uzyskać więcej informacji, prosimy o zapoznanie się z poniższym tekstem: Filtry skrobaczki danych Map Google
Video Tutorial: Jak korzystać z filtrów Google Maps Data Scraper i jak to dostroi Twój scraping do innego poziomu?
- Język. Mapy Google mogą pokazywać różne wyniki w zależności od używanego języka. Z tego powodu Outscraper pozwala na symulację tego zjawiska. Możesz tworzyć zadania wybierając różne języki.
- Places Per One Query Search. Ten parametr określa limit liczby organizacji, które mają zostać pobrane w wyniku jednego zapytania. Jeśli używasz zapytania w celu znalezienia konkretnego miejsca (np. “Central Park, NY, USA”), prawdopodobnie warto ustawić wartość “1”, aby uzyskać wynik dotyczący pierwszego miejsca (na wypadek, gdyby Google znalazło coś innego). Jednak podczas wyszukiwania hasła “Restauracje, NY, USA” warto wyświetlić wszystkie wyniki i ustawić wartość “50”.
- Kolumny do zwrotu. Plik wynikowy zawiera domyślnie wszystkie kolumny danych. Jeśli chcesz tylko niektóre z nich, możesz wybrać je indywidualnie z listy tutaj.
Inne parametry
Pliki wynikowe narzędzia Google Maps Data Scraper można pobrać w różnych formatach. Ustawienia te można skonfigurować w sekcji “Inne parametry” przed przesłaniem zadania.
- Wynik Rozszerzenie. Outscraper umożliwia pobranie pliku z wynikami zadania w formatach CSV/XLSX/JSON/Parkiet. Jednak pożądany format pliku musi być wybrany przed rozpoczęciem zadania. Zmiana formatu po jego zakończeniu nie jest możliwa.
- Tagi zadania. “Zadania”Strona „” może zawierać wiele zadań zakończonych i tych, które są w trakcie realizacji. Znalezienie wśród nich konkretnego zadania, którego szukasz, może być trudne. Aby to ułatwić, możesz oznaczyć swoje zadanie tagiem.
Rozpoczęcie realizacji zadania i wynik
Po ponownym sprawdzeniu wszystkich parametrów, filtrów i usług wzbogacania danych zadanie zbierania danych można uruchomić, naciskając przycisk “Pobierz dane”, a przed wysłaniem zadania pojawi się okienko pop-up.
Jeśli zapytanie jest poprawne, można rozpocząć proces, naciskając przycisk "Potwierdź".
Status procesu można śledzić na stronie Zadania strona. Po zakończeniu zadania plik z wynikami będzie można stamtąd pobrać.
Outscraper Usługa Google Maps Data Scraper wyciąga wszystkie publicznie dostępne dane w Google Maps. Plik wynikowy zawiera. ponad 45 różnych danych. Liczba recenzji i ocena są również zawarte.
Jeśli jednak chcesz zeskrobać teksty recenzji w Google Maps, należy to zrobić za pomocą Skrobak do recenzji Map Google serwis. Google Maps Data Scraper określa tylko liczbę recenzji, ale nie wymienia tekstów recenzji. Ale nasza inna usługa umożliwia to. Aby uzyskać więcej informacji: Jak scrape'ować recenzje z Google Maps?
Możesz również sprawdzić tutoriale wideo, aby dowiedzieć się więcej o usłudze Outscraper Google Maps Data Scraper.
Samouczki wideo
Więcej filmów o Outscraper można znaleźć na stronie Kanał YouTube.
FAQ
Najczęściej zadawane pytania i odpowiedzi
Tak, można. Proszę dodać usługę wzbogacającą "Emails & Contacts Scraper" do zadania przed rozpoczęciem jego wykonywania.
Jeśli potrzebujesz firm tylko z adresami e-mail, nie zapomnij użyć opcji "Ignoruj bez e-maili".
Po więcej informacji zapraszamy do lektury: Jak wyodrębnić wiadomości e-mail z Map Google?
Tak. Proszę stworzyć filtr "site" na parametrach zaawansowanych. Przeczytaj te tutoriale, aby uzyskać więcej informacji:
Filtry skrobaczki danych Map Google
Jak znaleźć nowych klientów dla firmy projektującej strony internetowe?
Przede wszystkim należy zaznaczyć opcję "upuszczaj duplikaty". Jeśli zadanie ma być utworzone dla kategorii powiązanych ze sobą, zaleca się, aby kategorie te musiały znajdować się w tym samym zadaniu.
W przeciwnym razie te same wyniki mogą być wymienione w różnych zadaniach ze względu na podobne i powiązane kategorie.
P.S: Jeśli dodano usługę wzbogacenia Emails & Contacts Scraper, należy zaznaczyć opcję "Drop email duplicates", jeśli duplikaty emaili nie są pożądane.
Możesz zeskrobać recenzje Google Maps za pomocą usług Outscraper. Ale Skrobak do recenzji Map Google robi to usługa, a nie Google Maps Data Scraper. Więcej informacji można przeczytać tutaj: Jak scrape'ować recenzje z Google Maps?
Mapy Google mają więcej niż 5.000 kategorii. Outscraper Google Maps Data Scraper dashboard ma przygotowaną taką listę kategorii. Każda z tych kategorii może być bezpośrednio wybrana podczas tworzenia zadania.
Wybierz tę samą kategorię bezpośrednio związaną z docelowymi firmami, jeśli jest ona obecna na liście.
Jeśli nie ma jej na liście, można przeprowadzić szerokie wyszukiwanie, wybierając kilka kategorii, które są najbliższe poszukiwanej kategorii. W ten sposób uzyskamy najbardziej wyczerpujący wynik.
Jeśli chcesz przeskanować i zeskrobać zatłoczony obszar z dużą ilością firm, powinieneś utworzyć zadanie za pomocą "kodu pocztowego". Ponieważ Google Maps pokazuje maksymalnie 500 wyników w zapytaniu wyszukiwania
Nawet jeśli Outscraper zbierze wszystkie te 500 wyników, będą pewne firmy, które nie będą wymienione w pliku wyników. To prowadzi do niekompletnej bazy danych.
Aby uniknąć tej sytuacji, należy utworzyć zadanie z wykorzystaniem kodów pocztowych. Dla każdego kodu pocztowego zostanie utworzone zapytanie wyszukiwania. Ta metoda pozwala przekroczyć limit 500 wyników i wszystkie problemy zostaną rozwiązane.
Po więcej informacji zapraszamy do lektury: Jak zeskrobać gęsto zaludnione obszary i kategorie z Map Google?
0 Comments