Häufig gestellte Fragen zu Outscraper

Allgemein

Scraping, Harvesting oder Extraction ist ein Prozess, bei dem alle Informationen von einer öffentlichen Website abgerufen werden. Es automatisiert den manuellen Export der Daten.
Das Auskratzen und Extrahieren öffentlicher Daten ist durch den ersten Zusatzartikel der Verfassung der Vereinigten Staaten geschützt. Das Berufungsgericht des Neunten Bezirks entschied, dass das automatisierte Scraping von öffentlich zugänglichen Daten nicht gegen den Computer Fraud and Abuse Act (CFAA) verstößt. Sie sollten jedoch in Ihrer speziellen Angelegenheit den Rat eines Anwalts einholen, um die Gesetze in Ihrer Gerichtsbarkeit einzuhalten.
Auschecken API-Dokumente oder besuchen GitHub Seite, um zu erfahren, wie Sie Dienste in Ihren Code integrieren können. Besuche die Blog.
Wir extrahieren nur öffentlich zugängliche Daten, und der Scraper funktioniert als Browser für Datenwissenschaftler, Entwickler und Vermarkter. Der Mechanismus zur Gewährleistung von PII-freien Daten besteht darin, dass Sie auswählen, welche Spalten Sie zurückgeben möchten.

Zahlungen und Abonnements

Die Rechnung wird basierend auf der Verwendung von . erstellt Die Dienste während der Abrechnung Zeitraum (30 Tage). Die Preise sind auf Die Seite.
Das kostenlose Kontingent ist die Menge der Nutzung, die Sie jeden Monat kostenlos nutzen können. Einige Produkte X haben beispielsweise eine kostenlose Stufe mit 500 Anfragen pro Monat. Das bedeutet, dass jede Nutzung des Produkts unter 500 Anfragen während eines Monats kostenlos ist.
Wenn ein Abonnement abgeschlossen wird, erhalten Sie eine Rechnung für die Nutzung von Die Dienste während der Abonnementlaufzeit. Falls Sie innerhalb von 3 Tagen keine Zahlung leisten können, versucht das System, Sie automatisch zu belasten.
Sobald Sie einen gewissen Verbrauch haben, können Sie die kommende Rechnung auf die Profilseite. Sobald Sie den fälligen Betrag haben, können Sie die Rechnung manuell erstellen, indem Sie auf "Rechnung generieren" klicken, oder sie wird automatisch innerhalb von 30 Tagen erstellt.
Sobald Sie Ihrem Konto Guthaben hinzufügen (Prepaid-Option), erhalten Sie die Quittung für die Transaktion per E-Mail. Rechnungen über die Inanspruchnahme bestimmter Dienste werden nach jedem Abrechnungszeitraum (30 Tage) erstellt. Alternativ können Sie, sobald Sie den fälligen Betrag haben, die Rechnung manuell erstellen, indem Sie auf "Rechnung generieren" auf die Profilseite.

Nein. Die Aufgabe wird abgeschlossen, und wenn die Nutzung der Aufgabe Ihr Kontoguthaben übersteigt, erhalten Sie einfach eine Rechnung über die ausstehende Nutzung.

Sie können Limits verwenden, um die Menge der extrahierten Daten zu begrenzen.

API

Die Höchstzahl der Abfragen pro Sekunde (QPS) hängt von der Art der Anfragen ab (Dienst, Höchstzahl der Ergebnisse usw.). Die durchschnittliche QPS beträgt etwa 20. Kontaktiere uns für den Fall, dass Sie noch mehr brauchen.

Ja. Die API unterstützt die Stapelverarbeitung durch Senden von Arrays mit bis zu 25 Abfragen (z.B., abfrage=text1&abfrage=text2&abfrage=text3). Sie ermöglicht die Übermittlung mehrerer Abfragen in einer einzigen Anfrage und spart Netzlatenzzeit.

Navigieren Sie zum API-Nutzungsverlauf Seite um Ihre letzten Anfragen zu sehen.

Navigieren Sie zu Profilseite->API-Token, um einen neuen Schlüssel zu erstellen.

Die durchschnittliche Antwortzeit beträgt 3-5 Sekunden. Sie kann jedoch von der Art des Dienstes (geschwindigkeitsoptimiert oder nicht) und der Anzahl der Abfragen pro Anfrage (Batch-Option) abhängen.

Google Maps-Schaber

Manchmal fügt Google weitere Kategorien zu Ihren Suchanfragen hinzu. Zum Beispiel, wenn Sie suchen nach Restaurants Sie könnten sehen Bars, Kaffee Geschäfteoder sogar Hotels. Dies kann zu irrelevanten Daten führen, vor allem, wenn Sie einige kleinere Kategorien verwenden wie Schwimmbäder.

Outscraper bietet Ihnen zwei Tools, mit denen Sie diese Kategorien eliminieren können.

  1. Die Kategorie Wahrzeichen auf Google Maps

    Verwenden Sie die "genaue Übereinstimmung" ankreuzen. Der Parameter gibt an, ob nur die von Ihnen ausgewählten Kategorien oder alles, was Google anzeigt, zurückgegeben werden soll. Stellen Sie sicher, dass Sie die richtigen Kategorien verwenden, indem Sie ähnliche Orte bei Google öffnen und die Kategorie überprüfen.

  2. Filterung der Ergebnisse

    Ergebnisse filtern durch Anwendung Filter in die Spalte Subtypen. Solche Filter können alle irrelevanten Daten eliminieren und Ihnen nur das liefern, was Sie brauchen. Um leere Ergebnisse zu vermeiden, sollten Sie sich mit den Werten der Felder vertraut machen, bevor Sie die Filter verwenden.

Es gibt Fälle, in denen vordefinierte Orte oder/und Kategorien nicht ausreichen. Verwenden Sie die Optionen „Benutzerdefinierte Standorte“ oder/und „Benutzerdefinierte Kategorien“, um die gewünschten Kategorien oder/und Standorte einzufügen.
Es gibt eine Einschränkung von Google Maps, die nur bis zu 400-500 Orte pro Suchanfrage anzeigt. Dies kann ein Problem sein, wenn mehrere Unternehmen in einer Kategorie vorhanden sind. Zum Beispiel für Abfrage “Restaurants, Brooklyn”. Um dies zu vermeiden, schlagen wir vor, den Ort in Unterorte aufzuteilen. Zum Beispiel durch die Verwendung von Postleitzahlen: “Restaurants, Brooklyn 11203”, “Restaurants, Brooklyn 11211”, ”Restaurants, Brooklyn” 11215, ... Oder Abfragen mit Unterkategorien verwenden: “Asiatische Restaurants, Brooklyn”, “Italienische Restaurants, Brooklyn”, “Mexikanische Restaurants, Brooklyn”, …
Aktivieren Sie den Schalter "Abfragen verwenden" und geben Sie die Abfragen ein.
Um Google zu zwingen, nur nach bestimmten Unternehmen zu suchen, schließen Sie den Begriff in Anführungszeichen ” “ ein. Die ” “ Der Operator wird normalerweise bei Stoppwörtern verwendet (Wörter, die Google ansonsten ignorieren würde) oder wenn Sie möchten, dass Google nur die Seiten zurückgibt, die genau Ihren Suchbegriffen entsprechen.
Nach Anklicken des Buttons „Daten extrahieren…“ sehen Sie die Aufgabenschätzung und die Abfragen. Es wird empfohlen, darauf zu klicken und einige Abfragen zu öffnen, um zu überprüfen, wie es auf der Google Maps-Site aussieht.
Es gibt zwei Dinge, die Sie beachten sollten, um die erwartete Anzahl von Ergebnissen zu kontrollieren. 1. Organisationen pro Abfragelimit – die Grenze der Organisationen, die aus einer Abfrage entnommen werden können. 2. Anzahl der Anfragen – die Anzahl der Suchanfragen, die Sie stellen werden. Es gibt 6 Abfragen, die der Bot ausführt, um die Daten aus 2 Kategorien und 3 Orten zu extrahieren. Daher wird die resultierende Menge nicht mehr als 480 Organisationen betragen (Limit von 80 * 6 Abfragen).

Sie können Duplikate in einer Aufgabe entfernen, indem Sie das Kontrollkästchen "Duplikate löschen" aktivieren.

Ja, Sie können Duplikate innerhalb einer Aufgabe löschen, indem Sie das Kontrollkästchen "Duplikate löschen" (erweiterte Parameter) verwenden. Alternativ können Sie sie selbst entfernen, indem Sie die Felder "google_id" oder "place_id" als eindeutige Bezeichner für einen Ort verwenden.

Die genaue Anzahl der Ergebnisse wird erst nach der Extraktion bekannt sein. Mit der Option "Gesamtzahl der Orte begrenzen" können Sie die endgültige Anzahl der extrahierten Ergebnisse begrenzen.
Ja. Sie können den folgenden Link als Abfrage verwenden "https://www.google.com/maps/search/real+estate+agency/@41.4034,2.1718413,17z", in dem Sie eine Abfrage (Immobilien+Immobilien+Agentur), die Koordinaten (41.4034,2.1718413) und die Zoomstufe (17z). Sie können diese Werte bei Google Maps abrufen. Alternativ können Sie auch den Parameter "Koordinaten" verwenden, wenn Sie API.
Ja. Sie können die Emails & Kontakte Scraper zusammen mit Google Maps Scraper, um die Daten von Google anzureichern. Wählen Sie dazu "Emails & Contacts Scraper" im Abschnitt "Anreicherung durch andere Dienste" auf der Seite Google Maps Scraper Seite.
Sie zahlen nur für die Ergebnisse, die Sie extrahiert haben, unabhängig von der Anzahl der Abfragen.

Nein. Es gibt keine öffentlichen Informationen über E-Mails, die mit dem Eintrag auf Google Maps verbunden sind. Outscraper verwendet externe Quellen, um diese E-Mails zu finden.

Ja, Sie können Filter aus den erweiterten Parametern mit dem folgenden Operator verwenden.

Blog

Kontaktiere uns

Fragen, spezielle Bedürfnisse, Probleme... Immer gerne von Ihnen zu hören.