Outscraper SSS

Genel

Kazıma, hasat etme veya ayıklama, bazı kamu sitelerinden tüm bilgileri alma sürecidir. Verilerin manuel olarak dışa aktarılmasını otomatikleştirir.
Kamuya açık verilerin kazınması ve çıkarılması, Amerika Birleşik Devletleri Anayasasının İlk Değişikliği tarafından korunmaktadır. Dokuzuncu Devre Temyiz Mahkemesi, kamuya açık verilerin otomatik olarak kazınmasının Bilgisayar Sahtekarlığı ve Kötüye Kullanımı Yasasını (CFAA) ihlal etmediğine karar verdi. Bununla birlikte, yetki alanınızdaki yasalara uymak için özel meselenizde bir avukatın danışmanına başvurmalısınız.
Ödeme API Dokümanları veya ziyaret et GitHub Hizmetleri kodunuzla nasıl entegre edebileceğiniz hakkında bilgi edinmek için sayfa. Kontrol et Blog.
üzerindeki bildirimleri kapatabilirsiniz. profil sayfası.
Yalnızca kamuya açık verileri ayıklıyoruz ve kazıyıcı, veri bilimciler, geliştiriciler ve pazarlamacılar için bir tarayıcı olarak çalışıyor. PII içermeyen verileri garanti etme mekanizması, hangi sütunların döndürülmesini istediğinizi seçmektir.

Ödemeler & Abonelikler

Fatura, kullanım esas alınarak oluşturulacaktır. hizmetler sırasında Fatura süre (30 gün). Fiyatlar listeleniyor sayfa.
Ücretsiz deneme hakkı, her ay ücretsiz olarak kullanabileceğiniz kullanım miktarıdır. Örneğin, kullandığınız aracın ayda 500 istek içeren kredisi vardır. Bu ücretsiz krediyi bir ay boyunca kullanabilirsiniz.
Bir abonelik sona erdiğinde, kullanım için bir fatura alacaksınız. hizmetler abonelik süresi boyunca. 3 gün içinde ödeme yapamamanız durumunda sistem sizden otomatik olarak ücret tahsil etmeye çalışacaktır.
Bir miktar kullanımınız olduğunda, yaklaşan faturayı Profil Sayfası. Ödenmesi gereken tutarı belirledikten sonra, "Fatura Oluştur" seçeneğine tıklayarak faturayı manuel olarak oluşturabilirsiniz veya fatura 30 gün içinde otomatik olarak oluşturulacaktır.
Hesabınıza kredi eklediğinizde (ön ödemeli seçenek), işlem için makbuzu e-posta ile alacaksınız. Belirli hizmetlerin kullanımlarını içeren faturalar her faturalandırma döneminden (30 gün) sonra oluşturulacaktır. Alternatif olarak, ödenmesi gereken tutara sahip olduğunuzda, "Fatura Oluştur" seçeneğine tıklayarak faturayı manuel olarak oluşturabilirsiniz. Profil Sayfası.

Evet. Outscraper, $10 için hesap bakiyenizi tahsil edecek ve ödenmesi gereken tutarla birlikte ek bir fatura düzenleyecektir.

Evet.

Hayır. Görev tamamlanacak ve görev kullanımı hesap kredinizden daha fazla olacaksa, sadece ödenmemiş kullanımı içeren bir fatura alacaksınız.

Çıkarılan veri miktarını sınırlamak için limitleri kullanabilirsiniz.

API

Saniye başına sorgu limiti (QPS) taleplerin niteliğine (hizmet, sonuç limiti, vb.) bağlıdır. Ortalama QPS yaklaşık 20. Bize Ulaşın Daha fazlasına ihtiyacınız olursa diye.

Evet. API, dizileri şu sayıya kadar göndererek gruplamayı destekler 25 sorgular (örn, query=text1&query=text2&query=text3). Birden fazla sorgunun tek bir istekte gönderilmesine ve ağ gecikme süresinden tasarruf edilmesine olanak tanır.

Şu adrese gidin API Kullanım Geçmişi sayfası son taleplerinizi görmek için.

Şuraya gidin profil sayfasıYeni bir anahtar oluşturmak için ->API belirteci.

Ortalama yanıt süresi 3-5 saniyedir. Ancak bu süre hizmet türüne (hız optimizasyonlu veya değil) ve istek başına sorgu sayısına (toplu iş seçeneği) bağlı olabilir.

Google Haritalar Veri Tarama ve Listeleme Aracı

Google bazen aramalarınıza başka kategoriler de ekler. Örneğin, arama yaptığınızda restoranlar görebilirsiniz barlar, Kahve dükkanlarya da hatta OTELLER. Bu, özellikle aşağıdaki gibi bazı küçük kategoriler kullandığınızda alakasız verilere yol açabilir yüzme havuzları.

Outscraper, bu kategorileri ortadan kaldırmak için kullanabileceğiniz iki araç sağlar.

  1. Google Haritalar'daki dönüm noktası kategorisi

    "tam eşleşme" onay kutusu. Parametre, yalnızca seçtiğiniz kategorilerin mi yoksa Google'ın gösterdiği her şeyin mi döndürüleceğini belirtir. Google'da benzer yerleri açıp kategoriyi kontrol ederek doğru kategorileri kullandığınızdan emin olun.

  2. Sonuçları filtreleme

    Sonuçları uygulayarak filtreleyin Filtreler alt türler sütununa ekleyebilirsiniz. Bu tür filtreler tüm ilgisiz verileri eleyebilir ve size yalnızca ihtiyacınız olanı döndürebilir. Boş sonuçlardan kaçınmak için Filtreleri kullanmadan önce alanların değerlerine aşina olduğunuzdan emin olun.

Önceden tanımlanmış konumların ve/veya kategorilerin yeterli olmadığı bazı durumlar vardır. İhtiyacınız olan kategorileri ve/veya konumları eklemek için "Özel konumlar" ve/veya "Özel kategoriler" seçeneklerini kullanın.
Google Haritalar'da, bir sorgu araması başına yalnızca 400-500'e kadar yer gösteren bir sınırlama vardır. Bir kategoride daha fazla şirket olduğunda bu bir sorun olabilir. Örneğin, sorgu için “restoranlar, Brooklyn”. Bunun üstesinden gelmek için konumu alt konumlara bölmeyi öneriyoruz. Örneğin, posta kodlarını kullanarak: “restoranlar, Brooklyn 11203”, “restoranlar, Brooklyn 11211”, Restoranlar, Brooklyn 11215”, ... Veya alt kategorilere sahip sorgular kullanarak: “Asya restoranları, Brooklyn”, “İtalyan restoranları, Brooklyn”, “Meksika restoranları, Brooklyn”, …
"Sorguları kullan" değiştiricisini işaretleyin ve sorguları girin.
Google'ı yalnızca belirli şirketleri aramaya zorlamak için, " " terimini tırnak işaretleri arasına alın. NS ” “ operatörü genellikle durma sözcükleri (Google'ın yoksayacağı sözcükler) etrafında veya Google'ın yalnızca arama terimlerinizle tam olarak eşleşen sayfaları döndürmesini istediğinizde kullanılır.
“Verileri çıkar…” düğmesine tıkladıktan sonra görev tahminini ve sorguları göreceksiniz. Google Haritalar sitesinde nasıl göründüğünü kontrol etmek için birkaç sorguyu tıklayıp açmanız önerilir.
Beklenen sonuç sayısını kontrol etmek için izlemeniz gereken iki şey vardır. 1. Sorgu başına kuruluş sayısı sınırı – bir sorgudan alınacak kuruluşların sınırı. 2. Sorgu sayısı – yapacağınız arama sorgularının miktarı. Botun 2 kategori ve 3 konumdan verileri çıkarmak için yapacağı 6 sorgu vardır. Bu nedenle, ortaya çıkan miktar 480'den fazla kuruluş olmayacaktır (80 * 6 sorgu sınırı).

"Yinelenenleri bırak" onay kutusunu seçerek tek bir görevdeki yinelenenleri kaldırabilirsiniz.

Evet, "Yinelenenleri bırak" onay kutusunu (gelişmiş parametreler) kullanarak yinelenenleri bir görevin içine bırakabilirsiniz. Alternatif olarak, bir yer için benzersiz tanımlayıcılar olarak "google_id" veya "place_id" alanlarını kullanarak kendiniz de bırakabilirsiniz.

Sonuçların tam sayısı ancak çıkarma işleminden sonra bilinecektir. Kazınan sonuçların nihai miktarını sınırlamak için "Toplam yer sınırı "nı kullanabilirsiniz.
Evet. Aşağıdaki bağlantıyı sorgu olarak kullanabilirsiniz "https://www.google.com/maps/search/real+estate+agency/@41.4034,2.1718413,17z" burada bir sorgu (emlak+acente), koordinatlar (41.4034,2.1718413) ve yakınlaştırma düzeyi (17z). Bu değerleri Google Maps'i ziyaret ederken bulabilirsiniz. Alternatif olarak, "koordinatlar" parametresini kullanıyorsanız API.
Evet. E-postalar ve Kişiler Kazıyıcı Google'dan gelen verileri zenginleştirmek için Google Haritalar kazıyıcı ile birlikte. Bunu yapmak için, "Diğer hizmetlerle zenginleştir" bölümündeki "E-postalar ve Kişiler Kazıyıcı "yı seçin. Google Haritalar Kazıyıcı sayfası.
Kaç sorgu olursa olsun, yalnızca elde ettiğiniz sonuçlar için ödeme yaparsınız.

Hayır. Google Haritalar'daki listeleme ile bağlantılı e-postalar hakkında kamuya açık bilgi yoktur. Outscraper bu e-postaları bulmak için harici kaynaklar kullanır.

Evet. Gelişmiş parametrelerdeki filtreleri aşağıdaki operatörle kullanabilirsiniz.

Görevlerinizi şehir/eyalet veya diğer bazı benzersiz niteliklere göre bölebilirsiniz. Örneğin, ilk görevde New York'taki yerleri çıkarabilir ve ikinci görevde Kaliforniya'daki yerleri çıkarabilirsiniz.

Bizimle İletişime Geçin

Hizmetlerimiz hakkında bir sorunuz varsa veya projeniz için özel bir talebiniz varsa sizinle görüşmekten mutluluk duyarız. Bize aşağıdaki form üzerinden ulaşabilirsiniz.