Serpstack İncelemesi: Google Arama Sonuçları için bir JSON Rest API

Arama motoru sonuçlarını (özellikle Google'dan gelenleri) getirmeniz gerekiyorsa, bunu yapmanın bir yolu google.com'da gerçek bir arama yapmak ve sonuç olarak elde edeceğiniz karmaşık HTML kodunu ayrıştırmaya çalışmaktır. Yapılabilir ama oldukça zahmetli bir iş. Daha kolay bir yol izlemek istiyorsanız, arama teriminizle besleyebileceğiniz ve sonuçları kolayca ayrıştırılabilecek bir biçimde döndürecek özel bir SERP API kullanmaya ne dersiniz? Böyle bir ürün, apilayer'ın Serpstack API'sidir . Arama sorgusu dizenizi ve parametrelerinizi girdi olarak alır ve arama sonuçlarını JSON biçiminde döndürür. Ürüne derinlemesine bir göz atalım.

Genelde yaptığımız gibi SERP'i genel olarak tartışarak başlayacağız. Ardından, ne olduğunu açıklayacağız ve genellikle arama motorlarında bulunan farklı sonuç türlerinden birkaçını açıklayacağız. Ayrıca bir SERP API'sinin kullanılmasının bazı nedenlerini de keşfedeceğiz. Hepimiz aynı sayfada olduğumuzda, Serpstack API'sine ayrıntılı bir göz atacağız. API'nin nasıl kullanılacağına geçmeden önce bazı temel özelliklerine hızlıca göz atacağız. Bitirmeden önce, hizmetin fiyatlandırma yapısını ve mevcut planlarını keşfedeceğiz.

Özetle SERP

Her şeyden önce, SERP, Arama Motoru Sonuç Sayfalarının kısaltmasıdır. Bunlar, Google veya Bing gibi bir arama motorunu kullanarak çevrimiçi bir şey aradıklarında kullanıcılara sunulan web sayfalarıdır. Kullanıcı, genellikle anahtar kelimeler olarak adlandırılan belirli terimleri ve kelime öbeklerini kullanarak arama sorgusunu belirtir ve ardından arama motoru onlara bir SERP sunar.

Her SERP benzersizdir. Bu, aynı anahtar kelimeler veya sorgu metni kullanılarak aynı arama motorunda gerçekleştirilen birden çok arama sorgusu için bile geçerlidir. Bunun ana nedeni, hemen hemen her arama motorunun, arama terimlerinin çok ötesine geçen çok çeşitli faktörlere dayalı sonuçlar sunarak, kullanıcıları için deneyimi özelleştirmesidir. Bu faktörler, kullanıcının fiziksel konumunu, tarama geçmişini ve sosyal ayarlarını vb. içerebilir. Ve iki SERP aynı görünebilir ve aynı sonuçların çoğunu içerebilirken, genellikle ince farklılıklar gösterirler.

Google, Bing veya diğer oyuncular gibi arama motoru sağlayıcıları, hizmetlerini ve teknolojilerini sürekli olarak geliştirmekte ve sonuçlarıyla denemeler yapmaktadır. Amaçları, kullanıcılarına daha duyarlı ve sezgisel bir deneyim sunmaktır. Arama alanına yeni teknolojiler eklendikçe ve bunlar inanılmaz bir hızla ilerlerken, SERP'lerin görünümü değişiyor ve bugün bir zamanlar olduklarından oldukça farklılar.

Organik Sonuçlar

SERP'ler normalde iki tür içerik içerir: organik sonuçlar ve ücretli sonuçlar. Organik sonuçlar, arama motorunun algoritmasının bir sonucu olarak görünen web sayfalarının listeleridir. Birazdan bu konuda daha fazlası. Arama Motoru Optimizasyonu veya SEO, belirli bir anahtar kelime veya arama dizisi için web sitemizi listelemeleri için arama motorlarını kandırmak için içeriği manipüle etme bilimidir veya daha ziyade bir sanattır.

Arama Algoritmaları ve Sıralama Sinyalleri Hakkında

Yani, organik sonuçlara geri dönelim. Özetle, toplu olarak "sıralama sinyalleri" olarak adlandırılan bir dizi faktöre dayalı olarak arama motoru tarafından indekslenen listelerdir. Örneğin, Google tarafından kullanılan arama algoritması yüzlerce sıralama faktörü içerir. Arama motoru sağlayıcıları, sıralama sistemlerinin ayrıntılarını gizli tutma eğilimindedir. Bu nedenle, Google dışındaki hiç kimse -ve muhtemelen içerdeki pek çok kişi- sıralama sinyallerinin ne olduğunu tam olarak bilmese de, bazıları diğerlerinden daha önemli olarak kabul edilir.

Neden bir SERP API'si kullanmalısınız?

Herhangi birinin bir SERP API'sini kullanmasının birkaç nedeni vardır. Ürünleriniz ve web siteleriniz için SERP verilerini periyodik olarak almaya ve herhangi bir SEO stratejisinin önemli bir parçası olduğu için zaman içinde takip etmeye açık bir ihtiyaç vardır. Sıralamaların sürekli dalgalanması ve arama anahtar kelimelerinin zaman içinde az çok uygulanabilir ve değerli hale gelmesiyle, bu değişikliklerin üstesinden gelmenin tek bir yolu vardır ve o da hazır bir Hizmet Olarak Yazılım (SaaS) kullanmaktır. ) SERP verilerini Serpstack gibi bir SERP API kullanarak doğrudan kendi uygulamalarınıza veya web sitelerinize uygulayan çözüm.

Özetle, SERP verilerini almak için bir tarayıcı kullanmak ile Serpstack gibi bir SERP API kullanmak arasındaki temel fark, yanıtın biçimidir. Serpstack API, kurum içi yazılımınız tarafından kolayca ayrıştırılan JSON verilerini döndürür. Bunu kullanmak, sizi çevreleyen tüm web formatlamalarından anlamlı verileri çıkarmak zorunda kalmadan kurtarır.

Serpstack ile tanışın

Bir cümleyle, Serpstack gerçek zamanlı ve doğru bir Google Arama sonuçları API'sidir. Dünyanın en büyük markalarından bazıları tarafından güvenilen bu JSON REST API, ışık hızındadır ve kullanımı kolaydır. Ürün, Londra, Birleşik Krallık ve Viyana, Avusturya merkezli bir yazılım şirketi olan apilayer tarafından inşa edilmiş ve bakımı yapılmıştır. Başlangıçta arama motoru konumlarını otomatik bir şekilde takip etme ihtiyacından doğan ürün, pazardaki en güvenilir SERP API'lerinden biri haline geldi. Apilayer'a gelince, bu şirket, Currencylayer, Invoicely ve Eversign dahil olmak üzere dünya çapındaki en popüler API ve SaaS ürünlerinden bazılarının arkasındaki şirkettir.

Serpstack API, API istekleri yapıldığında bir proxy ağı ve tescilli bir kazıma teknolojisi kullanarak arama motorlarından SERP verilerini otomatik bir şekilde alır. Ortaya çıkan SERP verileri herkese açıktır ve buna herkes erişebilir. Ayrıca Serpstack API, web sonuçları, resim sonuçları, video sonuçları, haber sonuçları, alışveriş sonuçları, sponsorlu reklamlar, sorular ve çok daha fazlası dahil olmak üzere Google tarafından döndürülen neredeyse tüm arama sonucu türlerini destekler.

Dünyanın en popüler gerçek zamanlı API hizmetlerinden bazılarının üzerinde çalıştığı bir sistem olan apilayer bulut altyapısı üzerine kurulmuş olan Serpstack API, her aşamada yüksek düzeyde ölçeklenebilir ve esnektir. Google SERP verilerini gerçek zamanlı olarak ve herhangi bir ölçekte kazımanın bir yolunu sunmak için oluşturuldu. Hizmetin uygulanması, basit bir HTTP GET URL yapısı kullanılarak yalnızca birkaç dakika sürer ve sonuçlar, JSON veya CSV biçiminde döndürülür.

Serpstack'in Başlıca Özellikleri

Özellik açısından, Serpstack API arzulanan hiçbir şey bırakmaz. Her şeyden önce, hizmet son derece ölçeklenebilir ve her zaman kuyruksuzdur. Apilayer'ın güçlü bulut altyapısı, sıraya gerek kalmadan yüksek hacimli API isteklerine dayanacak şekilde inşa edildi. Şirketin birçok ürününün merkezinde yer almıştır. Ayrıca son derece özelleştirilebilir. İki müşterinin ihtiyaçları aynı olmadığından, otomatik arama sorgularınızı konum, dil, cihaz ve daha fazlasını içeren bir dizi seçeneğe göre özelleştirebilirsiniz.

Bu ürünü kullanarak, küresel IP'ler, tarayıcı kümeleri veya CAPTCHA'lar hakkındaki endişeler ortadan kalktı. Güçlü bir temel proxy ağı sayesinde, bu SERP kazıma API'si sizi hemen hemen her durumda ele alır. Ve aynı zamanda bütçede kolaydır. Aylık 100'e kadar ücretsiz istek alırsınız ve bundan daha fazlasına ihtiyacınız varsa - ve büyük olasılıkla yapacaksınız - ücretli planlar ayda yalnızca 29,99 dolardan başlar. Ürünün fiyatlandırmasını kısa süre içinde daha ayrıntılı olarak ele alacağız.

Ürünün en önemli özelliklerinden bazılarına genel bir bakış:

Basit Entegrasyon

Scrapestack API'sini kullanmak, hareket halindeyken daha kolay olamazdı. Özelleştirilmiş sorgular oluşturmak ve özel konumlar, cihazlar, diller ve daha fazlasını kullanarak herhangi bir ölçekte SERP sayfalarını kazımaya başlamak yalnızca birkaç dakika sürer.

Yüksek Güvenlik Seviyesi

Serpstack API'sine gönderilen ve alınan tüm veri akışları, 256 bit SSL Şifrelemesi kullanılarak şifrelenir. Bu, bankacılık siteleri veya çoğu e-ticaret platformu tarafından kullanılan güvenlik türüdür. Verilerinizin korunmaya devam edeceğinden emin olabilirsiniz.

Eşsiz Hız ve Kullanılabilirlik

Mükemmele yakın bir kullanılabilirlik puanıyla, Scrapestack API'sinin ihtiyacınız olduğunda orada olacağından emin olabilirsiniz. Ve apilayer hızdan asla ödün vermez. API'ye gönderilen API istekleri, milisaniyeler içinde işlenir. Elbette sonuçların ne kadar hızlı geleceği de Google'ın yanıt sürelerine bağlıdır.

Çıktı Formatlarının Seçimi

SERP verilerini dava etmeyi daha da kolaylaştırmak için Serpstack kullanımı kolay REST API, JSON veya CSV yanıtları seçeneği sunar. Bu, herhangi bir programlama dili ile uyumlu olmasını sağlar.

Birinci Sınıf Destek

Bir ürünün ancak teknik destek yapısı kadar iyi olduğu sıklıkla söylenir. Yine, burası Scrapestack'in parladığı bir yer. Herhangi bir teknik sorunuz varsa, eğitimli uzmanlardan oluşan bir ekip, olabilecek her türlü talebinize yardımcı olmak için oradadır. Yanıt hızlı ve hizmet oldukça iyi çalışıyor.

Kapsamlı Belgeler

Destek kadar önemli olan Belgeler, genellikle bir ürünü nasıl kullanacağınızı öğrenmenin birincil yolunuz olacaktır. Serpstack, keşfedilmeyi bekleyen kapsamlı API belgeleri sunar. Bunu kullanmak sadece birkaç dakika içinde başlamanızı sağlayacak ve sizi haftalar veya aylar değil, birkaç gün içinde uzman yapacaktır.

Serpstack'i kullanma

Enough bragging about the product’s great features—and they truly are, let’s have a look at how you can actually use the product and the different types of requests you can make and the corresponding responses you can expect.

The Basics

To use the Serpstack API, you’ll first need to sign up for an account. This is free and as a result, you’ll be assigned a unique API access key. This is what you’ll use from now on to authenticate with the API via simple HTTP GET requests to access any of the available endpoints. So, to use the API you simply need to append your API key to the base URL using the “access_key” parameter. Here’s what a typical—albeit very basic and totally useless—request looks like:

https://api.serpstack.com/search ? access_key = YOUR_ACCESS_KEY

Ek güvenlik için, tüm ücretli planlar 256-bit SSL şifreleme kullanımına izin verir. Kullanmak için tek ihtiyacınız olan HTTP istekleri yerine HTTPS istekleri göndermektir. Örneğin, şifrelemeli yukarıdaki örnek şöyle olur:

https://api.serpstack.com/search ? access_key = YOUR_ACCESS_KEY

Bir API isteği başarısız olduğunda, Serpstack API, hatayla ilgili ayrıntıları içeren bir JSON nesnesi döndürür. Örneğin, izin verilen maksimum API istek sınırına ulaşıldığında veya aşıldığında API tarafından döndürülecek olan şudur. Her abonelik planının yapabileceği istek sayısı için farklı bir sınırı vardır.

{ "success": false, "error": { "code": 104, "type": "usage_limit_reached", "info": "Aylık API istek hacminize ulaşıldı. Lütfen planınızı yükseltin." } }

API İsteği ve Parametreleri

Aksi belirtilmediği sürece, Serpstack API her zaman varsayılan olarak Google'dan arama sonuçlarını sunacaktır. Sonuç olarak, Google arama sonuçları için API'yi sorgulamak istiyorsanız, tek yapmanız gereken API'nin temel URL'sine “ sorgu ” parametresini eklemek ve bunu istediğiniz bir arama sorgusuna ayarlamaktır. Kimlik doğrulama ve şifreleme ile arama terimi olarak "mcdonalds" kullanan bir sorgunun nasıl göründüğü aşağıda açıklanmıştır:

https://api.serpstack.com/search ? access_key = YOUR_ACCESS_KEY & sorgu = mcdonalds

Gördüğünüz gibi, bu oldukça basit bir sözdizimi. Kesinlikle hayal edebileceğiniz gibi, arama sonuçlarını daha da daraltmak için bir isteğe eklenebilecek bir ton isteğe bağlı parametre vardır. Birkaçını birazdan keşfedeceğiz, ancak hepsinin ayrıntılı bir listesi çevrimiçi API belgelerinde mevcuttur.

API Yanıtları

Serpstack API'sinden alacağınız yanıtlar, büyük ölçüde arama sorgunuza ve kullanmayı seçtiğiniz parametrelere bağlı olacaktır. Filtreleme belirtilmemiş temel bir sorgu, bir ton veri döndürür. İşte yukarıdaki örnek sorgudan alacağınız yanıtın başlangıç ​​kısmı.

{ "request": { "success": true, "processed_timestamp": 1566207832, "search_url": "https://www.google.com/search?q=mcdonalds", "total_time_taken": 1.5 }, "search_parameters" : { "motor": "google", "sorgu": "mcdonalds", "tür": "web", "cihaz": "masaüstü", "google_domain": "google.com", "hl": "tr ", "gl": "bize", "sayfa": "1", "num": "10" }, "search_information": { "total_results": 759000000, "time_taken_displayed": 0,91, "did_you_mean": null, "showing_results_for": null, "query_displayed": "mcdonalds", "detected_location": null,"no_results_for_original_query": yanlış },

Yukarıdaki örneğin amacı, sonuçların nasıl görünebileceği hakkında size bir fikir vermektir. Ben yanıtın yalnızca ilk 25 satırını ekledim ve bu yanıtın tamamı dört yüz satırdan uzun.

Google aramayı kullanırken fark etmiş olabileceğiniz gibi, tipik bir arama sonucu sayfası, her biri farklı türde sonuçlar görüntüleyen farklı bölümlere sahiptir. Ücretli reklam sonuçlarına, organik sonuçlara, resimlere, videolara vb. sahip olacaksınız. Ayrıca, sayfanın üst kısmındaki bir şerit, haritalar, haberler, alışveriş veya kitaplar gibi yalnızca birkaçını saymak gerekirse belirli türdeki sonuçları görüntülemenize olanak tanır. . Çeşitli isteğe bağlı parametreler, elde etmekle ilgilendiğiniz arama sonuçları türünü belirtmenize olanak vererek, elde edilen JSON dosyasının ayrıştırılmasını çok daha basit hale getirir. Alabileceğiniz farklı sonuç türlerinden bazılarına daha yakından bakalım.

Reklam Sonuçları

Arama sorgunuz için sponsorlu reklamlar olduğunda ve çoğu zaman olacaktır, API yanıtı bir reklam nesnesiyle birlikte gelir. Tüm reklamları, arama sonucunda gösterildikleri sırayla içerir. Arama sonucunun üstünde ve altında gösterilen reklamları içerir.

Organik Sonuçlar

Organik arama sonuçları, Google tarafından sağlanan ana arama sonuçlarıdır ve özellikle ilgileneceğiniz sonuçlardır. Web trafiği, geri bağlantılar, sosyal medya varlığı ve çok daha fazlası gibi bir dizi faktör tarafından belirlenirler. , rekabet üstünlüğünü korumak için Google tarafından gizli tutulan tam algoritma ile. Bu sonuçlar API tarafından detaylı olarak ayrıştırılır ve “ organik_sonuçlar ” olarak döndürülür .

Görüntü Sonuçları

Bir Google aramasından resim sonuçları almanın iki yolu olduğu gibi, resimlerin API tarafından döndürülmesinin iki yolu vardır. Standart bir web araması yaparken, arama sonuçlarında bazı görseller Google tarafından sağlanır. Satır içi görüntüler olarak adlandırılan bu görüntüler, Scrapestack API tarafından bir " inline_images " dizisi içinde döndürülür .

"image_results": [ { "position": 1, "title": "McDonald's Gold Card: The True Story ...", "width": 1024, "height": 683, "image_url": "https:// www.rd.com/app/uploads/2017/12/the-true-story-behind-the-mysterious-mcdonalds-gold-card-673955074-Vytautas-Kielaitis-1024x683.jpg", "type": "png" , "url": "https://rd.com", "kaynak": "https://rd.com" }, { "konum": 2, "başlık": "McDonald's - Wikipedia", "genişlik" : 1200, "yükseklik": 1051, "image_url": "https://upload.wikimedia.org/wikipedia/commons/thumb/3/36/McDonald%27s_Golden_Arches.svg/1200px-McDonald%27s_Golden_Arches.svg.png" , "type": "png", "url": "https://tr.wikipedia.org/wiki/McDonald%27s", "source": "https://en.wikipedia.org" }, { "position": 3, "title": "En İyi Yeni Global Menü Öğeleri ...", "width": 970, "height": 545, "image_url": "https://assets3.thrillist.com/v1/image/2825587/size/gn-gift_guide_variable_c.jpg", "type": "png", "url": "https://thrillist.com/", "source": "https://thrillist.com" } ]"type": "png", "url": "https://thrillist.com/", "source": "https://thrillist.com" } ]"type": "png", "url": "https://thrillist.com/", "source": "https://thrillist.com" } ]

Öte yandan, tür parametresi görüntülere ayarlanmış olarak görüntüler özel olarak aranırsa , görüntüler bir “ image_results ” dizisi olarak döndürülür . Bu durumlarda API, varsayılan olarak 100 resim döndürür.

Video Sonuçları

Görüntüler için üzerinde durduğumuz tam olarak aynı hususlar, hem küresel arama sonuçlarında hem de özel video sonuçlarında hem satır içi videoların mevcudiyeti ile video sonuçları için de geçerlidir.

Sayfalarca devam edebilir ve Serpstack API'nin döndürebileceği çeşitli sonuç türleri hakkında size ayrıntılı bilgi verebiliriz, ancak resmi anladığınızı düşünüyoruz. Tipik bir Google araması tarafından döndürülen her tür sonuç, API'nin yanıtında da mevcuttur. Halihazırda açıklanan sonuç türlerine ek olarak API, haber sonuçları, alışveriş sonuçları ve yerel sonuçların yanı sıra sonuç sayfasının yanıt kutusu, hava durumu kutusu, etkinlikler, en iyi atlıkarınca, en çok okunan haberler vb. içerikleri döndürür.

Desteklenen Programlama Ortamları

Serpstack API ile ilgili en iyi şeylerden biri, onu çoğu ortamdan kolayca kullanabilmenizdir, Hangi dili kullanırsanız kullanın, HTTP istekleri gönderebildiğiniz sürece, gitmenizde fayda var. PHP veya Python gibi tüm popüler web dilleri desteklenmektedir. Aslında, API belgeleri, PHP, Python, Nodejs, jQuery, Go ve Ruby'den nasıl kullanılacağına dair örnekler içerir.

Örneğin, Serpstack API tarafından döndürülen her bir organik arama sonucunun yanı sıra toplam arama sonucu sayısını yazdırmak için PHP kodu.

$queryString = http_build_query([ 'access_key' => 'YOUR_ACCESS_KEY', 'query' => 'mcdonalds', ]); $ch = curl_init(sprintf('%s?%s', 'https://api.serpstack.com/search', $queryString)); curl_setopt($ch, CURLOPT_RETURNTRANSFER, true); $json = curl_exec($ch); curl_close($ch); $api_result = json_decode($json, true); echo "Toplam sonuçlar: ", $api_result['search_information']['total_results'], PHP_EOL; foreach ($api_result['organik_results'] as $number => $sonuç) { echo "{$number}.{$sonuç['title']}", PHP_EOL; }

Python'da da aynı şeyi başarmak için bazı kodlar:

içe aktarma istekleri params = { 'access_key': 'YOUR_ACCESS_KEY', 'query': 'mcdonalds' } api_result = request.get('https://api.serpstack.com/search', params) api_response = api_result.json() print "Toplam sonuçlar: ", api_response['search_information']['total_results'] sayı için, sonuç enumerate(api_response['organik_results'], start=1): print "%s. %s" % (sayı, sonuç ['Başlık'])

Fiyatlandırma ve Planlar

Serpstack API, ihtiyaçlarınıza bağlı olarak çeşitli planlar altında mevcuttur . En temel plan Ücretsiz plandır. Adından da anlaşılacağı gibi ücretsizdir, ancak tipik deneme sürümleri gibi zaman sınırlı olmasa da özellik ve kullanım sınırlıdır. Ayda yalnızca 100'e kadar arama yapabileceksiniz.

Sonraki üç seviye tam özelliklidir ve yalnızca çalıştırmanıza izin verilen maksimum aylık arama sayısına göre değişir. Temel plan size aylık 29,99 ABD doları karşılığında 5000 verir, Aylık 99,99 ABD doları olan İş planı bunu 20 000'e çıkarır ve Business Pro planı ayda 199,99 ABD doları karşılığında 50 000 arama yapmanızı sağlar. Bu planların hiçbiri size uymuyorsa, tam ihtiyaçlarınıza göre özelleştirilebilen, değişken fiyatlı bir Kurumsal plan da vardır. Aylık yerine yıllık faturalandırmayı seçerseniz, hizmeti daha da ekonomik hale getiren %20 indirim hakkınız olur.

Toplama

Özetle, Serpstack API, Google'dan SERP verilerini almanız gerektiğinde iyi bir şekilde kullanabileceğiniz, kullanımı kolay, tam özellikli bir üründür. Mükemmel çalışma süresi ve etkileyici yanıt süresi, en iyi varlıklarından bazılarıdır. Bize başka mükemmel API'ler getiren apilayer tarafından desteklenen, bunun beklediğiniz sonuçları vereceğinden eminiz. Bu sadece tavsiye edebileceğimiz bir üründür.