Serpstack 검토: Google 검색 결과를 위한 JSON Rest API

검색 엔진 결과, 특히 Google의 결과를 가져와야 하는 경우 이를 수행하는 한 가지 방법은 google.com에서 실제 검색을 실행하고 결과로 얻을 복잡한 HTML 코드를 구문 분석하는 것입니다. 할 수는 있지만 상당한 노력입니다. 더 쉬운 길을 가고 싶다면 검색어와 함께 제공할 수 있고 쉽게 구문 분석할 수 있는 형식으로 결과를 반환하는 전용 SERP API를 사용하지 않는 것이 좋습니다. 그러한 제품 중 하나는 apilayer 의 Serpstack API 입니다 . 검색 쿼리 문자열과 매개변수를 입력으로 사용하고 검색 결과를 JSON 형식으로 반환합니다. 제품을 자세히 살펴보겠습니다.

우리는 일반적으로 SERP에 대해 논의함으로써 우리가 자주 하는 것처럼 시작할 것입니다. 다음으로, 우리는 그것이 무엇인지 설명하고 일반적으로 검색 엔진에서 사용할 수 있는 몇 가지 다른 유형의 결과에 대해 설명합니다. 또한 SERP API를 사용하는 몇 가지 이유를 살펴보겠습니다. 그리고 우리가 모두 같은 페이지에 있으면 Serpstack API에 대해 자세히 살펴보겠습니다. API를 사용하는 방법을 알아보기 전에 주요 기능 중 일부를 간단히 살펴보겠습니다. 그리고 결론을 내리기 전에 서비스의 가격 구조와 사용 가능한 요금제를 살펴보겠습니다.

간단히 말해서 SERP

먼저 SERP는 Search Engine Results Pages의 약자입니다. 이들은 사용자가 Google 또는 Bing과 같은 검색 엔진을 사용하여 온라인에서 무언가를 검색할 때 제공되는 웹 페이지입니다. 사용자는 일반적으로 키워드라고 하는 특정 용어와 구문을 사용하여 검색 쿼리를 지정하고 검색 엔진은 SERP를 제공합니다.

모든 SERP는 고유합니다. 동일한 키워드 또는 쿼리 텍스트를 사용하여 동일한 검색 엔진에서 여러 검색 쿼리를 수행하는 경우에도 마찬가지입니다. 그 주된 이유는 거의 모든 검색 엔진이 검색어를 훨씬 능가하는 다양한 요소를 기반으로 결과를 제시함으로써 사용자의 경험을 맞춤화하기 때문입니다. 이러한 요소에는 사용자의 물리적 위치, 검색 기록 및 소셜 설정 등이 포함될 수 있습니다. 그리고 두 개의 SERP가 동일하게 보일 수 있고 동일한 결과를 많이 포함할 수 있지만 종종 미묘한 차이를 특징으로 합니다.

Google, Bing 또는 기타 플레이어와 같은 검색 엔진 제공업체는 지속적으로 서비스와 기술을 발전시키고 결과를 실험하고 있습니다. 그들의 목표는 사용자에게 보다 빠르고 직관적인 경험을 제공하는 것입니다. 새로운 기술이 검색 공간에 도입되고 놀라운 속도로 발전함에 따라 SERP의 모양이 바뀌고 오늘날에는 예전과 상당히 다릅니다.

유기적 결과

SERP에는 일반적으로 자연 검색결과와 유료 검색결과라는 두 가지 유형의 콘텐츠가 포함됩니다. 자연적 결과는 검색 엔진 알고리즘의 결과로 나타나는 웹 페이지의 목록입니다. 잠시 후에 이에 대해 자세히 알아보십시오. 검색 엔진 최적화(Search Engine Optimization, SEO)는 콘텐츠를 조작하여 검색 엔진이 특정 키워드나 검색 문자열에 대해 당사 웹사이트를 나열하도록 하는 과학입니다.

검색 알고리즘 및 순위 신호 정보

그래서, 유기적 인 결과로 돌아갑니다. 간단히 말해서 "순위 신호"라고 하는 여러 요소를 기반으로 검색 엔진에서 색인을 생성한 목록입니다. 예를 들어 Google에서 사용하는 검색 알고리즘에는 수백 가지 순위 요소가 있습니다. 검색 엔진 공급자는 순위 시스템의 세부 정보를 비밀로 유지하는 경향이 있습니다. 따라서 Google 외부의 아무도(아마도 내부의 많은 사람은 아닐 수 있음) 순위 신호가 무엇인지 정확히 알지 못하지만 일부는 다른 것보다 더 중요한 것으로 간주됩니다.

SERP API를 사용하는 이유는 무엇입니까?

누구나 SERP API를 사용해야 하는 몇 가지 이유가 있습니다. 귀하의 제품 및 웹사이트에 대한 SERP 데이터를 주기적으로 검색하고 시간이 지남에 따라 추적해야 하는 분명한 필요성이 있습니다. 이는 모든 SEO 전략의 필수 부분이기 때문입니다. 순위가 지속적으로 변동하고 시간이 지남에 따라 검색 키워드가 점점 더 적용 가능해지고 가치가 높아지는 상황에서 이러한 변경 사항을 파악하는 유일한 방법은 기성품 SaaS(Software-as-a-Service)를 사용하는 것입니다. ) Serpstack과 같은 SERP API를 사용하여 SERP 데이터를 자신의 애플리케이션이나 웹사이트에 직접 구현하는 솔루션입니다.

간단히 말해서 브라우저를 사용하여 SERP 데이터를 검색하는 것과 Serpstack과 같은 SERP API를 사용하는 것의 주요 차이점은 응답 형식입니다. Serpstack API는 사내 소프트웨어에서 쉽게 구문 분석되는 JSON 데이터를 반환합니다. 이를 사용하면 주변의 모든 웹 서식에서 의미 있는 데이터를 추출하지 않아도 됩니다.

서프스택 소개

한 문장으로 Serpstack은 실시간 정확한 Google 검색 결과 API입니다. 전 세계에서 가장 큰 브랜드 중 일부가 신뢰하는 이 JSON REST API는 번개처럼 빠르고 사용하기 쉽습니다. 이 제품은 영국 런던과 오스트리아 비엔나에 기반을 둔 소프트웨어 회사인 apilayer에서 구축 및 유지 관리합니다. 원래 자동화된 방식으로 검색 엔진 위치를 추적해야 하는 내부 필요성에서 만들어진 이 제품은 시장에서 가장 신뢰할 수 있는 SERP API 중 하나로 성장했습니다. apilayer의 경우, Currencylayer, Invoicely 및 Eversign을 포함하여 전 세계적으로 가장 인기 있는 API 및 SaaS 제품을 만든 회사입니다.

Serpstack API는 API 요청이 있을 때마다 프록시 네트워크와 독점 스크래핑 기술을 사용하여 자동화된 방식으로 검색 엔진에서 SERP 데이터를 검색합니다. 결과 SERP 데이터는 공개적으로 사용 가능하며 누구나 액세스할 수 있습니다. 또한 Serpstack API는 웹 결과, 이미지 결과, 비디오 결과, 뉴스 결과, 쇼핑 결과, 후원 광고, 질문 등을 포함하여 Google에서 반환하는 거의 모든 검색 결과 유형을 지원합니다.

세계에서 가장 인기 있는 실시간 API 서비스가 실행되는 시스템인 apilayer 클라우드 인프라를 기반으로 구축된 Serpstack API는 모든 단계에서 확장성과 유연성이 뛰어납니다. 실시간으로 어떤 규모로든 Google SERP 데이터를 스크랩하는 방법을 제공하도록 제작되었습니다. 간단한 HTTP GET URL 구조를 사용하여 서비스를 구현하는 데 몇 분 밖에 걸리지 않으며 결과는 JSON 또는 CSV 형식으로 반환됩니다.

Serpstack의 주요 기능

기능 면에서 Serpstack API는 원하는 것이 없습니다. 무엇보다도 이 서비스는 확장성이 뛰어나고 항상 대기열이 없습니다. Apilayer의 강력한 클라우드 인프라는 대기열 없이도 대용량 API 요청을 견딜 수 있도록 간단하게 구축되었습니다. 그것은 회사의 여러 제품의 핵심이었습니다. 또한 고도로 사용자 정의할 수 있습니다. 두 고객에게 동일한 요구 사항이 없으므로 위치, 언어, 장치 등을 포함한 일련의 옵션을 기반으로 자동 검색 쿼리를 맞춤화할 수 있습니다.

이 제품을 사용하면 글로벌 IP, 브라우저 클러스터 또는 CAPTCHA에 대한 걱정이 사라집니다. 강력한 기본 프록시 네트워크 덕분에 이 SERP 스크래핑 API를 사용하면 거의 모든 상황을 처리할 수 있습니다. 그리고 예산에 맞추기도 쉽습니다. 최대 100개의 월간 요청을 무료로 받을 수 있으며, 그 이상이 필요한 경우(아마도 그럴 가능성이 높음) 유료 플랜은 월 $29.99부터 시작합니다. 제품 가격에 대해서는 곧 자세히 다루도록 하겠습니다.

다음은 제품의 가장 중요한 기능에 대한 개요입니다.

단순 통합

Scrapestack API를 사용하는 것은 처음부터 거의 쉬울 수 없습니다. 맞춤형 쿼리를 생성하고 맞춤형 위치, 장치, 언어 등을 사용하여 규모에 상관없이 SERP 페이지를 스크랩하기 시작하는 데 몇 분 밖에 걸리지 않습니다.

높은 수준의 보안

Serpstack API에서 송수신되는 모든 데이터 스트림은 256비트 SSL 암호화를 사용하여 암호화됩니다. 이것은 은행 사이트나 대부분의 전자 상거래 플랫폼에서 사용하는 것과 동일한 유형의 보안입니다. 데이터는 계속 보호되므로 안심하셔도 됩니다.

비교할 수 없는 속도와 가용성

거의 완벽한 가용성 점수로 Scrapestack API가 필요할 때 사용할 수 있습니다. 그리고 apilayer는 속도를 타협하지 않습니다. API로 전송된 API 요청은 밀리초 단위로 처리됩니다. 물론 결과가 얼마나 빨리 나오는지는 Google의 응답 시간에 달려 있습니다.

출력 형식 선택

SERP 데이터를 더 쉽게 고소할 수 있도록 Serpstack을 사용하기 쉬운 REST API는 JSON 또는 CSV 응답을 선택할 수 있는 옵션을 제공합니다. 따라서 모든 프로그래밍 언어와 호환됩니다.

세계적 수준의 지원

종종 제품은 기술 지원 구조만큼만 훌륭하다고 말합니다. 이번에도 Scrapestack이 빛나는 곳입니다. 기술적인 질문이 있는 경우 숙련된 전문가 팀이 귀하의 요청을 도와드릴 것입니다. 응답이 빠르고 서비스가 잘 작동합니다.

광범위한 문서

지원만큼 중요한 문서는 종종 제품 사용 방법을 배우는 주요 방법이 될 것입니다. Serpstack은 탐색 대기 중인 광범위한 API 문서를 제공합니다. 그것을 사용하면 단 몇 분 안에 시작하고 몇 주 또는 몇 달이 아닌 며칠 만에 전문가가 될 것입니다.

Serpstack 사용하기

제품의 뛰어난 기능에 대한 자랑은 충분합니다. 실제로 제품을 사용하는 방법과 할 수 있는 다양한 유형의 요청 및 예상할 수 있는 해당 응답을 살펴보겠습니다.

기초

Serpstack API를 사용하려면 먼저 계정에 가입해야 합니다. 이것은 무료이며 결과적으로 고유한 API 액세스 키가 할당됩니다. 이것은 지금부터 사용 가능한 끝점에 액세스하기 위해 간단한 HTTP GET 요청을 통해 API로 인증하는 데 사용할 것입니다. 따라서 API를 사용하려면 " access_key " 매개변수를 사용하여 기본 URL에 API 키를 추가하기만 하면 됩니다. 다음은 매우 기본적이고 완전히 쓸모가 없지만 일반적인 요청은 다음과 같습니다.

https://api.serpstack.com/search ? access_key = 귀하의_ACCESS_KEY

보안 강화를 위해 모든 유료 플랜에서는 256비트 SSL 암호화를 사용할 수 있습니다. 이를 사용하려면 HTTP 요청 대신 HTTPS 요청을 보내기만 하면 됩니다. 예를 들어 위의 암호화 예제는 다음과 같습니다.

https://api.serpstack.com/search ? access_key = 귀하의_ACCESS_KEY

API 요청이 실패할 때마다 Serpstack API는 오류에 대한 세부 정보가 포함된 JSON 객체를 반환합니다. 예를 들어 최대 허용 API 요청 제한에 도달하거나 초과한 경우 API에서 반환되는 내용은 다음과 같습니다. 각 구독 계획에는 만들 수 있는 요청 수에 대한 제한이 다릅니다.

{ "success": false, "error": { "code": 104, "type": "usage_limit_reached", "info": "월간 API 요청 볼륨에 도달했습니다. 요금제를 업그레이드하세요." } }

API 요청 및 매개변수

달리 지정하지 않는 한 Serpstack API는 항상 기본적으로 Google에서 검색 결과를 제공합니다. 따라서 Google 검색 결과용 API를 쿼리하려는 경우 API의 기본 URL에 " 쿼리 " 매개변수를 추가하고 선택한 검색 쿼리로 설정하기만 하면 됩니다. 인증 및 암호화에서 검색어로 "mcdonalds"를 사용하는 쿼리는 다음과 같습니다.

https://api.serpstack.com/search ? access_key = YOUR_ACCESS_KEY & 쿼리 = 맥도날드

보시다시피 이것은 다소 간단한 구문입니다. 당신이 확실히 상상했던 것처럼, 검색 결과의 범위를 더 좁히기 위해 요청에 추가할 수 있는 수많은 선택적 매개변수가 있습니다. 잠시 후 그 중 몇 가지를 살펴보겠지만 모든 항목에 대한 자세한 목록은 온라인 API 문서에서 확인할 수 있습니다.

API 응답

Serpstack API에서 얻을 응답은 검색어와 사용하기로 선택한 매개변수에 따라 크게 달라집니다. 필터링이 지정되지 않은 기본 쿼리는 엄청난 양의 데이터를 반환합니다. 다음은 위의 예제 쿼리에서 얻을 수 있는 응답의 시작 부분입니다.

{ "요청": { "성공": true, "processed_timestamp": 1566207832, "search_url": "https://www.google.com/search?q=mcdonalds", "total_time_taken": 1.5 }, "search_parameters" : { "engine": "google", "query": "mcdonalds", "type": "web", "device": "desktop", "google_domain": "google.com", "hl": "ko ", "gl": "us", "page": "1", "num": "10" }, "search_information": { "total_results": 759000000, "time_taken_displayed": 0.91, "did_you_mean": null, "showing_results_for": null, "query_displayed": "mcdonalds", "detected_location": null,"no_results_for_original_query": 거짓 },

위 샘플의 목적은 결과가 어떻게 보일지 짐작할 수 있도록 하는 것입니다. 나는 응답의 처음 25줄만 포함시켰는데, 그 전체 길이는 400줄이 넘습니다.

Google 검색을 사용할 때 눈치채셨겠지만 일반적인 검색 결과 페이지에는 각기 다른 유형의 결과를 표시하는 다른 섹션이 있습니다. 유료 광고 결과, 자연 검색결과, 이미지, 비디오 등이 표시됩니다. 또한 페이지 상단의 리본을 통해 지도, 뉴스, 쇼핑 또는 책과 같은 특정 유형의 결과를 표시할 수 있습니다. . 다양한 선택적 매개변수를 사용하면 얻고자 하는 검색 결과 유형을 지정할 수 있으므로 결과 JSON 파일의 구문 분석이 훨씬 간단해집니다. 얻을 수 있는 다양한 유형의 결과를 좀 더 자세히 살펴보겠습니다.

광고 결과

검색어에 대한 스폰서 광고가 있을 때마다(가장 자주 있을 것입니다) API 응답은 광고 개체와 함께 제공됩니다. 여기에는 검색 결과에 표시된 순서대로 모든 광고가 포함됩니다. 여기에는 검색 결과의 상단과 하단에 표시되는 광고가 모두 포함됩니다.

유기적 결과

자연 검색 결과는 Google에서 제공하는 주요 검색 결과이며 특히 관심이 있을 것입니다. 웹 트래픽, 백링크, 소셜 미디어 존재 여부 등과 같은 일련의 요인에 의해 결정됩니다. , 경쟁 우위를 유지하기 위해 Google에서 정확한 알고리즘을 비밀로 유지합니다. 이 결과는 API에 의해 자세히 구문 분석되고 " organic_results " 로 반환됩니다 .

이미지 결과

Google 검색에서 이미지 결과를 가져오는 두 가지 방법이 있는 것처럼 API에서 이미지를 반환할 수 있는 두 가지 방법이 있습니다. 표준 웹 검색을 수행할 때 Google에서 검색 결과 내에서 일부 이미지를 제공합니다. 인라인 이미지라고 하는 이러한 이미지는 " inline_images " 배열 내에서 Scrapestack API에 의해 반환됩니다 .

"image_results": [ { "position": 1, "title": "맥도날드 골드 카드: 실화...", "width": 1024, "height": 683, "image_url": "https:// www.rd.com/app/uploads/2017/12/the-true-story-behind-the-mysterious-mcdonalds-gold-card-673955074-Vytautas-Kielaitis-1024x683.jpg", "유형": "png" , "url": "https://rd.com", "source": "https://rd.com" }, { "position": 2, "title": "McDonald's - Wikipedia", "width" : 1200, "높이": 1051, "이미지 URL": "https://upload.wikimedia.org/wikipedia/commons/thumb/3/36/McDonald%27s_Golden_Arches.svg/1200px-McDonald%27s_Golden_Arches.s"v , "유형": "png", "url": "https://en.wikipedia.org/wiki/McDonald%27s", "source": "https://en.wikipedia.org" }, { "position": 3, "title": "최고의 새 글로벌 메뉴 항목 ...", "너비": 970, "높이": 545, "image_url": "https://assets3.thrillist.com/v1/image/2825587/size/gn-gift_guide_variable_c.jpg", "유형": "png", "url": "https://thrillist.com/", "소스": "https://thrillist.com" } ]"유형": "png", "url": "https://thrillist.com/", "소스": "https://thrillist.com" } ]"유형": "png", "url": "https://thrillist.com/", "소스": "https://thrillist.com" } ]

반면에 type 매개변수를 images로 설정하여 이미지를 구체적으로 검색하면 이미지가 " image_results " 배열 로 반환됩니다 . 이러한 상황에서 API는 기본적으로 100개의 이미지를 반환합니다.

비디오 결과

이미지에 대해 방금 살펴본 것과 똑같은 고려 사항은 글로벌 검색 결과 또는 전용 비디오 결과에 두 인라인 비디오를 모두 사용할 수 있는 비디오 결과에도 유효합니다.

페이지로 이동하여 Serpstack API가 반환할 수 있는 다양한 유형의 결과에 대한 자세한 정보를 제공할 수 있지만 이해하고 있다고 생각합니다. 일반적인 Google 검색에 의해 반환된 결과 유형이 무엇이든 API 응답 내에서도 사용할 수 있다고 말하는 것으로 충분합니다. API는 이미 설명한 결과 유형 외에도 뉴스 결과, 쇼핑 결과 및 지역 결과는 물론 결과 페이지의 답변 상자, 날씨 상자, 이벤트, 주요 회전 목마, 주요 뉴스 등의 내용을 반환합니다.

지원되는 프로그래밍 환경

Serpstack API의 가장 좋은 점 중 하나는 대부분의 환경에서 쉽게 사용할 수 있다는 것입니다. 사용하는 언어가 무엇이든, HTTP 요청을 보낼 수만 있다면 계속 사용하셔도 좋습니다. PHP 또는 Python과 같은 인기 있는 모든 웹 언어가 지원됩니다. 실제로 API 문서에는 PHP, Python, Nodejs, jQuery, Go 및 Ruby에서 API를 사용하는 방법에 대한 예제가 포함되어 있습니다.

예를 들어 다음은 총 검색 결과 수와 Serpstack API에서 반환된 각 유기적 검색 결과를 인쇄하는 PHP 코드입니다.

$queryString = http_build_query([ 'access_key' => 'YOUR_ACCESS_KEY', 'query' => 'mcdonalds', ]); $ch = curl_init(sprintf('%s?%s', 'https://api.serpstack.com/search', $queryString)); curl_setopt($ch, CURLOPT_RETURNTRANSFER, true); $json = curl_exec($ch); curl_close($ch); $api_result = json_decode($json, true); echo "총 결과: ", $api_result['search_information']['total_results'], PHP_EOL; foreach ($api_result['organic_results'] as $number => $result) { echo "{$number}.{$result['title']}", PHP_EOL; }

다음은 Python에서 동일한 작업을 수행하는 몇 가지 코드입니다.

가져오기 요청 params = { 'access_key': 'YOUR_ACCESS_KEY', 'query': 'mcdonalds' } api_result = requests.get('https://api.serpstack.com/search', params) api_response = api_result.json() 인쇄 "총 결과: ", api_response['search_information']['total_results'] for number, result in enumerate(api_response['organic_results'], start=1): print "%s. %s" % (숫자, 결과 ['제목'])

가격 및 계획

Serpstack API는 필요에 따라 여러 계획에서 사용할 수 있습니다 . 가장 기본적인 플랜은 무료 플랜입니다. 이름에서 알 수 있듯이 무료이지만 일반적인 평가판과 같이 시간 제한은 없지만 기능 및 사용 제한이 있습니다. 한 달에 최대 100개의 검색만 실행할 수 있습니다.

다음 세 가지 수준은 모든 기능을 갖추고 있으며 실행할 수 있는 최대 월간 검색 수에 의해서만 달라집니다. 베이직 플랜은 월 $29.99에 5000, 비즈니스 플랜은 월 $99.99, 최대 20,000, 비즈니스 프로 플랜은 월 $199.99에 50,000건의 검색을 실행할 수 있습니다. 이러한 계획 중 어느 것도 적합하지 않은 경우 정확한 요구 사항에 맞게 사용자 지정할 수 있는 다양한 가격의 Enterprise 계획도 있습니다. 월별 결제 대신 연간 결제를 선택하면 20% 할인을 받을 수 있어 서비스를 더욱 저렴하게 이용할 수 있습니다.

마무리

간단히 말해서, Serpstack API는 Google에서 SERP 데이터를 가져와야 할 때마다 잘 사용할 수 있는 사용하기 쉽고 완전한 기능을 갖춘 제품입니다. 뛰어난 가동 시간과 인상적인 응답 시간은 최고의 자산입니다. 다른 우수한 API를 제공한 apilayer의 지원을 받아 이 API가 귀하가 기대하는 결과를 제공할 것이라고 확신합니다. 추천드릴 수 밖에 없는 제품입니다.