본문 바로가기

정보

무료 웹스크래핑 Dataminer 사용 방법 │아마존 고객 리뷰 │keto diet

웹스크래핑 서비스인 dataminer 사용 방법을 정리합니다. 미리 말씀드리면, 정말 매우 간단합니다. 다만, 일정한 페이지까지는 웹스크래핑이 무료이나, 무료 서비스 이용 범위를 넘어서면 과금된다는 점은 미리 말씀드리니 사용 시 유의하기 바랍니다. 웹스크래핑할 예제는 아마존 keto diet 관련 품목 중의 하나를 골라 고객 리뷰 관련 정보를 스크래핑해 보겠습니다. 

 

The Ketogenic Diet: A Guide to Weight Loss and Improved Health

The ketogenic diet is a low-carb, high-fat eating routine that has been demonstrated to help people with weight reduction and other medical issues. It involves ascertaining macronutrient needs, making a keto dinner plan, integrating high-fat food sources i

e-datanews.tistory.com

 

DataMiner 크롬 확장 프로그램 설치 │로그인

DataMiner를 활용하여 아마존 고객 리뷰 수집과 활용 방법에 관해서는 이미 아래 포스팅에서 설명한 바 있습니다. 고객 리뷰 정보 수집 후, 분석 방법은 아래 포스팅에서 다시 확인하기 바랍니다. 

 

무료 코딩 없는 웹스크래핑 텍스트 마이닝 데이터 시각화│일본 유기농 립스틱 아마존 재팬 현

무료로 코딩 없이 웹스크래핑 도구인 DataMiner와 KH Coder3을 이용하여, 실제 아마존 재팬에서 판매 중인 일본산 유기농 립스틱 고객 리뷰 분석 사례를 정리해 보겠습니다. 1. 무료 웹스크래핑, DataMin

e-datanews.tistory.com

이번 포스팅에서는 DataMiner의 구체적인 활용 방법을 설명하겠습니다. 먼저 DataMiner 웹사이트나 크롬 웹스토어에서 DataMiner 크롬 익스텐션을 설치합니다. 설치한 후에는 구글 메일로 서비스에 가입한 후, 아래 이미지처럼 로그인하여 무료 사용량을 확인합니다. 

DataMiner 로그인 이미지
DataMiner 로그인 이미지

 

아마존 고객 리뷰 페이지 로딩 │DataMiner 실행

아마존 고객 리뷰를 수집할 페이지를 로딩합니다. 이번 포스팅 예제는 keto diet section 중에서 별도 인증을 필요로 하지 않는 품목 중에서 골랐고, 해당 상품 페이지는 아래 이미지를 클릭하면 확인할 수 있습니다. 

Keto Diet Top 100 Low Carb Foods All-in-One Magnet 8"x11” Grocery List Accurate Net Carbs Calories Counter Diabetes Weight Loss Plan Cheat Sheet Chart Magnetic Diabetic Cookbook Guide Accessories Gift
Keto Diet Top 100 Low Carb Foods All-in-One Magnet 8"x11” Grocery List Accurate Net Carbs Calories Counter Diabetes Weight Loss Plan Cheat Sheet Chart Magnetic Diabetic Cookbook Guide Accessories Gift

고객 리뷰를 수집한 페이지를 로딩한 후에는 DataMiner를 실행시킨 후, 위의 그림처럼 scrape this page 파란색 실행 버튼을 클릭합니다. 

 

DataMiner  서비스 구성 요인 

그럼 아래 이미지와 같은 DataMiner 서비스 페이지가 실행됩니다. 서비스 화면의 각 구성요인들을 확인하기 바랍니다. 이미지 우측 상단에 유튜브 튜토리얼 영상도 있으니 함께 참고하기 바랍니다. 

DataMiner 서비스 구성 요인 페이지
DataMiner 서비스 구성 요인 페이지

 

아마존 고객 리뷰 정보 수집 준비 

아마존 고객 리뷰 정보 수집을 위한 준비를 하겠습니다. 아래 이미지 우측 상단에 유튜브 튜토리얼도 있으니 함께 참고하기 바랍니다. 우선 이미지의 번호 순서대로 1번부터 4번까지 순서대로 클릭하여 선택합니다. 특히 4번의 경우 몇 페이지를 스크래핑할 것인지를 정해야 합니다만, 이번 예제에서는 3페이지까지만 스크래핑하겠습니다. 많은 페이지를 스크래핑하는 경우 과금된다는 점을 다시 한번 확인하기 바랍니다. 모든 준비가 끝났다면, 5번의 파란색 버튼 scrape 3 pages를 클릭하여 실행합니다. 

아마존 고객 리뷰 정보 수집을 위한 DataMiner 셋팅

 

아마존 고객 리뷰 수집 완료 │다운로드

위 이미지의 5번 scrape 3 pages를 클릭한 순간, 아래 이미지와 같이 페이지 스크래핑이 바로 완료되었고, 6번의 다운로드를 클릭하여 엑셀 등의 파일로 내려받을 수 있습니다. 

아마존 고객 리뷰 수집 완료 및 다운로드
아마존 고객 리뷰 수집 완료 및 다운로드

실제로 엑셀로 다운로드한 파일도 아래와 같이 업로드해두겠습니다. 

Amazon_Review_Page_All_Data___1490760423.xlsx
0.03MB

 

정리

앞에서 정리한 것처럼 DataMiner를 이용한 아마존 고객 리뷰 수집 방법은 정말 간단합니다. 수집된 고객 정보를 어떻게 정리하여 제시할 것인지는 이전 포스팅에서 설명한 바 있는 Copilot Amazon 텍스트마이닝 서비스 결과를 다시 한번 확인해 보기 바랍니다. 

 

Copilot Amazon│ChatGPT for Amazon 사용법

Shulex Copilot의 ChatGPT 기반 아마존 고객 리뷰, 리스팅 최적화 활용 방법을 정리합니다. 먼저 크롬 익스텐션(확장) 프로그램을 설치하고, 구글 메일로 가입 및 로그인 후, 활용 가능합니다. 또한 해

e-datanews.tistory.com

물론 아마존 리뷰 중 가짜(fake) 리뷰가 많은 품목 페이지는 스크래핑한 후, 텍스트 마이닝 분석을 실행한다 해도 큰 의미가 없습니다. 따라서 다음 포스팅의 리뷰 메타 서비스를 이용하여 가짜 리뷰 품목들은 사전에 선별할 필요가 있습니다. 

 

아마존 가짜 거짓 리뷰 확인 방법 : 어린이 선크림│reviewmeta.com

이전 포스팅에서는 아마존에서 구매 가능한 유아 어린이 선크림(sunscreen) 제품들을 살펴보았습니다. 이번 포스팅에서는 이어서 리뷰 메타를 이용하여 유아 어린이 자외선 차단제 중 상품 하나를

e-datanews.tistory.com

수집된 아마존 고객 리뷰 정보들은 앞서 포스팅한 KHCoder를 이용하여 텍스트마이닝 분석을 시도해 보기 바랍니다. 그럼에도 부득불 R로 구현해보고 싶은 분들은 다음 포스팅들을 참고하기 바랍니다. R 실행코드는 해당 포스팅에 업로드되어 있습니다. 

 

R 아마존 고객 리뷰 N-gram 분석 │상관 관계 분석 │Read reviews that mention

텍스트 마이닝 분석 방법 중 단어 간의 상관관계와 n-gram 분석을 간단히 실습해보겠습니다. 특히 아마존 리뷰 전에 read reviews that mention라는 부분이 있습니다. 해당 부분이 이번 포스팅에서 다룰 n

e-datanews.tistory.com

이번 포스팅은 여기서 마무리하겠습니다. R의 rvest 패키지 등을 이용한 코딩 없이도 몇 번의 클릭만으로 아마존 고객 리뷰 정보 수집이 가능하니 한 번 시도해 보시기 바랍니다.