ABCmart 제품의 이름, 브랜드, 가격 등 정보를 완벽하게 스크랩하는 방법 | 웹 스크래핑 툴 | ScrapeStorm

오늘날 빠르게 발전하는 전자상거래 시대에, 많은 기업가, 시장 분석가, 디지털 마케팅 전문가들이 온라인 제품 정보를 얻는 것이 점점 더 필요해지고 있습니다. 온라인 제품 정보를 수집하는 것은 그들이 더 현명한 비즈니스 결정을 내리는데 도움이 되어, 치열한 시장 경쟁에서 유리한 위치를 차지할 수 있게 합니다.

ABCmart 소개:
ABCmart는 신발과 관련 액세서리를 전문으로 판매하는 유명한 온오프라인 통합 기업으로, 다양한 소비자의 요구를 만족시키기 위해 다양한 제품을 제공합니다. 제품의 품질과 다양성에 중점을 두며, 자세한 제품 설명과 정확한 재고 정보를 통해 고객에게 훌륭한 쇼핑 경험을 제공합니다.

ScrapeStorm 소개:
ScrapeStorm은 AI 기술을 적용된 강력한 자동 웹크롤러 입니다.이 소프트웨어는 웹사이트의 중요한 정보를 스마트하게 식별하고 추출합니다. 프로그래밍 경험이 없는 초보자도 데이터 수집을 쉽게 할 수 있습니다.

자세한 과정:
1. 소프트웨어 다운로드
ScrapeStorm 공식 홈페이지에서 소프트웨어를 다운로드하고 설치합니다.( 해당 운영 시스템에 맞게 자동 다운로드 됩니다.)
공홈 링크: https://kr.scrapestorm.com/

2. 새 태스크 만들기
소프트웨어 홈페이지의 입력란에 ABCmart에 남자 스니커즈 카테고리 웹사이트 주소를 입력하고, 오른쪽의 “스마트 모드”를 클릭합니다.
ABCmart 링크: https://abcmart.a-rt.com/display/category/main?genderGbnCode=10000&ctgrNo=1000000246&page=1

열린 페이지는 다음과 같습니다:

TIP: ScrapeStorm 스마트 모드를 사용할 때, 단일 페이지, 목록, 목록+상세 페이지 등 다양한 유형의 웹 페이지에 적용됩니다. 여러 개의 URL을 일괄 수집할 때는 같은 유형의 웹 페이지를 함께 수집하는 것이 좋습니다. 다른 유형의 웹 페이지의 경우, 별도의 수집 작업을 생성하는 것이 좋습니다.

3. 필드 수정 및 추가
소프트웨어 하단에 이미 자동으로 인식된 데이터 필드를 볼 수 있습니다. 마우스 우클릭하면, 필드 이름 수정, 데이터 처리, 필드 삭제 등의 작업을 할 수 있으며, 오른쪽의 “필드 추가”를 클릭하여 수집하려는 데이터를 추가할 수 있습니다.

우측에 “심층 스크래핑”을 클릭해 상세페이지로 들어가 상세정보를 얻을 수 있습니다.

상세페이지의 필드도 동일하게 수정 또는 추가할 수 있습니다.

4. 스크래핑 시작
오른쪽 하단의 “스크래핑 시작”을 클릭합니다.

여기선 다양한 수집 작업을 설정할 수 있습니다, 예를 들어 스케줄러, IP 변경, 자동 내보내기, 파일 다운로드 등이 있습니다. 설정을 마친 후 “시작”을 클릭하면 스크래핑 작업이 시작됩니다.

이렇게 실시간으로 수집되고 있는 데이터를 볼 수 있습니다.

5. 스크래핑 결과 내보내기
모든 데이터 수집이 완료되면, 소프트웨어는 자동으로 팝업을 띄워 “내보내기”또는 “나중에 내보내기”를 선택할 수 있게 합니다.

ScrapeStorm은 Excel, CSV, TXT, HTML 및 데이터베이스 MySQL, SQL Server, PostgreSQL, MongoDB, GoogleSheet 등 다양한 파일 형식을 지원합니다.

이번 글에서는 Excel 파일로 데이터를 내보내겠습니다. 아래 그림은 내보내기한 결과물입니다.

이 글에서 보여준 스크랩 태스크는 댓글에 올려두었으며, 필요하시면 직접 연락주셔도 됩니다.

오늘의 내용은 여기까지입니다. 스크래핑에 대해 궁금한 점이 있거나 더 많은 정보가 필요하다면 언제든지 댓글로 남겨주세요.다음에 또 만나요!