【데이터 배포】PostgreSQL로 데이터를 내보내는 방법 | 웹 스크래핑 툴 | ScrapeStorm

ScrapeStorm은 다양한 내보내기 방법을 제공합니다. 스크랩된 데이터를 PostgreSQL에 게시해야 하는 경우 다음과 같이 내보낼 수 있습니다.

1단계:

데이터를 스크랩한 후 내보내기 인터페이스에서 PostgreSQL 옵션을 선택합니다.

2단계:

새 구성을 만들거나 이전에 구성된 데이터베이스를 사용하려면 데이터베이스를 선택하세요.

새 구성을 작성할 때 먼저 데이터베이스 유형을 선택한 후 호스트, 포트, 로그인 이름 및 비밀번호를 입력합니다.

입력이 잘못되면 오류가 나타납니다. 이때 호스트, 포트, 로그인 이름 및 비밀번호가 올바르게 입력되었는지 확인해야 합니다.

입력이 정확하면 DB 이름이 바로 나타날 것입니다. DB 이름을 선택한 후 DB Table이 나타날 것입니다.

그런 다음 사용자는 DB 문자를 선택할 수 있습니다. utf8과 gbk의 두 가지 선택이 있습니다.

3단계:

모든 설정이 완료된면 “다음” 버튼을 클릭하고 필드 매핑을 설정할 수 있습니다.

ⅰ. 데이터베이스에 게시된 단일 데이터가 너무 크면 게시가 실패할 수 있습니다. 이 경우 데이터베이스 버퍼의 크기 및 연결 시간과 같은 매개 변수를 조정할 수 있습니다.

ⅱ. 데이터가 정상적으로 해제될 수 있도록 데이터베이스 필드 유형이 해당 필드의 데이터를 저장할 수 있는지 확인하세요(기본값은 텍스트 유형).

ⅲ. 데이터 대상 필드가 고유하며, 중복 설정 필드는 정상적으로 데이터를 해제할 수 없습니다.

4단계:

필드 매핑 설정이 완료되면 내보내기 설정을 하도록 “다음” 버튼을 클릭합니다.

내보내기 인터페이스에서 수동으로 내보내거나 자동으로 내보내도록 선택할 수 있습니다.

수동으로 내보내도록 선택한 경우 내보내지 않은 모든 행을 내보내거나 선택한 행을 내보내거나 범위 내의 데이터를 내보내도록 선택할 수 있습니다.

자동 내보내기를 사용하는 경우 소프트웨어는 실시간으로 스크랩된 새 데이터를 포함하여 모든 데이터를 내보내기 위한 별도의 내보내기 작업을 시작합니다.

참고: 자동 내보내기는 Premium 회원권 이상의 사용자만 사용할 수 있습니다. 스케쥴 기능과 결합하면 사용자 시간을 크게 절약하고 효율성을 향상시킬 수 있습니다.

5단계:

내보내기 형식을 선택했으면 “내보내기” 단추를 클릭하여 데이터를 내보냅니다.

내보내기가 올바른 경우 내보내기 횟수 로그가 직접 나타납니다.

내보내기가 올바르지 않으면 실행 로그에 내보내기 실패 메시지가 표시됩니다. 빨간색 텍스트 프롬프트가 나타나면 필드 매핑 설정이 올바른지 확인할 수 있습니다.

내보내기가 성공하면 글머리 기호 상자가 나타나고 사용자는 표시 여부를 선택할 수 있습니다.

이전에 정상적으로 내보낼 수 있는 경우 데이터를 정상적으로 표시하면 해당 마커 수가 나타납니다.

이전 내보내기가 실패한 경우 현재 데이터가 정상적으로 표시되지 않고 마커 수가 0으로 표시됩니다.

6단계:

데이터베이스로 내보낼 경우의 효과는 다음과 같습니다.