작업 구축
Octoparse를 사용하면 스크래퍼 코드를 작성하지 않고 추출 워크플로를 만들 수 있습니다.템플릿
일반적인 웹사이트와 데이터 수집 시나리오를 위한 사전 구축 워크플로로 시작합니다.
자동 감지
Octoparse가 페이지 데이터를 자동으로 식별하고 시작 워크플로를 생성하도록 합니다.
노코드 빌더
요소를 선택하고 동작을 시각적으로 추가하여 사용자 지정 워크플로를 구축합니다.
데이터 정제
내보내기 전에 필드 값을 정리하고 이름 변경, 형식 지정 또는 일부 추출을 수행합니다.
작업 실행
작업을 구축하고 테스트한 후 워크플로에 맞는 환경에서 실행하세요.안정성 도구
웹사이트는 변경되거나 콘텐츠를 동적으로 로드하거나 세션을 요구하거나 자동화된 동작을 차단할 수 있습니다. Octoparse에는 작업 안정성 개선에 도움이 되는 도구가 포함되어 있습니다.차단 방지
일반적인 차단 메커니즘과 Octoparse 안정성 옵션을 이해합니다.
프록시
IP 로테이션 또는 위치별 액세스가 필요할 때 프록시 설정을 사용합니다.
CAPTCHA
CAPTCHA가 수집 작업에 미치는 영향과 사용할 수 있는 옵션을 알아봅니다.
자동 로그인 및 쿠키
로그인, 세션 또는 쿠키가 필요한 웹사이트를 처리합니다.
모니터링
모니터링 도구는 작업의 성공 여부와 문제가 발생한 위치를 파악하는 데 도움이 됩니다. 대시보드, 로그 및 이벤트 레코드를 사용해 다음을 확인하세요.- 실행 상태
- 작업 진행 상황
- 오류 및 경고
- 로컬 및 클라우드 실행 기록
- 출력 가용성
데이터 내보내기
Octoparse는 추출 데이터를 파일 및 연결된 대상으로 내보낼 수 있습니다. 일반적인 대상은 다음과 같습니다.- CSV, Excel, JSON, HTML 및 XML 파일
- Google Sheets
- MySQL, PostgreSQL, SQL Server 및 Oracle과 같은 데이터베이스
- Amazon S3, Google Drive 및 Dropbox와 같은 클라우드 저장소
거버넌스 및 협업
Octoparse는 팀 워크플로를 위해 다음을 포함한 협업 및 보안 관련 기능을 지원합니다.- 역할 기반 액세스를 통한 하위 계정 관리
- 팀원 간 작업 공유 및 할당
- 웹 콘솔의 중앙 집중식 작업 모니터링
- 계정 보안 및 내보내기 대상 제어
사용 가능한 기능은 Octoparse 플랜, 작업 유형 및 작업이 로컬이나 클라우드 중 어디에서 실행되는지에 따라 달라질 수 있습니다.