스크래핑과 크롤링은 자주 혼동되지만 서로 다른 문제를 해결합니다. 기술적·목적상 차이와 각각의 적절한 사용 시점을 알아보세요.
웹 스크래핑과 웹 크롤링은 흔히 같은 의미로 사용되지만 실제로는 서로 연계되는 두 가지 별개의 작업입니다.
크롤링: 탐색
크롤링의 목적은 탐색입니다. 크롤러는 링크를 따라 웹사이트를 이동하고 구조를 파악하며 URL을 수집합니다. 중요한 페이지를 모두 찾기 위한 탐험과 비슷합니다. 검색 엔진은 웹을 크롤링해 어떤 정보가 어디에 있는지 색인을 만든다는 대표적인 예입니다.
스크래핑: 추출
스크래핑의 목적은 추출입니다. 필요한 데이터가 있는 페이지를 파악한 후 스크래퍼가 해당 페이지를 방문해 가격, 제목, 설명, 연락처 등 활용 사례에 필요한 필드를 가져옵니다. 목표는 탐색이 아니라 구조화된 결과입니다.
두 단계로 분리하는 이유
실제 데이터 수집 작업은 대부분 두 과정을 모두 포함합니다. 먼저 사이트를 크롤링해 관련 페이지 URL을 모두 찾고, 각 페이지를 스크래핑해 실제 데이터를 추출합니다. 한 번에 두 작업을 수행할 수도 있지만 복잡한 사이트에서는 두 단계로 나누는 편이 효율적입니다. 크롤링 단계가 정리된 URL 목록을 만들고 스크래핑 단계가 그 목록에서 콘텐츠를 추출합니다. 각 단계를 독립 실행하고 전체 작업을 다시 하지 않고 실패만 재시도하며 여러 페이지의 스크래핑을 병렬화할 수 있어 대규모 수집 속도가 크게 향상됩니다.
Octoparse가 두 작업을 처리하는 방식
Octoparse는 전용 AI 기반 모드로 두 작업을 모두 처리합니다. AI Crawl은 사이트의 링크 구조를 분석하고 페이지 넘기기, 카테고리 또는 중첩 페이지에서 대상 URL을 수집하는 워크플로를 자동 생성합니다. AI Scrape 템플릿은 이 URL을 받아 각 페이지에서 구조화된 데이터를 추출합니다. 두 단계를 연결되지만 독립적인 작업으로 처리하므로 URL 목록이 준비되면 수백 또는 수천 페이지를 순차 처리하지 않고 클라우드에서 동시에 스크래핑할 수 있습니다. 하루 걸릴 작업을 몇 분 만에 끝낼 수도 있습니다.
핵심 정리
크롤링과 스크래핑을 하나의 파이프라인을 구성하는 두 단계로 생각하세요. 먼저 크롤링해 대상 목록을 만들고 다음으로 스크래핑해 데이터를 얻습니다. 두 단계를 분리하면 제어력과 오류 처리 능력이 향상되고 추출 단계를 수평 확장할 수 있습니다. 이는 수천 또는 수백만 페이지가 있는 사이트를 처리할 때 특히 중요합니다.
{"docsConfig":{"theme":"aspen","$schema":"https://mintlify.com/docs.json","name":"Octoparse Docs","description":"Developer documentation for Octoparse MCP Server and OpenAPI integrations.","colors":{"primary":"#117CFF","light":"#117CFF","dark":"#117CFF"},"logo":{"light":"https://mintcdn.com/octoparse/Gvd6HefaOGSEtZAm/images/logo_octoparse.svg?fit=max\u0026auto=format\u0026n=Gvd6HefaOGSEtZAm\u0026q=85\u0026s=2442bfff45bdc256a531bbb3f0a6e07d","dark":"https://mintcdn.com/octoparse/Gvd6HefaOGSEtZAm/images/logo_octoparse.svg?fit=max\u0026auto=format\u0026n=Gvd6HefaOGSEtZAm\u0026q=85\u0026s=2442bfff45bdc256a531bbb3f0a6e07d","href":"https://www.octoparse.com"},"favicon":"https://mintcdn.com/octoparse/rEXwXcMDf83PhQtP/images/op-logo.svg?fit=max\u0026auto=format\u0026n=rEXwXcMDf83PhQtP\u0026q=85\u0026s=76cbf4eb19a67897dcbdcf6489472101","api":{},"background":{"color":{"dark":"#011229"}},"navbar":{"primary":{"type":"button","label":"Contact support","href":"mailto:support@octoparse.com"}},"seo":{"metatags":{"keywords":"Octoparse Docs, Octoparse MCP Server, Octoparse OpenAPI, web scraping API, MCP web scraping, cloud data extraction","twitter:site":"@Octoparse"},"indexing":"navigable"},"integrations":{"gtm":{"tagId":"GTM-WZ7K2D4"}},"styling":{"latex":false},"navigation":{"languages":[{"language":"en","default":true,"href":"en/overview"},{"language":"es","href":"es/overview"},{"language":"fr","href":"fr/overview"},{"language":"de","href":"de/overview"},{"language":"it","href":"it/overview"},{"language":"ko","href":"ko/overview"},{"language":"ja","href":"jp/overview"}]}},"deployment":{"deploymentMetadataValue":{"subdomain":"octoparse","hasAudioNarration":false,"actualSubdomain":"octoparse","customDomains":["www.octoparse.com"],"gitSource":{"type":"github","owner":"octoparse","repo":"opdocs","deployBranch":"main","contentDirectory":"","isPrivate":true,"mountPath":"","label":""},"entitlements":{"AI_CHAT":{"status":"DISABLED"}},"buildId":"6af407c2d3a2c029a3cdb973","clientVersion":"0.0.4167","searchFilterCounts":[{"language":"en","tag":"Data Hub","count":66},{"language":"en","tag":"DATA HUB API","count":66},{"language":"ja","tag":"Data Hub","count":66},{"language":"ja","tag":"DATA HUB API","count":66},{"language":"ko","tag":"API 레퍼런스","count":48},{"language":"en","tag":"Publishing","count":36},{"language":"ja","tag":"公開","count":36},{"language":"en","tag":"Academy","count":35},{"language":"ja","tag":"アカデミー","count":34},{"language":"en","tag":"API Reference","count":30},{"language":"en","tag":"API REFERENCE","count":30},{"language":"ja","tag":"APIリファレンス","count":30},{"language":"ja","tag":"APIドキュメント","count":30},{"language":"de","tag":"API-Referenz","count":24},{"language":"de","tag":"API-REFERENZ","count":24},{"language":"es","tag":"Referencia de la API","count":24},{"language":"es","tag":"REFERENCIA DE API","count":24},{"language":"fr","tag":"Référence API","count":24},{"language":"fr","tag":"RÉFÉRENCE API","count":24},{"language":"it","tag":"Riferimento API","count":24},{"language":"it","tag":"RIFERIMENTO API","count":24},{"language":"en","tag":"GET STARTED","count":18},{"language":"en","tag":"CLI","count":15},{"language":"ja","tag":"CLI","count":15},{"language":"en","tag":"AI Assistant","count":14},{"language":"en","tag":"Desktop","count":14},{"language":"ja","tag":"AIアシスタント","count":14},{"language":"ja","tag":"スクレイパーの仕組み","count":13},{"language":"ja","tag":"はじめに","count":13},{"language":"de","tag":"Aufgabe","count":9},{"language":"es","tag":"Tarea","count":9},{"language":"fr","tag":"Tâche","count":9},{"language":"it","tag":"Attività","count":9},{"language":"ko","tag":"작업","count":9},{"language":"de","tag":"Cloud-Extraktion","count":7},{"language":"es","tag":"Extracción en la nube","count":7},{"language":"fr","tag":"Extraction dans le cloud","count":7},{"language":"it","tag":"Estrazione cloud","count":7},{"language":"ko","tag":"클라우드 추출","count":7},{"language":"de","tag":"Daten","count":5},{"language":"es","tag":"Datos","count":5},{"language":"fr","tag":"Données","count":5},{"language":"it","tag":"Dati","count":5},{"language":"ko","tag":"데이터","count":5},{"language":"de","tag":"Zugriffstoken","count":2},{"language":"es","tag":"Token de acceso","count":2},{"language":"fr","tag":"Jeton d’accès","count":2},{"language":"it","tag":"Token di accesso","count":2},{"language":"ko","tag":"액세스 토큰","count":2},{"language":"de","tag":"Aufgabengruppe","count":1},{"language":"es","tag":"Grupo de tareas","count":1},{"language":"fr","tag":"Groupe de tâches","count":1},{"language":"it","tag":"Gruppo di attività","count":1},{"language":"ko","tag":"작업 그룹","count":1}]},"assistantConfig":{"enableAskAiButton":false,"enableStarterQuestions":false,"enableContextualStarterQuestions":false,"enableAskAiSearchBar":true},"basePath":"/docs","hasChatPermissions":false,"hasWebMcpPermissions":false,"toggles":[{"name":"kill-isr","enabled":true,"variant":{"name":"disabled","enabled":false,"feature_enabled":true},"impressionData":false},{"name":"custom-rbac-roles","enabled":true,"variant":{"name":"disabled","enabled":false,"feature_enabled":true},"impressionData":false},{"name":"agent-mintlify-slack","enabled":true,"variant":{"name":"disabled","enabled":false,"feature_enabled":true},"impressionData":false},{"name":"agent-integrations-settings","enabled":true,"variant":{"name":"disabled","enabled":false,"feature_enabled":true},"impressionData":false},{"name":"rbac-expansion","enabled":true,"variant":{"name":"disabled","enabled":false,"feature_enabled":true},"impressionData":false},{"name":"automations-pr-grouping","enabled":true,"variant":{"name":"disabled","enabled":false,"feature_enabled":true},"impressionData":false},{"name":"custom-prefix","enabled":true,"variant":{"name":"disabled","enabled":false,"feature_enabled":true},"impressionData":false},{"name":"analytics-v7","enabled":true,"variant":{"name":"disabled","enabled":false,"feature_enabled":true},"impressionData":false},{"name":"user-flows-analytics","enabled":true,"variant":{"name":"disabled","enabled":false,"feature_enabled":true},"impressionData":false},{"name":"no-publish-flow","enabled":true,"variant":{"name":"disabled","enabled":false,"feature_enabled":true},"impressionData":false},{"name":"workos-onboarding","enabled":true,"variant":{"name":"disabled","enabled":false,"feature_enabled":true},"impressionData":false},{"name":"snapshot-serving-live","enabled":true,"variant":{"name":"disabled","enabled":false,"feature_enabled":true},"impressionData":false},{"name":"stripTemperatureMiddleware","enabled":true,"variant":{"name":"disabled","enabled":false,"feature_enabled":true},"impressionData":false},{"name":"support-platform-pylon-zendesk","enabled":true,"variant":{"name":"disabled","enabled":false,"feature_enabled":true},"impressionData":false},{"name":"snapshot-serving","enabled":true,"variant":{"name":"disabled","enabled":false,"feature_enabled":true},"impressionData":false},{"name":"instant-rollback","enabled":true,"variant":{"name":"disabled","enabled":false,"feature_enabled":true},"impressionData":false},{"name":"granular-notifications-server","enabled":true,"variant":{"name":"disabled","enabled":false,"feature_enabled":true},"impressionData":false},{"name":"granular-notifications","enabled":true,"variant":{"name":"disabled","enabled":false,"feature_enabled":true},"impressionData":false},{"name":"automations-fable","enabled":true,"variant":{"name":"disabled","enabled":false,"feature_enabled":true},"impressionData":false},{"name":"fixed-ai-action-pricing","enabled":true,"variant":{"name":"disabled","enabled":false,"feature_enabled":true},"impressionData":false},{"name":"automation-resolve-merge-conflict","enabled":true,"variant":{"name":"disabled","enabled":false,"feature_enabled":true},"impressionData":false},{"name":"scoped-publishing","enabled":true,"variant":{"name":"disabled","enabled":false,"feature_enabled":true},"impressionData":false},{"name":"mintql","enabled":true,"variant":{"name":"disabled","enabled":false,"feature_enabled":true},"impressionData":false},{"name":"page-level-analytics","enabled":true,"variant":{"name":"disabled","enabled":false,"feature_enabled":true},"impressionData":false},{"name":"editor-version-history-v2","enabled":true,"variant":{"name":"disabled","enabled":false,"feature_enabled":true},"impressionData":false},{"name":"billing-page-v2","enabled":true,"variant":{"name":"disabled","enabled":false,"feature_enabled":true},"impressionData":false},{"name":"full-page-search","enabled":true,"variant":{"name":"disabled","enabled":false,"feature_enabled":true},"impressionData":false},{"name":"workspace-projects","enabled":true,"variant":{"name":"disabled","enabled":false,"feature_enabled":true},"impressionData":false},{"name":"assistant-v5","enabled":true,"variant":{"name":"disabled","enabled":false,"feature_enabled":true},"impressionData":false},{"name":"fork-pr-previews","enabled":true,"variant":{"name":"disabled","enabled":false,"feature_enabled":true},"impressionData":false},{"name":"revalidation-jwt","enabled":true,"variant":{"name":"disabled","enabled":false,"feature_enabled":true},"impressionData":false},{"name":"workos-sso-scim","enabled":true,"variant":{"name":"disabled","enabled":false,"feature_enabled":true},"impressionData":false},{"name":"hobby-abuse-scan","enabled":true,"variant":{"name":"disabled","enabled":false,"feature_enabled":true},"impressionData":false},{"name":"dashboard-inbox","enabled":true,"variant":{"name":"disabled","enabled":false,"feature_enabled":true},"impressionData":false},{"name":"workos-signup","enabled":true,"variant":{"name":"disabled","enabled":false,"feature_enabled":true},"impressionData":false},{"name":"turbopuffer-dual-write","enabled":true,"variant":{"name":"disabled","enabled":false,"feature_enabled":true},"impressionData":false},{"name":"workos-enabled","enabled":true,"variant":{"name":"disabled","enabled":false,"feature_enabled":true},"impressionData":false},{"name":"approve-review-flow","enabled":true,"variant":{"name":"disabled","enabled":false,"feature_enabled":true},"impressionData":false},{"name":"editor-metadata","enabled":true,"variant":{"name":"disabled","enabled":false,"feature_enabled":true},"impressionData":false},{"name":"sso-setup-deadline-banner","enabled":true,"variant":{"name":"disabled","enabled":false,"feature_enabled":true},"impressionData":false},{"name":"turbopuffer-serve","enabled":true,"variant":{"name":"disabled","enabled":false,"feature_enabled":true},"impressionData":false},{"name":"live-agents","enabled":true,"variant":{"name":"disabled","enabled":false,"feature_enabled":true},"impressionData":false},{"name":"llms-txt-v2","enabled":true,"variant":{"name":"disabled","enabled":false,"feature_enabled":true},"impressionData":false}],"googleFontsInlined":false},"customCss":[],"page":{"pagePath":"ko/academy/web-scraping-vs-crawling","slug":"/ko/academy/web-scraping-vs-crawling","pageMetadata":{"title":"웹 스크래핑과 웹 크롤링의 차이","description":"스크래핑과 크롤링은 자주 혼동되지만 서로 다른 문제를 해결합니다. 기술적·목적상 차이와 각각의 적절한 사용 시점을 알아보세요.","keywords":"웹 스크래핑과 웹 크롤링, 크롤링과 스크래핑, 크롤러, 웹 스크래퍼, 웹 스크래핑 크롤링 차이","noindex":true,"href":"/ko/academy/web-scraping-vs-crawling"},"description":{"compiledSource":"\"use strict\";\nconst {jsx: _jsx} = arguments[0];\nconst {useMDXComponents: _provideComponents} = arguments[0];\nfunction _createMdxContent(props) {\n const _components = {\n p: \"p\",\n ..._provideComponents(),\n ...props.components\n };\n return _jsx(_components.p, {\n children: \"스크래핑과 크롤링은 자주 혼동되지만 서로 다른 문제를 해결합니다. 기술적·목적상 차이와 각각의 적절한 사용 시점을 알아보세요.\"\n });\n}\nfunction MDXContent(props = {}) {\n const {wrapper: MDXLayout} = {\n ..._provideComponents(),\n ...props.components\n };\n return MDXLayout ? _jsx(MDXLayout, {\n ...props,\n children: _jsx(_createMdxContent, {\n ...props\n })\n }) : _createMdxContent(props);\n}\nreturn {\n default: MDXContent\n};\n","frontmatter":{},"scope":{}},"pageType":"default","mdx":{"mdxSource":{"compiledSource":"\"use strict\";const{Fragment:_Fragment,jsx:_jsx,jsxs:_jsxs}=arguments[0];const{useMDXComponents:_provideComponents}=arguments[0];function _createMdxContent(props){const _components={a:`a`,p:`p`,..._provideComponents(),...props.components},{Heading}=_components;if(!Heading)_missingMdxReference(`Heading`,true);return _jsxs(_Fragment,{children:[_jsxs(_components.p,{children:[_jsx(_components.a,{href:`/ko/academy/what-is-web-scraping`,children:`웹 스크래핑`}),`과 웹 크롤링은 흔히 같은 의미로 사용되지만 실제로는 서로 연계되는 두 가지 별개의 작업입니다.`]}),`\n`,_jsx(Heading,{level:`2`,id:`크롤링-탐색`,children:`크롤링: 탐색`}),`\n`,_jsx(_components.p,{children:`크롤링의 목적은 탐색입니다. 크롤러는 링크를 따라 웹사이트를 이동하고 구조를 파악하며 URL을 수집합니다. 중요한 페이지를 모두 찾기 위한 탐험과 비슷합니다. 검색 엔진은 웹을 크롤링해 어떤 정보가 어디에 있는지 색인을 만든다는 대표적인 예입니다.`}),`\n`,_jsx(Heading,{level:`2`,id:`스크래핑-추출`,children:`스크래핑: 추출`}),`\n`,_jsx(_components.p,{children:`스크래핑의 목적은 추출입니다. 필요한 데이터가 있는 페이지를 파악한 후 스크래퍼가 해당 페이지를 방문해 가격, 제목, 설명, 연락처 등 활용 사례에 필요한 필드를 가져옵니다. 목표는 탐색이 아니라 구조화된 결과입니다.`}),`\n`,_jsx(Heading,{level:`2`,id:`두-단계로-분리하는-이유`,children:`두 단계로 분리하는 이유`}),`\n`,_jsx(_components.p,{children:`실제 데이터 수집 작업은 대부분 두 과정을 모두 포함합니다. 먼저 사이트를 크롤링해 관련 페이지 URL을 모두 찾고, 각 페이지를 스크래핑해 실제 데이터를 추출합니다. 한 번에 두 작업을 수행할 수도 있지만 복잡한 사이트에서는 두 단계로 나누는 편이 효율적입니다. 크롤링 단계가 정리된 URL 목록을 만들고 스크래핑 단계가 그 목록에서 콘텐츠를 추출합니다. 각 단계를 독립 실행하고 전체 작업을 다시 하지 않고 실패만 재시도하며 여러 페이지의 스크래핑을 병렬화할 수 있어 대규모 수집 속도가 크게 향상됩니다.`}),`\n`,_jsx(Heading,{level:`2`,id:`octoparse가-두-작업을-처리하는-방식`,children:`Octoparse가 두 작업을 처리하는 방식`}),`\n`,_jsxs(_components.p,{children:[`Octoparse는 전용 AI 기반 모드로 두 작업을 모두 처리합니다. AI Crawl은 사이트의 링크 구조를 분석하고 `,_jsx(_components.a,{href:`/ko/academy/handle-pagination`,children:`페이지 넘기기`}),`, 카테고리 또는 중첩 페이지에서 대상 URL을 수집하는 워크플로를 자동 생성합니다. AI Scrape `,_jsx(_components.a,{href:`/ko/templates/overview`,children:`템플릿`}),`은 이 URL을 받아 각 페이지에서 구조화된 데이터를 추출합니다. 두 단계를 연결되지만 독립적인 작업으로 처리하므로 URL 목록이 준비되면 수백 또는 수천 페이지를 순차 처리하지 않고 `,_jsx(_components.a,{href:`/ko/academy/cloud-web-scraping`,children:`클라우드에서 동시에 스크래핑`}),`할 수 있습니다. 하루 걸릴 작업을 몇 분 만에 끝낼 수도 있습니다.`]}),`\n`,_jsx(Heading,{level:`2`,id:`핵심-정리`,children:`핵심 정리`}),`\n`,_jsx(_components.p,{children:`크롤링과 스크래핑을 하나의 파이프라인을 구성하는 두 단계로 생각하세요. 먼저 크롤링해 대상 목록을 만들고 다음으로 스크래핑해 데이터를 얻습니다. 두 단계를 분리하면 제어력과 오류 처리 능력이 향상되고 추출 단계를 수평 확장할 수 있습니다. 이는 수천 또는 수백만 페이지가 있는 사이트를 처리할 때 특히 중요합니다.`})]})}function MDXContent(props={}){const{wrapper:MDXLayout}={..._provideComponents(),...props.components};return MDXLayout?_jsx(MDXLayout,{...props,children:_jsx(_createMdxContent,{...props})}):_createMdxContent(props)}return{default:MDXContent};function _missingMdxReference(id,component){throw new Error(`Expected `+(component?`component`:`object`)+\" `\"+id+\"` to be defined: you likely forgot to import, pass, or provide it.\")}","frontmatter":{},"scope":{"config":{},"pageMetadata":{"title":"웹 스크래핑과 웹 크롤링의 차이","description":"스크래핑과 크롤링은 자주 혼동되지만 서로 다른 문제를 해결합니다. 기술적·목적상 차이와 각각의 적절한 사용 시점을 알아보세요.","keywords":"웹 스크래핑과 웹 크롤링, 크롤링과 스크래핑, 크롤러, 웹 스크래퍼, 웹 스크래핑 크롤링 차이","noindex":true,"href":"/ko/academy/web-scraping-vs-crawling"}}},"mdxSourceWithNoJs":null},"mdxExtracts":{"tableOfContents":[{"title":"크롤링: 탐색","slug":"크롤링-탐색","depth":2,"children":[]},{"title":"스크래핑: 추출","slug":"스크래핑-추출","depth":2,"children":[]},{"title":"두 단계로 분리하는 이유","slug":"두-단계로-분리하는-이유","depth":2,"children":[]},{"title":"Octoparse가 두 작업을 처리하는 방식","slug":"octoparse가-두-작업을-처리하는-방식","depth":2,"children":[]},{"title":"핵심 정리","slug":"핵심-정리","depth":2,"children":[]}],"codeExamples":{}},"jsLinks":[],"subdomain":"octoparse","siteName":"Octoparse Docs","title":"웹 스크래핑과 웹 크롤링의 차이 - Octoparse Docs","navMaps":{"firstHrefInVersion":{},"firstHrefInLanguage":{"en":{"href":"/en/academy/web-scraping-vs-crawling","matchLevel":1},"es":{"href":"/es/academy/web-scraping-vs-crawling","matchLevel":1,"noindex":true},"fr":{"href":"/fr/academy/web-scraping-vs-crawling","matchLevel":1,"noindex":true},"de":{"href":"/de/academy/web-scraping-vs-crawling","matchLevel":1,"noindex":true},"it":{"href":"/it/academy/web-scraping-vs-crawling","matchLevel":1,"noindex":true},"ko":{"href":"/ko/academy/web-scraping-vs-crawling","matchLevel":0},"ja":{"href":"/jp/academy/web-scraping-vs-crawling","matchLevel":1}}},"lastModified":"2026-11-11T06:14:51.609Z","originalFileLocation":"ko/academy/web-scraping-vs-crawling.mdx","locale":"ko"},"headHtml":"\u003cscript data-mint-head>(function(){var d=document.documentElement,p=null;if(!p){try{p=localStorage.getItem(\"isDarkMode\")}catch(e){}if(p==='true')p='dark';else if(p==='false')p='light';if(p!=='light'\u0026\u0026p!=='dark'\u0026\u0026p!=='system')p=\"system\"}var r=p==='system'?(matchMedia(\"(prefers-color-scheme: dark)\").matches?'dark':'light'):p;d.classList.remove(r==='dark'?'light':'dark');d.classList.add(r);d.setAttribute(\"data-theme-preference\",p)})();\u003c/script>\u003cmeta data-mint-head name=\"description\" content=\"스크래핑과 크롤링은 자주 혼동되지만 서로 다른 문제를 해결합니다. 기술적·목적상 차이와 각각의 적절한 사용 시점을 알아보세요.\">\u003cmeta data-mint-head name=\"keywords\" content=\"웹 스크래핑과 웹 크롤링, 크롤링과 스크래핑, 크롤러, 웹 스크래퍼, 웹 스크래핑 크롤링 차이\">\u003cmeta data-mint-head name=\"application-name\" content=\"Octoparse Docs\">\u003cmeta data-mint-head name=\"generator\" content=\"Mintlify\">\u003cmeta data-mint-head name=\"robots\" content=\"noindex\">\u003clink data-mint-head rel=\"icon\" type=\"image/png\" sizes=\"192x192\" href=\"/docs/mintlify-assets/_mintlify/favicons/octoparse/YI11v1AlM7NoPqKl/_generated/favicon/android-chrome-192x192.png\" media=\"(prefers-color-scheme: light)\">\u003clink data-mint-head rel=\"apple-touch-icon\" type=\"image/png\" sizes=\"180x180\" href=\"/docs/mintlify-assets/_mintlify/favicons/octoparse/YI11v1AlM7NoPqKl/_generated/favicon/apple-touch-icon.png\">\u003clink data-mint-head rel=\"icon\" type=\"image/png\" sizes=\"16x16\" href=\"/docs/mintlify-assets/_mintlify/favicons/octoparse/YI11v1AlM7NoPqKl/_generated/favicon/favicon-16x16.png\" media=\"(prefers-color-scheme: light)\">\u003clink data-mint-head rel=\"icon\" type=\"image/png\" sizes=\"32x32\" href=\"/docs/mintlify-assets/_mintlify/favicons/octoparse/YI11v1AlM7NoPqKl/_generated/favicon/favicon-32x32.png\" media=\"(prefers-color-scheme: light)\">\u003clink data-mint-head rel=\"shortcut icon\" type=\"image/x-icon\" href=\"/docs/mintlify-assets/_mintlify/favicons/octoparse/YI11v1AlM7NoPqKl/_generated/favicon/favicon.ico\" media=\"(prefers-color-scheme: light)\">\u003clink data-mint-head rel=\"icon\" type=\"image/png\" sizes=\"192x192\" href=\"/docs/mintlify-assets/_mintlify/favicons/octoparse/YI11v1AlM7NoPqKl/_generated/favicon-dark/android-chrome-192x192.png\" media=\"(prefers-color-scheme: dark)\">\u003clink data-mint-head rel=\"icon\" type=\"image/png\" sizes=\"16x16\" href=\"/docs/mintlify-assets/_mintlify/favicons/octoparse/YI11v1AlM7NoPqKl/_generated/favicon-dark/favicon-16x16.png\" media=\"(prefers-color-scheme: dark)\">\u003clink data-mint-head rel=\"icon\" type=\"image/png\" sizes=\"32x32\" href=\"/docs/mintlify-assets/_mintlify/favicons/octoparse/YI11v1AlM7NoPqKl/_generated/favicon-dark/favicon-32x32.png\" media=\"(prefers-color-scheme: dark)\">\u003clink data-mint-head rel=\"shortcut icon\" type=\"image/x-icon\" href=\"/docs/mintlify-assets/_mintlify/favicons/octoparse/YI11v1AlM7NoPqKl/_generated/favicon-dark/favicon.ico\" media=\"(prefers-color-scheme: dark)\">\u003cmeta data-mint-head property=\"og:title\" content=\"웹 스크래핑과 웹 크롤링의 차이 - Octoparse Docs\">\u003cmeta data-mint-head property=\"og:description\" content=\"스크래핑과 크롤링은 자주 혼동되지만 서로 다른 문제를 해결합니다. 기술적·목적상 차이와 각각의 적절한 사용 시점을 알아보세요.\">\u003cmeta data-mint-head property=\"og:site_name\" content=\"Octoparse Docs\">\u003cmeta data-mint-head property=\"og:url\" content=\"https://www.octoparse.com/docs/ko/academy/web-scraping-vs-crawling\">\u003cmeta data-mint-head property=\"og:type\" content=\"website\">\u003cmeta data-mint-head property=\"og:image\" content=\"https://octoparse.mintlify.site/docs/_mintlify/api/og/v2?division=%EC%9B%B9+%EC%8A%A4%ED%81%AC%EB%9E%98%ED%95%91+%EA%B8%B0%EC%B4%88\u0026amp;title=%EC%9B%B9+%EC%8A%A4%ED%81%AC%EB%9E%98%ED%95%91%EA%B3%BC+%EC%9B%B9+%ED%81%AC%EB%A1%A4%EB%A7%81%EC%9D%98+%EC%B0%A8%EC%9D%B4\u0026amp;description=%EC%8A%A4%ED%81%AC%EB%9E%98%ED%95%91%EA%B3%BC+%ED%81%AC%EB%A1%A4%EB%A7%81%EC%9D%80+%EC%9E%90%EC%A3%BC+%ED%98%BC%EB%8F%99%EB%90%98%EC%A7%80%EB%A7%8C+%EC%84%9C%EB%A1%9C+%EB%8B%A4%EB%A5%B8+%EB%AC%B8%EC%A0%9C%EB%A5%BC+%ED%95%B4%EA%B2%B0%ED%95%A9%EB%8B%88%EB%8B%A4.+%EA%B8%B0%EC%88%A0%EC%A0%81%C2%B7%EB%AA%A9%EC%A0%81%EC%83%81+%EC%B0%A8%EC%9D%B4%EC%99%80+%EA%B0%81%EA%B0%81%EC%9D%98+%EC%A0%81%EC%A0%88%ED%95%9C+%EC%82%AC%EC%9A%A9+%EC%8B%9C%EC%A0%90%EC%9D%84+%EC%95%8C%EC%95%84%EB%B3%B4%EC%84%B8%EC%9A%94.\u0026amp;theme=9934a710d60c4378e24fdaf5\u0026amp;signature=b51eca68fff317b7b62f5de7e84bcbc4258a2e0904c45dc0e5f6dd046261e705\">\u003cmeta data-mint-head property=\"og:image:width\" content=\"1200\">\u003cmeta data-mint-head property=\"og:image:height\" content=\"630\">\u003cmeta data-mint-head name=\"twitter:card\" content=\"summary_large_image\">\u003cmeta data-mint-head name=\"twitter:title\" content=\"웹 스크래핑과 웹 크롤링의 차이 - Octoparse Docs\">\u003cmeta data-mint-head name=\"twitter:description\" content=\"스크래핑과 크롤링은 자주 혼동되지만 서로 다른 문제를 해결합니다. 기술적·목적상 차이와 각각의 적절한 사용 시점을 알아보세요.\">\u003cmeta data-mint-head name=\"twitter:image\" content=\"https://octoparse.mintlify.site/docs/_mintlify/api/og/v2?division=%EC%9B%B9+%EC%8A%A4%ED%81%AC%EB%9E%98%ED%95%91+%EA%B8%B0%EC%B4%88\u0026amp;title=%EC%9B%B9+%EC%8A%A4%ED%81%AC%EB%9E%98%ED%95%91%EA%B3%BC+%EC%9B%B9+%ED%81%AC%EB%A1%A4%EB%A7%81%EC%9D%98+%EC%B0%A8%EC%9D%B4\u0026amp;description=%EC%8A%A4%ED%81%AC%EB%9E%98%ED%95%91%EA%B3%BC+%ED%81%AC%EB%A1%A4%EB%A7%81%EC%9D%80+%EC%9E%90%EC%A3%BC+%ED%98%BC%EB%8F%99%EB%90%98%EC%A7%80%EB%A7%8C+%EC%84%9C%EB%A1%9C+%EB%8B%A4%EB%A5%B8+%EB%AC%B8%EC%A0%9C%EB%A5%BC+%ED%95%B4%EA%B2%B0%ED%95%A9%EB%8B%88%EB%8B%A4.+%EA%B8%B0%EC%88%A0%EC%A0%81%C2%B7%EB%AA%A9%EC%A0%81%EC%83%81+%EC%B0%A8%EC%9D%B4%EC%99%80+%EA%B0%81%EA%B0%81%EC%9D%98+%EC%A0%81%EC%A0%88%ED%95%9C+%EC%82%AC%EC%9A%A9+%EC%8B%9C%EC%A0%90%EC%9D%84+%EC%95%8C%EC%95%84%EB%B3%B4%EC%84%B8%EC%9A%94.\u0026amp;theme=9934a710d60c4378e24fdaf5\u0026amp;signature=b51eca68fff317b7b62f5de7e84bcbc4258a2e0904c45dc0e5f6dd046261e705\">\u003cmeta data-mint-head name=\"twitter:image:width\" content=\"1200\">\u003cmeta data-mint-head name=\"twitter:image:height\" content=\"630\">\u003cmeta data-mint-head name=\"msapplication-config\" content=\"/docs/mintlify-assets/_mintlify/favicons/octoparse/YI11v1AlM7NoPqKl/_generated/favicon/browserconfig.xml\">\u003cmeta data-mint-head name=\"apple-mobile-web-app-title\" content=\"Octoparse Docs\">\u003cmeta data-mint-head name=\"msapplication-TileColor\" content=\"#117CFF\">\u003clink data-mint-head rel=\"canonical\" href=\"https://www.octoparse.com/docs/ko/academy/web-scraping-vs-crawling\">\u003clink data-mint-head rel=\"alternate\" type=\"application/xml\" href=\"/docs/sitemap.xml\">\u003clink data-mint-head rel=\"alternate\" type=\"text/markdown\" href=\"/docs/ko/academy/web-scraping-vs-crawling.md\">\u003cscript data-mint-head type=\"application/ld+json\">{\"@context\":\"https://schema.org\",\"@type\":\"WebSite\",\"name\":\"Octoparse Docs\",\"publisher\":{\"@type\":\"Organization\",\"name\":\"Octoparse Docs\"},\"provider\":{\"@type\":\"Organization\",\"name\":\"Mintlify\",\"url\":\"https://mintlify.com\"}}\u003c/script>","agentPointerHref":"/docs/ko/academy/web-scraping-vs-crawling.md","siteName":"Octoparse Docs","nav":{"global":null,"languages":[{"language":"en","default":true,"pages":[{"title":"en","href":"/en/academy/web-scraping-vs-crawling"}]},{"language":"es","pages":[{"title":"es","href":"/es/academy/web-scraping-vs-crawling"}]},{"language":"fr","pages":[{"title":"fr","href":"/fr/academy/web-scraping-vs-crawling"}]},{"language":"de","pages":[{"title":"de","href":"/de/academy/web-scraping-vs-crawling"}]},{"language":"it","pages":[{"title":"it","href":"/it/academy/web-scraping-vs-crawling"}]},{"language":"ko","tabs":[{"tab":"홈","pages":[{"title":"홈","href":"/ko/overview"}]},{"tab":"아카데미","groups":[{"group":"시작하기","pages":[{"title":"Octoparse 아카데미","sidebarTitle":"개요","href":"/ko/academy"}]},{"group":"웹 스크래핑 기초","pages":[{"title":"웹 스크래핑이란?","href":"/ko/academy/what-is-web-scraping"},{"title":"노코드 웹 스크래핑이란?","href":"/ko/academy/what-is-no-code-web-scraping"},{"title":"AI 웹 스크래핑이란?","href":"/ko/academy/what-is-ai-web-scraping"},{"title":"AI와 기존 웹 스크래핑 비교","description":"AI 기반 스크래핑과 선택자 기반 스크래핑이 각각 유리한 상황과 두 방식을 결합하는 방법을 비용, 정확도, 유지관리 및 안정성 관점에서 비교합니다.","href":"/ko/academy/ai-vs-traditional-scraping"},{"title":"웹 스크래핑과 웹 크롤링의 차이","href":"/ko/academy/web-scraping-vs-crawling"},{"title":"웹 스크래핑은 합법인가요?","description":"웹 스크래핑의 합법성은 수집 대상, 방법 및 지역에 따라 달라집니다. 공개 데이터, 이용약관, 저작권, GDPR·CCPA 및 규정 준수 방법을 알아보세요.","href":"/ko/academy/is-web-scraping-legal"}]},{"group":"웹 스크래퍼 작동 방식","expanded":true,"pages":[{"title":"웹 스크래퍼의 구조","href":"/ko/academy/anatomy-of-a-web-scraper"},{"group":"렌더링","expanded":true,"pages":[{"title":"JavaScript 렌더링 페이지 스크래핑","href":"/ko/academy/scrape-javascript-pages"},{"title":"브라우저 런타임 생태계","href":"/ko/academy/browser-runtime-landscape"},{"title":"헤디드 브라우저와 헤드리스 브라우저","href":"/ko/academy/headed-vs-headless-browsers"}]},{"group":"탐색","expanded":true,"pages":[{"title":"페이지 넘기기 처리 방법","href":"/ko/academy/handle-pagination"},{"title":"로그인 벽 뒤의 페이지 스크래핑","href":"/ko/academy/scraping-login-walls"}]},{"group":"추출","expanded":true,"pages":[{"title":"XPath 및 CSS 선택자","href":"/ko/academy/xpath-css-selectors"},{"title":"정규식으로 데이터 다듬기","href":"/ko/academy/refining-data-with-regex"}]},{"group":"대규모 실행","expanded":true,"pages":[{"title":"클라우드 웹 스크래핑 이해하기","href":"/ko/academy/cloud-web-scraping"},{"title":"브라우저 핑거프린팅","href":"/ko/academy/browser-fingerprinting"},{"title":"사람과 유사한 스크래핑","href":"/ko/academy/human-like-scraping"},{"title":"CAPTCHA 및 Cloudflare 우회","href":"/ko/academy/captcha-and-cloudflare"},{"title":"웹 스크래핑용 로테이션 프록시","href":"/ko/academy/rotating-proxies"}]}]},{"group":"사용 사례","pages":[{"title":"웹 스크래핑을 활용한 리드 생성","href":"/ko/academy/lead-generation"},{"title":"웹 스크래핑을 활용한 가격 모니터링","href":"/ko/academy/price-monitoring"},{"title":"부동산 데이터 추출","href":"/ko/academy/real-estate-data"},{"title":"전자상거래 데이터 수집","href":"/ko/academy/ecommerce-data"},{"title":"소셜 미디어 데이터 마이닝","href":"/ko/academy/social-media-data"},{"title":"AI 및 LLM을 위한 데이터 수집","href":"/ko/academy/ai-data-collection"},{"title":"시장 및 경쟁 조사를 위한 데이터 수집","href":"/ko/academy/market-research"},{"title":"리뷰 및 감성 분석을 위한 데이터 수집","href":"/ko/academy/review-sentiment-analysis"}]},{"group":"가이드","pages":[{"title":"Amazon 스크래핑 방법","href":"/ko/academy/scrape-amazon"},{"title":"LinkedIn 스크래핑 방법","href":"/ko/academy/scrape-linkedin"},{"title":"Google Maps 스크래핑 방법","href":"/ko/academy/scrape-google-maps"},{"title":"Yelp 스크래핑 방법","href":"/ko/academy/scrape-yelp"},{"title":"타베로그 스크래핑 방법","href":"/ko/academy/scrape-tabelog"},{"title":"라쿠텐 이치바 스크래핑 방법","href":"/ko/academy/scrape-rakuten"}]}]},{"tab":"AI 도우미","pages":[{"title":"AI 도우미","href":"/ko/ai-assistant"}]},{"tab":"템플릿","pages":[{"title":"템플릿","href":"/ko/templates/overview"}]},{"tab":"데스크톱","pages":[{"title":"데스크톱","href":"/ko/desktop/how-it-works"}]},{"tab":"클라우드","pages":[{"title":"클라우드","href":"/ko/cloud/local-vs-cloud"}]},{"tab":"MCP","pages":[{"title":"MCP","href":"/ko/mcp"}]},{"tab":"API 레퍼런스","pages":[{"title":"API 레퍼런스","href":"/ko/api-reference"}]},{"tab":"CLI","pages":[{"title":"CLI","href":"/ko/cli"}]},{"tab":"Data Hub","pages":[{"title":"Data Hub","href":"/ko/datahub"}]}]},{"language":"ja","pages":[{"title":"ja","href":"/jp/academy/web-scraping-vs-crawling"}]}]},"basePath":"","title":"웹 스크래핑과 웹 크롤링의 차이 - Octoparse Docs","buildId":"dpl_H5KQTnCewfWWvJxA7c3bCm7MFbb6","deploymentId":"dpl_H5KQTnCewfWWvJxA7c3bCm7MFbb6","dynamics":[],"chunks":[]}