プロキシを使うタイミング
プロキシは、次のような場合に使用します。- Webサイトが1つのIPからの繰り返しアクセスをブロックまたは制限する
- コンテンツが国や地域によって変わる
- タスクを特定ロケーションからのアクセスとして実行する必要がある
- クラウド抽出がローカル閲覧と異なる挙動をする
- Webサイトでアクセスエラーが頻繁に表示される
- ワークフローの信頼性向上のためにIPローテーションが必要
プロキシの種類
設定フロー
1
問題を確認する
IPブロック、地域制限、繰り返しアクセス制限が原因でタスクが失敗しているか確認します。
2
プロキシ種別を選択する
Webサイトの挙動に応じて、固定、ローテーション、地域指定プロキシを選択します。
3
プロキシ情報を設定する
必要に応じて、ホスト、ポート、ユーザー名、パスワード、ロケーション設定を追加します。
4
小さくテストする
ページが正しく読み込まれ、抽出データが期待どおりであることを確認します。
5
失敗を監視する
プロキシを有効化した後、ログと出力品質を確認します。