メインコンテンツへスキップ
Cloud Agentは、収集したいデータを好きな言語で普段使う言葉で伝えるだけで、専用スクレイパーを自動作成し、Octoparse Cloud上で実行します。 作成したタスクはPCの電源を切っていてもクラウド上で実行でき、スタンダードプラン以上では、24時間いつでも設定したスケジュールに沿って自動実行できます。コードの記述やサーバーの設定は不要で、フリープランを含むすべてのプランでスクレイパーを作成・実行できます。
Cloud Agentはベータ版です。

Cloud Agentを使う場面

Cloud Agentは次のような場合に適しています。
  • 必要なサイトやフィールドに対応した既存のテンプレートがない
  • キーワードや地域の一覧など、特定のフィールド、フィルター、入力値が必要
  • 定期的に、または大量のデータを収集したい
  • パソコンの電源を切っても処理を続けたい

Cloud Agentの収集の仕組み

Cloud Agentはサイトを調べ、収集ルールを作成し、テストしてからスクレイパーを提供します。その後は、Octoparse Cloud上のブラウザで毎回同じルールに従って実行します。詳しくはAIアシスタントの仕組みをご覧ください。
最初に詳しく伝えるほど、後から調整する手間を減らせます。詳しくは取得したいデータの伝え方をご覧ください。

Cloud Agentでスクレイパーを作成する

1

必要なデータを伝える

AIアシスタントでチャットを開始し、対象サイトと必要なデータを伝えます。リクエストに適していれば、Cloud Agentが提案されます。最初から使いたい場合は、新しいチャットの開始時にモード選択で Cloud Agent を選んでください。
2

Cloud Agentによる作成を待つ

スクレイパーをテストしてから提供するため、作成には時間がかかります。ページを離れても構いません。完了するとメールが届きます。
3

結果を確認する

スクレイパーの準備ができると、AIアシスタントがフィールドと入力項目を表示します。入力を設定して実行するには 「入力を設定して実行」、定期実行するには 「定期実行」、タスクを開くには 「タスクを表示」 を選択します。

作成中の表示

作業中は次の内容を確認できます。
  • チャット画面の 「作業中」 には、AIエージェントが実行している各ステップと進捗状況が表示されます。
  • 画面右側の 「ライブビュー」 では、タスクの実行状況や各ステップの詳細をリアルタイムで確認できます。
  • タスクが完了したら、画面右側の 「成果物」 タブに切り替えて、収集結果を確認します。

Octoparse Cloudで実行する

Cloud Agentのスクレイパーは、自分のパソコンではなくOctoparse Cloudで実行します。
  • 自分でサーバーやブラウザを用意・設定する必要はありません
  • パソコンの電源を切っても実行でき、スタンダードプラン以上ではスケジュール実行もできます
より多くのサイトに対応できるよう、Octoparse Cloudのブロック回避機能を拡充しています。 どのプランでも、スクレイパーを作成してOctoparse Cloudで実行できます。
  • フリープランとベーシックプランでは、「入力を設定して実行」 で毎回手動で実行を開始します。収集行数は月間収集行数にカウントされ、フリープランは1回につき最大100行です。スケジュール実行は利用できません。
  • スタンダードプラン以上では、作成後に初回の実行が自動的に始まります。行数制限はなく、スケジュールも設定できます。

スクレイパーを変更・再利用する

スクレイパーはタスクとして保存されます。キーワードやURLなどの入力値を変更するには「入力を編集」、収集内容を変更するには「会話を再開」、定期的に実行するには 「スクジュール」 を使います。詳しくはAIタスクの管理をご覧ください。

制限事項

  • Cloud AgentのスクレイパーはOctoparse Cloudでのみ実行できます。自分のパソコンで実行する機能はありません。
  • ログインが必要なサイトには対応していません。Browser Useを使ってください。
  • 保護の厳しいサイトでは、スクレイパーがブロックされる場合があります。
  • Cloud Agentがスクレイパーを作成できない場合は、トラブルシューティングをご覧ください。

関連ページ

AIアシスタントの仕組み

テンプレート、Browser Use、Cloud Agent、自動検出の選び方を説明します。

クラウドのスケジュール実行

指定時刻や一定間隔でクラウドタスクを実行します。

エクスポート形式と出力先

ファイル、データベース、クラウドストレージへデータを出力します。