<aside> 💡

クロール設定を、例で一通り解説します

</aside>

ホーム画面について

• サポートチケット
• データ通信量

クロール設定一覧

• タグ編集
• イベントログ
• APIキー管理

パスワードの再設定

ユーザー管理

基礎ガイド

CSSセレクタ

XPath

セレクタの抽出手順

セレクタ設定練習問題

正規表現

クロール設定例

操作マニュアル

クロール設定新規作成

• テンプレートモード
• マニュアルモード

【1】起点

• CSV一括入力
• ログイン機能

【2】ページ設定

• ブラウザ操作
• ブラウザ操作ログ
• 通信リクエストのブロック
• AIサポート

**【3】**抽出

• 入力モード
• タグ抽出
• 範囲指定
• 抽出要素の指定

**【4】**整形

• 整形処理

【5】結合

**【6】**出力

• 重複排除
• Google Cloud Storage
• AWS S3

【7】監視

【8】クロール

• 抽出から再実行
• クロールから再開

トラブルシューティング

システム全般について

ページ設定について

抽出について

整形について

出力について

クロールについて

API活用ガイド

APIリファレンス

• /download/latest
• /download/specific
• /executes

GAS との連携

はじめに

• Keywalkerのブログの「記事一覧ページ」及び「記事詳細ページ」から情報を収集し、1ファイルに統合したデータを作成する例をご説明します。

• 動画での設定マニュアルもご用意しています。

https://www.youtube.com/watch?v=pYjD9aBdwys

• サイト名　Keywalkerブログ
• 起点URL　https://www.keywalker.co.jp/blog
• 記事数88件（2024/8/1現在）

| --- | --- | --- |

記事一覧ページ

https://www.keywalker.co.jp/blog

記事詳細ページ

https://www.keywalker.co.jp/blog/dataiku-plugin-holidays.html

クロール設定新規作成

クロール設定

1：クロール新規作成画面へ進みます

①サイドバーの新規作成ボタンをクリックする

②マニュアルモードを選択

③クロール設定の名前を入力する。