Web Scraper intro tutorial

Summary

このビデオでは、ウェブスクレイパーを使用してシンプルなEコマースサイトから製品データを抽出する方法を紹介しています。サイトの二階層のナビゲーション構造を説明し、カテゴリやサブカテゴリから製品ページに移動する手順を示します。新しいサイトマップの作成、リンクセレクターの設定、データ抽出セレクターの追加を通じて、視聴者は正確なデータ収集のための各セレクターのバリデーション方法を学びます。最後に、抽出したデータのエクスポート方法についても解説されています。

Takeaways

• 😀 ウェブスクレイパーを使用して、シンプルなeコマースサイトをスクレイプするデモを行います。
• 🛒 サイトには、カテゴリとサブカテゴリを持つ2層のナビゲーションがあります。
• 🔗 スクレイパーは、開始URLからすべてのカテゴリとサブカテゴリをナビゲートしてデータを抽出します。
• 📊 サイトマップを作成し、ナビゲーションのためにリンクセレクタを設定します。
• 🔍 セレクタのデータプレビューを使用して、正しく機能しているか確認します。
• 🌐 カテゴリページにアクセスして、サブカテゴリリンクのセレクタを作成します。
• 🛍️ プロダクトページに移動するためのリンクセレクタを作成します。
• 💾 商品名、価格、説明を抽出するためにテキストセレクタを設定します。
• 🖼️ 画像URLを抽出するために画像セレクタを使用します。
• 📈 スクレイピングが完了したら、データをエクスポートするためのダウンロードリンクを取得します。

Q & A

このビデオでは何をデモンストレーションしていますか？

このビデオでは、ウェブスクレイパーを使用してシンプルなeコマースサイトをスクレイプする方法を示しています。

ウェブスクレイパーを起動するにはどのツールを使用しますか？

ウェブスクレイパーのツールバーを開くために、開発者ツールを使用します。

サイトマップはどのように構築されますか？

サイトマップは、ツリー状の構造で構築され、サイトのナビゲーションとデータ抽出方法を定義する複数のセレクタで構成されます。

カテゴリリンクセレクタはどのように設定されますか？

カテゴリリンクセレクタを作成するには、セレクタのタイプをリンクに変更し、ページ上のカテゴリリンク要素を選択します。

サブカテゴリセレクタはどのように作成しますか？

サブカテゴリセレクタは、カテゴリページに移動した後、同様の手順で設定します。

製品ページへのナビゲーションはどのように行われますか？

製品ページへのナビゲーションは、サブカテゴリセレクタの下にリンクセレクタを作成することで行われます。

データ抽出用のテキストセレクタはどのように設定されますか？

製品ページでは、製品名、価格、説明を抽出するために、それぞれテキストセレクタを作成します。

画像URLを抽出するためのセレクタは何ですか？

画像URLを抽出するためには、画像セレクタを作成します。

セレクタグラフとは何ですか？

セレクタグラフは、サイトマップがどのように構築されているかを視覚的に表示するツールです。

データのエクスポート方法は？

データをエクスポートするには、エクスポートデータビューを開き、ダウンロードリンクを使用します。