【AWSとAIの基礎#4】SageMakerによる機械学習

データサイエンス研究所
19 Nov 202309:41

Summary

TLDRこのビデオスクリプトでは、AWSのサービスである「政治メーカー」を使用した機械学習の概要について解説しています。スクリプトでは、まず「政治メーカー」の基本的な使い方から、ノートブックインスタンスの作成方法、画像認識の実行、S3との連携方法について詳細に説明しています。最後に、サービスの消去方法についても触れています。このスクリプトは、AWSを活用したデータサイエンスや機械学習の基礎を学ぶ初心者にとって、非常に役立つガイドラインとなるでしょう。

Takeaways

  • 😀 政治メーカーは機械学習に使用できるAWSのサービスの一つであり、特にJupyter LabやJupyter Notebookを利用できる機能を提供している。
  • 🛠️ シリーズの最初の動画で紹介された通り、政治メーカーはネットワーク経由で計算資源を利用し、サーバーとして機能する。
  • 💰 政治メーカーとS3を利用する際には、お金がかかることがあるが、その額は高くないと思われ、試すだけでもかかるコストは最小限に抑えられる。
  • 🔍 画像認識のデモンストレーションとして、政治メーカーを使って実際に画像を保存したり消去したりすることができる。
  • 📚 データサイエンス研究所では、政治メーカーの概要からノートブックインスタンスの作成、画像認識、S3との連携まで解説している。
  • 🖥️ AWSのマネジメントコンソールから政治メーカーにアクセスし、ノートブックインスタンスを作成することができる。
  • 🔑 アクセス許可の設定で、IAMロールを作成し、S3バケットへのアクセスを許可する必要がある。
  • 📁 S3バケットを作成し、政治メーカーからアクセスしやすいようにバケット名に政治メーカーという名前を含める。
  • 🔄 画像認識のコードはGitHubから取得し、Jupyter Notebookで実行することで画像認識が可能になる。
  • 📝 Jupyter Labで利用可能なカーネルを選択し、画像認識のコードを実行することで、画像の分析が可能になる。
  • 🗑️ 最後に、使用したサービスを適切に消去することで、不要なコストを回避することができる。

Q & A

  • デタサイエンス研究所で紹介されている「政治メーカー」とは何ですか?

    -「政治メーカー」とはAWS(アマゾンウェブサービス)のサービスの一つで、機械学習を活用するための環境を提供しています。特に、JupyterLabやJupyterNotebookを使用することができます。

  • AWSの「政治メーカー」で何ができるようになりますか?

    -AWSの「政治メーカー」では、機械学習のモデルを作成し、トレーニング、評価、デプロイを行うことができます。また、S3との連携を通じて、データの保存や読み込み、削除を行うことも可能です。

  • ノートブックインスタンスを作成する際の注意点は何ですか?

    -ノートブックインスタンスを作成する際には、アクセス許可や暗号化の設定を適切に行う必要があります。特に、IAMロールを作成し、S3バケットへのアクセス権限を設定することが必要です。

  • S3バケットとは何で、政治メーカーとどのように連携しますか?

    -S3バケットはAWSでオブジェクトストレージを提供するサービスで、大量のデータを保存することができます。政治メーカーとS3バケットを連携させることで、機械学習で使用するデータの保存や管理が行えます。

  • 画像認識を行う際に使用するカーネルとは何ですか?

    -画像認識を行う際には、TensorFlowやKerasなどの機械学習フレームワークがインストールされたカーネルを使用することができます。これにより、画像データの分析やモデルのトレーニングが可能になります。

  • GitHubからコードを取得するにはどうすればよいですか?

    -GitHubからコードを取得するには、まずそのコードのURLをコピーし、JupyterLabの「Git Clone」機能を使ってそのURLを貼り付けてクローンします。

  • 画像認識のコードを実行するにはどうしたらよいですか?

    -画像認識のコードを実行するには、まずGitHubからコードをダウンロードし、適切なカーネルでJupyterNotebookを開いて、セルを上から順に実行していく必要があります。

  • S3バケットに画像を保存するにはどうしたらよいですか?

    -S3バケットに画像を保存するには、まずS3バケットを作成し、政治メーカーのコードにバケット名を指定して、アップロードするパスと保存するパスを設定して、アップロードコマンドを実行します。

  • S3バケットから画像をダウンロードし、削除するにはどうしたらよいですか?

    -S3バケットから画像をダウンロードするには、ダウンロードするファイルのパスを指定してダウンロードコマンドを実行します。削除する場合は、削除するオブジェクトのパスを指定して削除コマンドを実行します。

  • サービスを終了する際にはどのような手順が必要ですか?

    -サービスを終了する際には、まずS3バケット内のオブジェクトを削除し、バケット自体を削除します。次に政治メーカーのインスタンスを停止し、インスタンスを削除することで料金の発生を防ぎます。

  • このデモで使用された画像認識のコードはどこで確認できますか?

    -このデモで使用された画像認識のコードは、デモの作成者がGitHubにアップロードしているページで確認することができます。URLをコピーしてアクセスすれば、コードを確認またはダウンロードできます。

Outlines

00:00

😀 AWSの機械学習サービス「政治メーカー」の概要と使い方

この段落では、デタサイエンス研究所がAWSのサービスの一つである政治メーカーについて解説しています。政治メーカーは、機械学習を利用するためのサービスで、特にジュピターラボやジュピターノートブックを開くことができる機能があります。このサービスを利用するには、AWSのマネージメントコンソールからノートブックインスタンスを作成し、アクセス許可や暗号化の設定を行う必要があります。また、S3との連携を行い、画像認識などの機械学習タスクを実行することができますが、注意深く利用する必要がある点についても触れています。

05:02

😉 画像認識を活用したS3との連携方法

第二段落では、政治メーカーを用いた画像認識の実行方法とS3との連携について説明しています。まず、政治メーカーのノートブックインスタンスを作成し、以前の解説で使用したコードを再利用して画像認識タスクを実行します。次に、S3にバケットを作成し、政治メーカーからアクセスできるようにIAMロールを設定します。画像をS3に保存したり、ダウンロードしたり、削除したりする方法についても詳しく説明されています。最後に、サービスの消去方法についても触れ、料金に関する注意点を示唆しています。

Mindmap

Keywords

💡デタサイエンス研究所

デタサイエンス研究所は、データサイエンスの分野における研究や教育を行う組織を指します。このビデオでは、そのような機関が機械学習に関する解説を行い、特にAWSのサービスを活用したデモを提供しています。

💡機械学習

機械学習は、コンピュータがデータから学び、特定のタスクを実行する能力を持つようにするアルゴリズムや技術の総称です。ビデオでは、AWSのサービスを利用して機械学習を実行する方法について解説しています。

💡AWS

AWSは、Amazon Web Servicesの略で、クラウドコンピューティングサービスを提供するAmazonの部門です。ビデオではAWSのサービスを使って機械学習モデルを構築し、画像認識タスクを実行する方法について説明しています。

💡政治メーカー

政治メーカーは、AWSが提供する機械学習サービスの一つで、ユーザーがコードを書かずに機械学習モデルを構築できるようにするツールです。ビデオでは、政治メーカーを利用して画像認識を行うデモンストレーションが行われています。

💡ジュピターノートブック

ジュピターノートブックは、Pythonコードを含む対話型のドキュメントを作成できるオープンソースのウェブアプリケーションです。ビデオでは、AWSのサービスを使ってジュピターノートブックを開き、機械学習タスクを実行する方法が紹介されています。

💡S3

S3は、AWSが提供するストレージサービスで、大量のデータを保存・管理することができます。ビデオでは、S3と政治メーカーを連携させて画像の保存や読み込みを行う方法について説明しています。

💡画像認識

画像認識は、コンピュータビジョンの分野で、画像内の物体やシーンを認識・分類する技術です。ビデオでは、AWSのサービスを使って画像認識タスクを実行するプロセスが解説されています。

💡IAMロール

IAMロールは、AWS Identity and Access Managementサービスで定義された一連のアクセス権限です。ビデオでは、IAMロールを使ってS3バケットにアクセスする権限を政治メーカーに付与する方法について触れています。

💡ノートブックインスタンス

ノートブックインスタンスは、AWSのサービスで、ジュピターノートブックを実行するための仮想環境です。ビデオでは、AWSのマネージメントコンソールを使ってノートブックインスタンスを作成し、機械学習モデルを開発する方法が紹介されています。

💡Gitリポジトリ

Gitリポジトリは、ソフトウェア開発で使われる分散バージョン管理システムです。ビデオでは、Gitリポジトリから機械学習のコードを取得し、ジュピターノートブックで実行する方法が説明されています。

💡S3バケット

S3バケットは、S3サービス上でデータを格納するためのコンテナです。ビデオでは、S3バケットを作成し、政治メーカーから画像を保存・読み込み・削除する方法が解説されています。

Highlights

デタサイエンス研究所がAWSのサービスである政治メーカーの解説を行います。

政治メーカーは、ジュピターラボやジュピターノートブックを使用できるサービスです。

AWSのマネージメントコンソールから政治メーカーにアクセスし、ノートブックインスタンスを作成できます。

政治メーカーとS3の連携を使用して、画像認識を実行します。

S3バケットへのアクセスに使用するIAMロールを作成し、指定する必要があります。

ジュピターラボで利用可能なカーネルを選択して、機械学習のタスクを実行できます。

以前の画像認識のシリーズのコードを再利用して、政治メーカーで画像認識を実行します。

GitHubからコードをクローンし、ジュピターラボで実行することで画像認識が可能になります。

S3バケットを作成し、政治メーカーとの連携を設定します。

S3バケットに画像を保存し、政治メーカーからアクセスできるようにします。

政治メーカーで画像をダウンロードし、S3からローカルに保存することができます。

政治メーカーを使用してS3バケット内の画像を削除する方法も学びます。

サービスの使用後には、作成したリソースを適切に消去することが重要です。

デタサイエンス研究所では、政治メーカーによる機械学習の概要から実際の操作まで学びます。

政治メーカーとS3の連携を通じて、画像の保存、読み込み、消去が実行可能です。

チャンネル登録や高評価、コメントを通じて、デタサイエンス研究所のコンテンツをサポートしてください。

Transcripts

play00:00

ようこそデタサイエンス研究所へはい今回

play00:03

はですね政治メーカーによる機械学習に

play00:06

ついて解説していきたいと思いますはい

play00:09

えっと今回は実際にAWSのサービスの1

play00:11

つである政治メーカーですねまジュピター

play00:14

ラボとかジュピターノートブックを開く

play00:16

ことができるサービスについて解説して

play00:18

いきますはいえっとま実際にあのいじって

play00:20

いきますAWSを使ってで今回の流れは

play00:23

こんな感じですね政治メーカーの概要

play00:25

ノートブックインスタンスの作成

play00:26

ノートブックで画像認識でS3と連携に

play00:28

ついて解説していきと思い

play00:31

ますデータサイエンス研究所はいそれでは

play00:34

まず政治メーカーの概要なんですけどま

play00:36

1番最初の動画でもまこのシリーズですね

play00:39

このシリーズの1番最初の動画でも話した

play00:40

通り政治メーカーはまジュピターラボとか

play00:43

ジュピターノートブックが使えるあの

play00:45

サービスになってますまネットワークを

play00:47

経由してですねま計算資源はもちろん

play00:49

こっちのサーバーになりますであのこれ

play00:52

注意点なんですけど今回セジメーカーとS

play00:54

3使ってやっていくんですけどあのまお金

play00:58

がかかってしまいます多少をまそんな高く

play01:00

はないんですけどこれ試すだけでも

play01:02

ちょっとお金かかっちゃうのでまあのこれ

play01:04

見るだけでも大丈夫ですまあのかかるって

play01:07

言っても大してかかんないと思うのでま

play01:09

実際に試してもいいんですけどまあの見て

play01:11

あそんなことができるんだってあの納得

play01:14

するだけでもいいと思いますで実際に政治

play01:16

メーカーとS3連携させますま画像をあれ

play01:20

ですね保存したりま消去したりみたいな

play01:22

こともやりますであれですねま分析とか

play01:26

色々できるんですけど今回は画像認識です

play01:28

ね政治メーカーを使って画像の認識やって

play01:30

いきますはいそれではノートブック

play01:32

インスタンスの作成なんですけどまこの

play01:34

マネージメントコンソールですねAWSの

play01:36

マネージメントコンソール行ってここの

play01:38

検索で政治メーカー検索するとま

play01:40

Amazon政治メーカーって出るのでま

play01:42

押してもらってそうするとこういう画面に

play01:44

なりますとでここの左の部分ですね左の

play01:48

部分にノートブックっていうのがあるので

play01:50

そこのですねノートブックのノートブック

play01:52

インスタンスクリックしてもらうとこんな

play01:54

感じで出てきますでノートブック

play01:56

インスタンスの作成のボタン押してもらう

play01:58

とま作成してくんですできるんですけどま

play02:01

まずタイトル適当に入れますでま他は

play02:04

デフォルトでいいんですけどま下の方に

play02:06

行くとですねまこれアクセス許可と暗号化

play02:09

っていうのがあってIamロールっていう

play02:11

まサービスからサービスにアクセスする時

play02:13

に使うアですねこれをま新しく作成でき

play02:16

ますとで作成する時にこれですねあのS3

play02:20

バケットあ2のS3バケットとか特定のS

play02:23

3バケットとかなしとかまなんかS3の

play02:25

バケットにそのアクセスできるロールを

play02:28

作成できますとこここでは2のS3

play02:30

バケットにしておきますなんかこんな感じ

play02:33

で色々出てきてま名前に政治メーカーが

play02:35

含まれる2のS3バケットとかにマクス

play02:38

できるようになりますこれででロールを

play02:39

作成してそれを指定してくださいでもう

play02:42

これ設定できたらそのままノートブック

play02:43

インスタンス作成してもらうとこんな感じ

play02:45

になりますはいペンディング中ですねで

play02:49

作成してってで実際に作成されるとこんな

play02:51

感じでここにジュピターを開くと

play02:54

ジュピターラブを開くって出てくるのでま

play02:56

これジュピターラブを開くって押すと実際

play02:58

にジュピターラブを開くことがができます

play03:00

で実際にここをジュピターラボ押すと

play03:02

こんな感じで開きますでいろんなのが設定

play03:06

できますまパトチが入ってるやつとか

play03:08

テンサーフローが入ってるやつとかま

play03:10

いろんなこのカーネルがあるのでま好きな

play03:12

やつ選んでくださいということになります

play03:15

はいじゃあそしたら実際にノートブックで

play03:17

画像認識やるんですけどまここで新しく

play03:19

画像認識を学ぶっていうのはめどくさいの

play03:21

で僕が以前画像認識のシリーズの動画あげ

play03:25

たのでそこで使ったコードですねこれを

play03:28

あの改めてここで使っていきますで内容に

play03:30

ついてはもうあの解説しませんただまこれ

play03:33

使えるよっっていうのでまあの勉強した方

play03:35

がいたらま実際にやってみてくださいで

play03:38

このgitHUBの僕の画像認識のページ

play03:40

行ってもらってこれですねこのコード押し

play03:42

てこのURLをですねこうコピーしといて

play03:46

くださいでもう1回ジタラボに戻りますと

play03:49

でえっとま適当に新しいのノートブック

play03:52

作ってくださいまこのプラスとかまさっき

play03:54

のどっかのカーネルをしたらできるので

play03:56

押してもらってここでびくりマークの

play03:59

ギットクローンであのさっきのURL

play04:01

コピーペしてペーストですねペーストして

play04:04

やるとまさっきのあれですねgitHUB

play04:06

上にあるフォルダーファイルが

play04:08

ダウンロードできますとでこのフォルダー

play04:11

の中にあるノートブックを使っていきます

play04:13

はいじゃ実際にこのフォルダーの中あの

play04:15

ダブルクリックで行ってもらって1個目

play04:18

ですねalexnetのフォルダーを開き

play04:20

ますはいそうするとどのカーネルで開き

play04:22

ますかみたいなあのがあるのでパ等値が

play04:25

入ってるやつですねを開きますでこれでま

play04:29

ですねカーネルで開いたら実際にこんな

play04:31

感じでノートブック開けるんですけどま

play04:34

これを上から実行していけばあの画像認識

play04:36

ができますそのままだからまノートブック

play04:38

で好きなことができるんですねあラボで

play04:41

ジュピターラボででまちなみにここのパス

play04:44

ですねパスだけちょっと変えるとあれ実際

play04:47

にあの全部動かすことができますはいそし

play04:50

たら次にですねS3の作成ですね実際に

play04:53

ストレージと政治メーカーでやり取りする

play04:56

方法をやっていきますでこれあの

play04:58

マネジメンコンソール戻ってもらってでS

play05:01

3って検索するとS3が出てくるのでま

play05:04

それでS3をしますとでそしたらまあの

play05:08

バケットの画面行ってもらってでここで

play05:11

バケットを新しく作成しますでこの作成

play05:14

ボタンを押すとまバケットを作成して

play05:16

いけるんですけどまこう適当に名前入れて

play05:19

いきますでこのバケットはあの誰とも被ら

play05:23

ない名前じゃないとだめですでその上で

play05:25

政治メーカーっていう名前を入れてあげ

play05:27

ましょうまその政治メーカーからアクセス

play05:29

しやすいいうようにですね政治メーカーっ

play05:30

ていう名前をこの名前の中に入れてあげ

play05:32

ますでもう後はもうそのままの設定であの

play05:35

どんどん作っていきますはい下スクロール

play05:37

してもらってバケットを作成で作成します

play05:39

で実際にこれでバケット作成したらもう1

play05:42

回あの政治メーカーのジュピターラボの

play05:44

画面行ってもらってコードを書き足して

play05:46

いきますでコードの中身なんですけど

play05:48

こんな感じですねま1番最初はクローンし

play05:51

たやつさっきのやつになりますでその上で

play05:53

インポートb3ですねでバケットネーム

play05:57

なんかしてさっきあれですね入力した名前

play05:59

指定してでここはあの僕のと変えた方が

play06:02

いいかもしれませんもう自分の好きな名前

play06:04

なんですけど政治メーカーは入れてもらっ

play06:06

てでS3=B3のリソースS3でS3.

play06:10

バケットバケットネームでこれがバケット

play06:12

になりますまこのここでS3の

play06:14

オブジェクト作ってS1のドトバケットで

play06:17

このバケットネーム指定したらこの

play06:18

バケットがこのバケットネームのバケット

play06:21

になりますとはいめっちゃバケット

play06:22

バケット言いましたけどでじゃあ実際に

play06:26

ですね画像を保存するんですけどこのS3

play06:28

にまずこれですね読み込みます画像をあの

play06:33

さっき画像認識の時に画像読み込んだんで

play06:35

ギックロンでその画像をあの読み込みます

play06:38

あこれはリストですね画像のパスのリスト

play06:41

をあのここで入れてでそのパスのリストの

play06:45

1番上ですね0番目のやつを実際に保存し

play06:48

ますで保存の方法はこれですね

play06:50

backet.uploファイルでその

play06:53

パスとあとはこれですねまS3上で保存

play06:56

するパスになりますイメージネットの

play06:58

サンプル.JPEGっていう名前でこの

play07:01

ファイルを保存しますはいじゃ実際にこれ

play07:04

打ったらですねまこのファイルですねが

play07:07

保存されるんですけど実際に確認します

play07:10

はいS3に戻ってもらって作成した

play07:12

バケットですねクリックしてもらうと

play07:14

こんな感じでイメージネットっていうのが

play07:16

出てきますでこうクリックするとSLE.

play07:19

JPが保存されてますはいじゃあここまで

play07:21

確認したらですねもう1回戻りますはい

play07:23

もう1回戻ってコード書き足しますはい次

play07:27

は何するかって言うとあれですね

play07:30

ダウンロードして消去しますはいこの

play07:33

イメージオブジェクトっていうのを新しく

play07:35

作りますこのバケットですねbaket.

play07:37

オブジェクトのこれイーネットの

play07:39

SAMPLE.JPEGはいで要はこれ

play07:42

保存したやつですね保存したやつに

play07:44

baket.OBJでイメージ

play07:45

オブジェクトこれがだからさっきの保存し

play07:48

た画像のオブジェクトになりますでこれの

play07:50

ドダウンロードファイルでSLE.JPて

play07:53

とかってするとこの政治メーカーに画像を

play07:56

ダウンロードすることができますはいこれ

play07:58

はS3からダウンロロードですねでこっち

play08:00

はドデリートするとあのオブジェクトを

play08:03

消去することができますなのでまここで

play08:05

アップロードするSにアップロードも

play08:07

できるしダウンロードもできるし消去も

play08:09

できるっていうのをあのやりますはいそし

play08:12

たらですね最後サービス消去していき

play08:14

ましょうま残ってたらお金かかっちゃうん

play08:16

でねまあの作ったバケット選択してもらっ

play08:19

てま消去とまなんかバケットの中に入って

play08:22

たらからにするをしてから消去押さなきゃ

play08:25

だめなんですけどまさっきあのコード上で

play08:28

ですねま政治メーカーで消去したのでもう

play08:30

からになってるので消去押すとマーケット

play08:32

を消去することができますでですねま政治

play08:35

メーカーの方もちゃんとあのインスタンス

play08:38

をあの消去しますま停止してからですね

play08:41

停止してからあの実際に消去します

play08:45

とデータサイエンス研究所はいそれでは

play08:48

最後まとめなんですけど今回は政治

play08:50

メーカーによる機械学習ということでま

play08:52

最初政治メーカーの概要からノートブック

play08:54

インスタンス実際に作ってまノートブック

play08:56

にアクセスするとでノートブックで画像

play08:59

認識ということでま僕が以前解説した

play09:01

コード持ってきてそれを実際に実行すると

play09:03

実行できるよっていうのを確認しましたで

play09:06

次にS3の等の連携でま画像を保存したり

play09:08

読み込んだり消去したりっていうのやって

play09:10

最後にサービスの消去までやりましたはい

play09:13

いかがだったでしょうか政治メカによる

play09:15

機械学習についてもしよろしければ

play09:17

チャンネル登録高評価コメントぜひぜひお

play09:19

待ちしておりますそれではまたバイ

play09:28

バイ

play09:32

[音楽]

play09:40

Rate This

5.0 / 5 (0 votes)

Related Tags
AWS機械学習政治メーカーS3連携画像認識データサイエンスクラウドコンピューティングノートブックデータ分析AI技術クラウドサービス
Do you need a summary in English?