AWS CLI 實踐教程 第3集:CLI命令和Cloud Shell [數據工程師系列]

数据工程师日记
8粉絲
5 次觀看·2024年2月1日
在這個視頻中,我將介紹AWS CLI 命令行界面& CloudShell工具和實踐教程演示,讓AWS開發過程更加快速和有效率。無論你是剛剛入門還是已經有一些經驗,這個視頻都會為你提供有價值的信息。
內容大綱:
-AWS CLI 命令
-AWS Cloud Shell
如果你對數據領域感興趣,或者想要成為一名數據工程師,這個視頻將為你提供一些指導。
請記得訂閱我的頻道以獲取更多與數據工程相關的資源和教程。
有任何問題或建議,請在評論中留言。謝謝!
好,現在我們就來看看怎麼使用這個命令
我先看aws
首先你能使用help這個命令
它就會跟你解釋
CLI能做些什麼東西
它能支持什麼服務
當然這是一個很大的
所謂的user manual
如果你想要更詳細的解析
某個服務更詳細的解析
你可以到谷歌搜尋它的使用方法
我們首先先嚐試一下
剛剛我已經嘗試過的s3ls
就是列出所有在這個賬號裏面的bucket
這個bucket你接下來還能做的話
我現在知道有三個bucket
如果我想列出bucket裏面的東西
就能怎麼寫
s3,bucket的名字
你就會看到裏面的資料了
pre就是代表目錄
而這個是一個文件
如果你想要打開全部紙文件夾的資料
你能添加多一個recursive
因爲這個文件夾裏面挺多東西的
所以它全部都打印出來了
接下來我們還能嘗試
例如我想要從這個bucket拿取某一個文件
假如我是使用控制檯的話
我是無法打開這個文件的
我必須把它下載了
然後才用這個資料去閱讀
假如我想要在這兒閱讀的話
你可以直接把它拷貝到本地的目錄
它的指令就是cp
cp就是copy
給它你所要的bucket
然後再加個空格
然後再指定你想要把這個資料下載到什麼地方
我把它下載到desktop
然後AWS
我就把它下載到這個地方
我們去看看desktop
看到這個文件就被下載到本地了
接下來我能使用power shell的get content
我就可以打開這個文件
然後再使用
close
我就能打開這個資料
直接在這個cli閱讀所謂的資料
相反的來說
我想要把這個資料上載到s3的bucket裏面
我能使用s3copy
然後我就先聲明我想要copy的文件
然後再輸入s3的location path
你看這個就上載成功了
上載成功的話
然後我就從這個刷新
就能看到test.csv就被上載到這了
你可以看到這個是可以很方便的話
就是進行不同的文件的轉移等等的
你都可以在這個cli進行
現在我們嘗試使用其他的服務
例如AWS IAM
那IAM我可以說我要list roles
那就是說把全部所有的角色給打印出來
看到這個是我有11個roles
所以它就把全部給打印出來的
那稍微是有點長
而且我也不一定是每一個資料我都想知道
例如我想在這個role的list
看到這個是方形化
那這個list裏面我只是要列出所有的role name和create date
那我就能對我的命令進行一些更改
例如AWS IAM list role
然後我能進行一個query
我能進行一個搜尋
我就說我在想在所有roles的列表當中
獲取全部列表的每一個單元
那可是我只是需要role name和create date
那我就列入role name和create date
接下來你就會看到
它就是返回role name和create date
那這也是挺強大的
因爲你能對這個命令進行更改
稍微的query
輸入你所想要的列
它就會返回這個資料
所以可以很靈活很快速的
跟這個不同的服務進行獲取這個資料
那我們再試試看另外一個服務AWS Glue
AWS Glue是一個分佈式計算的服務
那我想看看我這有什麼AWS Glue的工作
它就列出了特別特別多東西
那我也可以在此進行這個query
例如說我想獲取的這個工作的名字
然後還有名字
然後還有看看last modified
就是它最後更改的時間
那我就能用回剛剛的query
那因爲這個剛剛我是使用roles
因爲那個列表返回是roles
可是這個的列表返回是jobs
所以我繼續要在我的這個
入jobs
那我要翻過AWS所有的列表
然後輸入這個名字
所以你就會看到這些資料
另外一個
那最後一個呢
我就想說我用回這個iam list roles
作爲這個例子
那所謂的現在呢
我就是從我這個主要的這個帳號獲取這些資料
如果我想要從另外一個帳號獲取資料呢
我就能通過我在那個config
跟credential文件裏面輸入的這個密鑰
那我就能轉換我的profile
轉換我的賬號
輸入我賬號的這個名稱
然後呢
你就可以得到這個賬號的這個資料了
那是非常強大的
就再次強調
這個cli真的可以
可以很快速呢
進行很多很複雜的這個操作
而且呢
它能配合這個windows powershell
或者是linux的那些bash command
能和一些bash script呢
能自動化很多很多操作
好
說完在本地運行這個AWS CLI
我就想介紹一下這個club shell這個工具
那club shell呢
你可以在這個AWS的控制檯這找到這個按鈕
當你點開過後呢
它就會打開一個terminal給你輸入這個命令
那也許它會
通常會
它會初始呢
會需要一些時間去
去初始化這個club shell
那你也同時間呢
能使用這個按鈕呢
把它開在另外一個U軟件的這個tab的
好
你看到呢
我現在已經可以輸入我的這個資料了
那我就先說AWS S3
LS
然後呢
SW
AWS S3
LS
S3
你就可以看到了
它的操作呢
跟這個在本地的這個terminal是一樣的
然後呢
這一個的這個club shell呢
是使用這個linux command
所以是跟剛剛
跟剛剛那個power shell呢
是有稍微一點點的不同
好
我們再試試看AWS
AWS IAM release roles
你就會得到這個結果
然後你就能用pitch up跟pitch down呢
這個按鈕來瀏覽這個
當你瀏覽結束過後呢
你就可以按q這個鍵來退出
好
然後呢
如果想要
你想要的這個
你只需要特定的幾個幾列
那這個資料呢
你能通過這個
那你就會看到呢
它就會通過的你的這個query呢
去限制這個返回的這一個
那你就看到這個是一個很方便的
就是說
你不需要提供任何密鑰
和access key跟secret access key
你只需要在這個控制檯
它就會確認用你這個用戶呢
去登入這個cli
你就可以馬上執行這些命令
那當然呢
這個
這個用戶呢
就必須擁有這個
使用這個cloud shell的這個權限
如果沒有的話
你可以到這個用戶這來添加
然後
然後
直接添加policy search for cloud shell
你就會看到呢
你可以添加AWS cloud shell with full access
那因爲呢
我這個用戶是那個管理員的關係呢
所以他都能直接使用
如果其他用戶呢
如果沒有特定的這個權限的話呢
他就會
無法無法使用這個cloud shell
那本期視頻呢
我就介紹了這個AWS CLI
一個很好用的一個工具
加上呢
這個AWS控制檯中的這個cloud shell工具
你都可以使用它呢
去跟不同的這個服務進行互動
甚至是
跟不同的賬號的這個
服務呢進行互動
所以是一個很強大的工具
那我接下來呢
我接下來呢
會再錄製其他更稍微更深
更深度一些的這個影片
那如果你喜歡我這個影片的話
就麻煩點個贊
分享
跟訂閱我的頻道
那我們下期再見
bye
