我是一名使用 AWS 的資料工程師,我們想要構建一個資料管道,以便在 QuickSigth 上可視化我們的 Dynmaodb 資料,如您所知,無法將 dynamo 直接連接到 Quick……您必須通過 S3。
S3 將是我們的資料湖,問題是日期更新頻繁(例如,名為的列可以更改/客戶狀態可以演變..)
因此,我正在尋找批處理解決方案,以便始終從我的 s3 資料湖上的 dynamo 獲取最新資料,并在 quicksigth 中對其進行可視化。
感謝你
uj5u.com熱心網友回復:
您可以在控制臺中的 DynamoDB 中訪問您的表,并將資料匯出到Streams and Exports選項卡下的 S3 。AWS 的這篇博文解釋了您的需求。
您也可以使用 Athena而不是 S3嘗試這種方法。
轉載請註明出處,本文鏈接:https://www.uj5u.com/houduan/388700.html
標籤:亚马逊网络服务 亚马逊-s3 溪流 亚马逊动态数据库 批量处理
上一篇:帶有React應用程式的AWSS3存盤桶:我的ReactSPA可能部分靜態嗎?
下一篇:Appache駱駝Gzip壓縮
