我在查看 Hub (AI 的資料集格式)并注意到 Hub 與 GCP 和 AWS 集成。我想知道它是否也支持與 MinIO 的集成。
我知道 Hub 允許您直接將資料集從云存盤流式傳輸到 ML 作業流,但我不確定它集成了哪些 ML 作業流。
我想在 S3 上使用 MinIO,因為我的團隊有一個自托管的 MinIO 實體(又名它是免費的)。
uj5u.com熱心網友回復:
Hub 允許您從任何地方加載資料。Hub 在本地作業,在 Google Cloud、MinIO、AWS 以及 Activeloop 存盤上(不需要服務器!)。因此,它允許您加載資料并將資料集從云存盤直接流式傳輸到 ML 作業流。
您可以在 Hub 檔案中找到有關存盤身份驗證的更多資訊。
然后,Hub 允許您通過簡單的資料集集成將資料流式傳輸到 PyTorch 或 TensorFlow,就好像資料是本地資料一樣,因為您可以將 Hub 資料集連接到 ML 框架。
轉載請註明出處,本文鏈接:https://www.uj5u.com/qukuanlian/445781.html
下一篇:如何在顫動中選擇多個容器?
