我正在通過 Google Cloud Data Fusion 運行 ETL 管道。管道操作的快速摘要:
- 接收一個 csv 檔案,它是一個名稱串列
- 從 bigquery-public-data 中獲取一個表
- 將兩者連接起來,然后將結果輸出到表格中
- 還將結果輸出到 Group By,其中合并重復項,并將它們的分數相加。
- 將生成的作者姓名和分數串列輸出到表和 Google Cloud Storage 存盤桶中的 CSV 檔案。
所有這些都應該正常作業,兩個表都顯示正確的資料,并且是可查詢的。
然而,來自 Group By 的 CSV 輸出作為 37 個不同的部分進入 GCS 存盤桶,每個部分都使用默認命名系統命名(“part-r-00000”到“part-r-00036”)。它們確實以 CSV 格式出現(text/csv 和 application/csv 都生成了可用的 CSV 檔案。
我希望將輸出作為具有給定名稱 (author_rankings.csv) 的單個 csv 檔案匯出到 GCS 存盤桶檔案夾中。下面我附上了管道的螢屏截圖和一些輸出的影像。如果我能提供任何其他資訊,請告訴我。
感謝您的任何見解。

謝謝并恭祝安康,
薩加爾
轉載請註明出處,本文鏈接:https://www.uj5u.com/houduan/385962.html
下一篇:常規檔案夾/檔案名C#
