將資料從本地檔案系統上傳到 Azure Data Lake¶
Azure Data Lake (ADL) 使儲存任何大小、形狀和速度的資料變得容易。本頁介紹如何將資料從本地檔案系統上傳到 ADL。
先決條件任務¶
要使用這些運算子,您必須做幾件事:
使用 AZURE PORTAL 或 AZURE CLI 建立必要的資源。
透過 pip 安裝 API 庫。
pip install 'apache-airflow[azure]'詳細資訊請參閱 安裝 Airflow®
設定連線.
LocalFilesystemToADLSOperator¶
LocalFilesystemToADLSOperator 允許您將資料從本地檔案系統上傳到 ADL。
以下是使用此運算子將檔案上傳到 ADL 的示例。
tests/system/microsoft/azure/example_local_to_adls.py
upload_file = LocalFilesystemToADLSOperator(
task_id="upload_task",
local_path=LOCAL_FILE_PATH,
remote_path=REMOTE_FILE_PATH,
)
參考¶
更多資訊,請參閱: