ASF: Apache 軟體基金會¶
Airflow 支援由 Apache 軟體基金會 建立的各種軟體。
軟體¶
這些整合允許您在 Apache 軟體基金會開發的軟體中執行各種操作。
Apache Beam¶
- Operator：
- Hook：
- 指南：
- Provider：
- 產品文件：
Apache Cassandra¶
Apache Drill¶
Apache Druid¶
Apache Flink¶
Apache Hive¶
- Operator：
airflow.providers.apache.hive.operators.hive,airflow.providers.apache.hive.operators.hive_stats.- Hook：
- Sensor：
airflow.providers.apache.hive.sensors.hive_partition,airflow.providers.apache.hive.sensors.metastore_partition,airflow.providers.apache.hive.sensors.named_hive_partition.- 指南：
- Provider：
- 產品文件：
Apache Impala¶
- Hook：
- Provider：
- 產品文件：
Apache Kafka¶
- Operator：
airflow.providers.apache.kafka.operators.consume,airflow.providers.apache.kafka.operators.produce.- Hook：
airflow.providers.apache.kafka.hooks.base,airflow.providers.apache.kafka.hooks.client,airflow.providers.apache.kafka.hooks.consume,airflow.providers.apache.kafka.hooks.produce.- Sensor：
- Provider：
- 產品文件：
Apache Kylin¶
- Operator：
- Hook：
- Provider：
- 產品文件：
Apache Livy¶
- Operator：
- Hook：
- Sensor：
- 指南：
- Provider：
- 產品文件：
Apache Pig¶
- Operator：
- Hook：
- 指南：
- Provider：
- 產品文件：
Apache Pinot¶
Apache Spark¶
- Operator：
airflow.providers.apache.spark.operators.spark_jdbc,airflow.providers.apache.spark.operators.spark_sql,airflow.providers.apache.spark.operators.spark_submit.- Hook：
airflow.providers.apache.spark.hooks.spark_connect,airflow.providers.apache.spark.hooks.spark_jdbc,airflow.providers.apache.spark.hooks.spark_jdbc_script,airflow.providers.apache.spark.hooks.spark_sql,airflow.providers.apache.spark.hooks.spark_submit.- 指南：
- Provider：
- 產品文件：
標準¶
- Operator：
airflow.providers.standard.operators.datetime,airflow.providers.standard.operators.weekday,airflow.providers.standard.operators.bash,airflow.providers.standard.operators.python,airflow.providers.standard.operators.empty,airflow.providers.standard.operators.trigger_dagrun,airflow.providers.standard.operators.latest_only,airflow.providers.standard.operators.smooth,airflow.providers.standard.operators.branch.- Hook：
airflow.providers.standard.hooks.filesystem,airflow.providers.standard.hooks.package_index,airflow.providers.standard.hooks.subprocess.- Sensor：
airflow.providers.standard.sensors.date_time,airflow.providers.standard.sensors.time_delta,airflow.providers.standard.sensors.time,airflow.providers.standard.sensors.weekday,airflow.providers.standard.sensors.bash,airflow.providers.standard.sensors.python,airflow.providers.standard.sensors.filesystem,airflow.providers.standard.sensors.external_task.- 指南：
- Provider：
- 產品文件：
WebHDFS¶
- Hook：
- Sensor：
- 指南：
- Provider：
- 產品文件：
傳輸¶
這些整合允許您在 Apache 軟體基金會開發的軟體之間複製資料。
Apache Hive 到 Amazon DynamoDB¶
- 源產品文件：
- 目標產品文件：
- Operator 指南：
- Python API：
- Provider：
Apache Hive 到 Apache Druid¶
- 源產品文件：
- 目標產品文件：
- Python API：
- Provider：
Vertica 到 Apache Hive¶
- 源產品文件：
- 目標產品文件：
- Python API：
- Provider：
Apache Hive 到 MySQL¶
- 源產品文件：
- 目標產品文件：
- Python API：
- Provider：
Apache Hive 到 Samba¶
- 源產品文件：
- 目標產品文件：
- Python API：
- Provider：
Amazon Simple Storage Service (S3) 到 Apache Hive¶
- 源產品文件：
- 目標產品文件：
- Python API：
- Provider：
MySQL 到 Apache Hive¶
- 源產品文件：
- 目標產品文件：
- Python API：
- Provider：
Microsoft SQL Server (MSSQL) 到 Apache Hive¶
- 源產品文件：
- 目標產品文件：
- Python API：
- Provider：
Apache Cassandra 到 Google Cloud Storage (GCS)¶
- 源產品文件：
- 目標產品文件：
- Python API：
- Provider：