AWS: 亞馬遜網路服務

Airflow 支援 亞馬遜網路服務

所有鉤子都基於 airflow.providers.amazon.aws.hooks.base_aws

服務

這些整合允許您在亞馬遜網路服務中執行各種操作。

Amazon Appflow

運算子

airflow.providers.amazon.aws.operators.appflow.

鉤子

airflow.providers.amazon.aws.hooks.appflow.

指南

Amazon AppFlow.

提供者

apache-airflow-providers-amazon

產品文件

Amazon Appflow

Amazon Athena

運算子

airflow.providers.amazon.aws.operators.athena.

鉤子

airflow.providers.amazon.aws.hooks.athena, airflow.providers.amazon.aws.hooks.athena_sql

感測器

airflow.providers.amazon.aws.sensors.athena.

指南

Amazon Athena, Amazon Athena SQL

提供者

apache-airflow-providers-amazon

產品文件

Amazon Athena

Amazon Bedrock

運算子

airflow.providers.amazon.aws.operators.bedrock.

鉤子

airflow.providers.amazon.aws.hooks.bedrock.

感測器

airflow.providers.amazon.aws.sensors.bedrock.

指南

Amazon Bedrock.

提供者

apache-airflow-providers-amazon

產品文件

Amazon Bedrock

Amazon Chime

鉤子

airflow.providers.amazon.aws.hooks.chime.

提供者

apache-airflow-providers-amazon

產品文件

Amazon Chime

Amazon CloudFormation

運算子

airflow.providers.amazon.aws.operators.cloud_formation.

鉤子

airflow.providers.amazon.aws.hooks.cloud_formation.

感測器

airflow.providers.amazon.aws.sensors.cloud_formation.

指南

AWS CloudFormation.

提供者

apache-airflow-providers-amazon

產品文件

Amazon CloudFormation

Amazon CloudWatch Logs

鉤子

airflow.providers.amazon.aws.hooks.logs.

提供者

apache-airflow-providers-amazon

產品文件

Amazon CloudWatch Logs

Amazon Comprehend

運算子

airflow.providers.amazon.aws.operators.comprehend.

鉤子

airflow.providers.amazon.aws.hooks.comprehend.

感測器

airflow.providers.amazon.aws.sensors.comprehend.

指南

Amazon Comprehend.

提供者

apache-airflow-providers-amazon

產品文件

Amazon Comprehend

Amazon DataSync

運算子

airflow.providers.amazon.aws.operators.datasync.

鉤子

airflow.providers.amazon.aws.hooks.datasync.

指南

AWS DataSync.

提供者

apache-airflow-providers-amazon

產品文件

Amazon DataSync

Amazon DynamoDB

鉤子

airflow.providers.amazon.aws.hooks.dynamodb.

感測器

airflow.providers.amazon.aws.sensors.dynamodb.

指南

Amazon DynamoDB.

提供者

apache-airflow-providers-amazon

產品文件

Amazon DynamoDB

Amazon EC2

運算子

airflow.providers.amazon.aws.operators.ec2.

鉤子

airflow.providers.amazon.aws.hooks.ec2.

感測器

airflow.providers.amazon.aws.sensors.ec2.

指南

Amazon Elastic Compute Cloud (EC2).

提供者

apache-airflow-providers-amazon

產品文件

Amazon EC2

Amazon ECS

運算子

airflow.providers.amazon.aws.operators.ecs.

鉤子

airflow.providers.amazon.aws.hooks.ecs.

感測器

airflow.providers.amazon.aws.sensors.ecs.

提供者

apache-airflow-providers-amazon

產品文件

Amazon ECS

Amazon Elastic Container Registry (ECR)

鉤子

airflow.providers.amazon.aws.hooks.ecr.

提供者

apache-airflow-providers-amazon

產品文件

Amazon Elastic Container Registry (ECR)

Amazon Elastic Kubernetes Service (EKS)

運算子

airflow.providers.amazon.aws.operators.eks.

鉤子

airflow.providers.amazon.aws.hooks.eks.

感測器

airflow.providers.amazon.aws.sensors.eks.

指南

Amazon Elastic Kubernetes Service (EKS).

提供者

apache-airflow-providers-amazon

產品文件

Amazon Elastic Kubernetes Service (EKS)

Amazon ElastiCache

鉤子

airflow.providers.amazon.aws.hooks.elasticache_replication_group.

提供者

apache-airflow-providers-amazon

產品文件

Amazon ElastiCache

Amazon EMR

運算子

airflow.providers.amazon.aws.operators.emr.

鉤子

airflow.providers.amazon.aws.hooks.emr.

感測器

airflow.providers.amazon.aws.sensors.emr.

指南

Amazon EMR.

提供者

apache-airflow-providers-amazon

產品文件

Amazon EMR

Amazon EMR on EKS

運算子

airflow.providers.amazon.aws.operators.emr.

鉤子

airflow.providers.amazon.aws.hooks.emr.

感測器

airflow.providers.amazon.aws.sensors.emr.

指南

Amazon EMR on Amazon EKS.

提供者

apache-airflow-providers-amazon

產品文件

Amazon EMR on EKS

Amazon EventBridge

運算子

airflow.providers.amazon.aws.operators.eventbridge.

鉤子

airflow.providers.amazon.aws.hooks.eventbridge.

指南

Amazon EventBridge.

提供者

apache-airflow-providers-amazon

產品文件

Amazon EventBridge

Amazon Glacier

運算子

airflow.providers.amazon.aws.operators.glacier.

鉤子

airflow.providers.amazon.aws.hooks.glacier.

感測器

airflow.providers.amazon.aws.sensors.glacier.

指南

Amazon S3 Glacier.

提供者

apache-airflow-providers-amazon

產品文件

Amazon Glacier

Amazon Kinesis Data Firehose

鉤子

airflow.providers.amazon.aws.hooks.kinesis.

提供者

apache-airflow-providers-amazon

產品文件

Amazon Kinesis Data Firehose

Amazon Neptune

運算子

airflow.providers.amazon.aws.operators.neptune.

鉤子

airflow.providers.amazon.aws.hooks.neptune.

指南

Amazon Neptune.

提供者

apache-airflow-providers-amazon

產品文件

Amazon Neptune

Amazon OpenSearch Serverless

鉤子

airflow.providers.amazon.aws.hooks.opensearch_serverless.

感測器

airflow.providers.amazon.aws.sensors.opensearch_serverless.

指南

Amazon OpenSearch Serverless.

提供者

apache-airflow-providers-amazon

產品文件

Amazon OpenSearch Serverless

Amazon QuickSight

運算子

airflow.providers.amazon.aws.operators.quicksight.

鉤子

airflow.providers.amazon.aws.hooks.quicksight.

感測器

airflow.providers.amazon.aws.sensors.quicksight.

指南

Amazon QuickSight.

提供者

apache-airflow-providers-amazon

產品文件

Amazon QuickSight

Amazon RDS

運算子

airflow.providers.amazon.aws.operators.rds.

鉤子

airflow.providers.amazon.aws.hooks.rds.

感測器

airflow.providers.amazon.aws.sensors.rds.

指南

Amazon Relational Database Service (RDS).

提供者

apache-airflow-providers-amazon

產品文件

Amazon RDS

Amazon Redshift

運算子

airflow.providers.amazon.aws.operators.redshift_cluster, airflow.providers.amazon.aws.operators.redshift_data

鉤子

airflow.providers.amazon.aws.hooks.redshift_sql, airflow.providers.amazon.aws.hooks.redshift_cluster, airflow.providers.amazon.aws.hooks.redshift_data

感測器

airflow.providers.amazon.aws.sensors.redshift_cluster.

指南

Amazon Redshift SQL, Amazon Redshift (叢集)

提供者

apache-airflow-providers-amazon

產品文件

Amazon Redshift

Amazon SageMaker

運算子

airflow.providers.amazon.aws.operators.sagemaker.

鉤子

airflow.providers.amazon.aws.hooks.sagemaker.

感測器

airflow.providers.amazon.aws.sensors.sagemaker.

指南

Amazon SageMaker.

提供者

apache-airflow-providers-amazon

產品文件

Amazon SageMaker

Amazon SageMaker Unified Studio

運算子

airflow.providers.amazon.aws.operators.sagemaker_unified_studio.

鉤子

airflow.providers.amazon.aws.hooks.sagemaker_unified_studio.

感測器

airflow.providers.amazon.aws.sensors.sagemaker_unified_studio.

指南

Amazon SageMaker Unified Studio.

提供者

apache-airflow-providers-amazon

產品文件

Amazon SageMaker Unified Studio

Amazon SecretsManager

鉤子

airflow.providers.amazon.aws.hooks.secrets_manager.

提供者

apache-airflow-providers-amazon

產品文件

Amazon SecretsManager

Amazon Simple Email Service (SES)

鉤子

airflow.providers.amazon.aws.hooks.ses.

指南

Amazon Elastic Container Service (ECS).

提供者

apache-airflow-providers-amazon

產品文件

Amazon Simple Email Service (SES)

Amazon Simple Notification Service (SNS)

運算子

airflow.providers.amazon.aws.operators.sns.

鉤子

airflow.providers.amazon.aws.hooks.sns.

指南

Amazon Simple Notification Service (SNS).

提供者

apache-airflow-providers-amazon

產品文件

Amazon Simple Notification Service (SNS)

Amazon Simple Queue Service (SQS)

運算子

airflow.providers.amazon.aws.operators.sqs.

鉤子

airflow.providers.amazon.aws.hooks.sqs.

感測器

airflow.providers.amazon.aws.sensors.sqs.

指南

Amazon Simple Queue Service (SQS).

提供者

apache-airflow-providers-amazon

產品文件

Amazon Simple Queue Service (SQS)

Amazon Simple Storage Service (S3)

運算子

airflow.providers.amazon.aws.operators.s3.

鉤子

airflow.providers.amazon.aws.hooks.s3.

感測器

airflow.providers.amazon.aws.sensors.s3.

指南

Amazon S3.

提供者

apache-airflow-providers-amazon

產品文件

Amazon Simple Storage Service (S3)

Amazon Systems Manager (SSM)

鉤子

airflow.providers.amazon.aws.hooks.ssm.

提供者

apache-airflow-providers-amazon

產品文件

Amazon Systems Manager (SSM)

Amazon Verified Permissions

鉤子

airflow.providers.amazon.aws.hooks.verified_permissions.

提供者

apache-airflow-providers-amazon

產品文件

Amazon Verified Permissions

Amazon Web Services

運算子

airflow.providers.amazon.aws.operators.base_aws.

鉤子

airflow.providers.amazon.aws.hooks.base_aws.

感測器

airflow.providers.amazon.aws.sensors.base_aws.

提供者

apache-airflow-providers-amazon

產品文件

亞馬遜網路服務

AWS Batch

運算子

airflow.providers.amazon.aws.operators.batch.

鉤子

airflow.providers.amazon.aws.hooks.batch_client, airflow.providers.amazon.aws.hooks.batch_waiters

感測器

airflow.providers.amazon.aws.sensors.batch.

指南

AWS Batch.

提供者

apache-airflow-providers-amazon

產品文件

AWS Batch

AWS Database Migration Service

運算子

airflow.providers.amazon.aws.operators.dms.

鉤子

airflow.providers.amazon.aws.hooks.dms.

感測器

airflow.providers.amazon.aws.sensors.dms.

指南

AWS Database Migration Service (DMS).

提供者

apache-airflow-providers-amazon

產品文件

AWS Database Migration Service

AWS Glue

運算子

airflow.providers.amazon.aws.operators.glue, airflow.providers.amazon.aws.operators.glue_crawler

鉤子

airflow.providers.amazon.aws.hooks.glue, airflow.providers.amazon.aws.hooks.glue_crawler, airflow.providers.amazon.aws.hooks.glue_catalog

感測器

airflow.providers.amazon.aws.sensors.glue, airflow.providers.amazon.aws.sensors.glue_crawler, airflow.providers.amazon.aws.sensors.glue_catalog_partition

指南

AWS Glue.

提供者

apache-airflow-providers-amazon

產品文件

AWS Glue

AWS Glue DataBrew

運算子

airflow.providers.amazon.aws.operators.glue_databrew.

鉤子

airflow.providers.amazon.aws.hooks.glue_databrew.

指南

AWS Glue DataBrew.

提供者

apache-airflow-providers-amazon

產品文件

AWS Glue DataBrew

AWS Lambda

運算子

airflow.providers.amazon.aws.operators.lambda_function.

鉤子

airflow.providers.amazon.aws.hooks.lambda_function.

感測器

airflow.providers.amazon.aws.sensors.lambda_function.

指南

AWS Lambda.

提供者

apache-airflow-providers-amazon

產品文件

AWS Lambda

AWS Security Token Service (STS)

鉤子

airflow.providers.amazon.aws.hooks.sts.

提供者

apache-airflow-providers-amazon

產品文件

AWS Security Token Service (STS)

AWS Step Functions

運算子

airflow.providers.amazon.aws.operators.step_function.

鉤子

airflow.providers.amazon.aws.hooks.step_function.

感測器

airflow.providers.amazon.aws.sensors.step_function.

指南

AWS Step Functions.

提供者

apache-airflow-providers-amazon

產品文件

AWS Step Functions

傳輸

這些整合允許您在亞馬遜網路服務之間傳輸資料。

Amazon DynamoDB 到 Amazon Simple Storage Service (S3) 的傳輸

源產品文件

Amazon DynamoDB

目標產品文件

Amazon Simple Storage Service (S3)

運算子指南

Amazon DynamoDB 到 Amazon S3

Python API

airflow.providers.amazon.aws.transfers.dynamodb_to_s3

提供者

apache-airflow-providers-amazon

Google Cloud Storage (GCS) 到 Amazon Simple Storage Service (S3) 的傳輸

源產品文件

Google Cloud Storage (GCS)

目標產品文件

Amazon Simple Storage Service (S3)

運算子指南

Google Cloud Storage 到 Amazon S3 傳輸運算子

Python API

airflow.providers.amazon.aws.transfers.gcs_to_s3

提供者

apache-airflow-providers-amazon

Amazon Glacier 到 Google Cloud Storage (GCS) 的傳輸

源產品文件

Amazon Glacier

目標產品文件

Google Cloud Storage (GCS)

運算子指南

Amazon S3 Glacier 到 GCS

Python API

airflow.providers.amazon.aws.transfers.glacier_to_gcs

提供者

apache-airflow-providers-amazon

Google 到 Amazon Simple Storage Service (S3) 的傳輸

源產品文件

Google

目標產品文件

Amazon Simple Storage Service (S3)

運算子指南

Google API 到 Amazon S3

Python API

airflow.providers.amazon.aws.transfers.google_api_to_s3

提供者

apache-airflow-providers-amazon

Apache Hive 到 Amazon DynamoDB 的傳輸

源產品文件

Apache Hive

目標產品文件

Amazon DynamoDB

運算子指南

Apache Hive 到 Amazon DynamoDB

Python API

airflow.providers.amazon.aws.transfers.hive_to_dynamodb

提供者

apache-airflow-providers-amazon

超文字傳輸協議 (HTTP) 到 Amazon Simple Storage Service (S3) 的傳輸

源產品文件

超文字傳輸協議 (HTTP)

目標產品文件

Amazon Simple Storage Service (S3)

運算子指南

HTTP 到 Amazon S3

Python API

airflow.providers.amazon.aws.transfers.http_to_s3

提供者

apache-airflow-providers-amazon

網際網路訊息訪問協議 (IMAP) 到 Amazon Simple Storage Service (S3) 的傳輸

源產品文件

網際網路訊息訪問協議 (IMAP)

目標產品文件

Amazon Simple Storage Service (S3)

運算子指南

IMAP 附件到 Amazon S3

Python API

airflow.providers.amazon.aws.transfers.imap_attachment_to_s3

提供者

apache-airflow-providers-amazon

MongoDB 到 Amazon Simple Storage Service (S3) 的傳輸

源產品文件

MongoDB

目標產品文件

Amazon Simple Storage Service (S3)

運算子指南

MongoDB 到 Amazon S3

Python API

airflow.providers.amazon.aws.transfers.mongo_to_s3

提供者

apache-airflow-providers-amazon

Amazon Redshift 到 Amazon Simple Storage Service (S3) 的傳輸

源產品文件

Amazon Redshift

目標產品文件

Amazon Simple Storage Service (S3)

運算子指南

Amazon Redshift 到 Amazon S3

Python API

airflow.providers.amazon.aws.transfers.redshift_to_s3

提供者

apache-airflow-providers-amazon

Amazon Simple Storage Service (S3) 到 Amazon Redshift 的傳輸

源產品文件

Amazon Simple Storage Service (S3)

目標產品文件

Amazon Redshift

運算子指南

Amazon S3 到 Amazon Redshift

Python API

airflow.providers.amazon.aws.transfers.s3_to_redshift

提供者

apache-airflow-providers-amazon

Amazon Simple Storage Service (S3) 到 SSH 檔案傳輸協議 (SFTP) 的傳輸

源產品文件

Amazon Simple Storage Service (S3)

目標產品文件

SSH 檔案傳輸協議 (SFTP)

運算子指南

Amazon S3 到 SFTP

Python API

airflow.providers.amazon.aws.transfers.s3_to_sftp

提供者

apache-airflow-providers-amazon

SSH 檔案傳輸協議 (SFTP) 到 Amazon Simple Storage Service (S3) 的傳輸

源產品文件

SSH 檔案傳輸協議 (SFTP)

目標產品文件

Amazon Simple Storage Service (S3)

運算子指南

SFTP 到 Amazon S3

Python API

airflow.providers.amazon.aws.transfers.sftp_to_s3

提供者

apache-airflow-providers-amazon

Amazon Simple Storage Service (S3) 到檔案傳輸協議 (FTP) 的傳輸

源產品文件

Amazon Simple Storage Service (S3)

目標產品文件

檔案傳輸協議 (FTP)

運算子指南

Amazon S3 到 FTP

Python API

airflow.providers.amazon.aws.transfers.s3_to_ftp

提供者

apache-airflow-providers-amazon

Exasol 到 Amazon Simple Storage Service (S3) 的傳輸

源產品文件

Exasol

目標產品文件

Amazon Simple Storage Service (S3)

Python API

airflow.providers.amazon.aws.transfers.exasol_to_s3

提供者

apache-airflow-providers-amazon

檔案傳輸協議 (FTP) 到 Amazon Simple Storage Service (S3) 的傳輸

源產品文件

檔案傳輸協議 (FTP)

目標產品文件

Amazon Simple Storage Service (S3)

運算子指南

FTP 到 Amazon S3

Python API

airflow.providers.amazon.aws.transfers.ftp_to_s3

提供者

apache-airflow-providers-amazon

Salesforce 到 Amazon Simple Storage Service (S3) 的傳輸

源產品文件

Salesforce

目標產品文件

Amazon Simple Storage Service (S3)

運算子指南

Salesforce 到 Amazon S3

Python API

airflow.providers.amazon.aws.transfers.salesforce_to_s3

提供者

apache-airflow-providers-amazon

本地到 Amazon Simple Storage Service (S3) 的傳輸

目標產品文件

Amazon Simple Storage Service (S3)

運算子指南

本地檔案系統到 Amazon S3

Python API

airflow.providers.amazon.aws.transfers.local_to_s3

提供者

apache-airflow-providers-amazon

通用 SQL 到 Amazon Simple Storage Service (S3) 的傳輸

源產品文件

通用 SQL

目標產品文件

Amazon Simple Storage Service (S3)

運算子指南

SQL 到 Amazon S3

Python API

airflow.providers.amazon.aws.transfers.sql_to_s3

提供者

apache-airflow-providers-amazon

Amazon Simple Storage Service (S3) 到通用 SQL 的傳輸

源產品文件

Amazon Simple Storage Service (S3)

目標產品文件

通用 SQL

運算子指南

Amazon S3 到 SQL

Python API

airflow.providers.amazon.aws.transfers.s3_to_sql

提供者

apache-airflow-providers-amazon

亞馬遜網路服務到亞馬遜網路服務的傳輸

源產品文件

亞馬遜網路服務

目標產品文件

亞馬遜網路服務

Python API

airflow.providers.amazon.aws.transfers.base

提供者

apache-airflow-providers-amazon

Microsoft Azure Blob Storage 到 Amazon Simple Storage Service (S3) 的傳輸

源產品文件

Microsoft Azure Blob Storage

目標產品文件

Amazon Simple Storage Service (S3)

運算子指南

Azure Blob Storage 到 Amazon S3 傳輸運算子

Python API

airflow.providers.amazon.aws.transfers.azure_blob_to_s3

提供者

apache-airflow-providers-amazon

Amazon Simple Storage Service (S3) 到 Amazon DynamoDB 的傳輸

源產品文件

Amazon Simple Storage Service (S3)

目標產品文件

Amazon DynamoDB

運算子指南

Amazon S3 到 DynamoDB

Python API

airflow.providers.amazon.aws.transfers.s3_to_dynamodb

提供者

apache-airflow-providers-amazon

Amazon Simple Storage Service (S3) 到 Apache Hive 的傳輸

源產品文件

Amazon Simple Storage Service (S3)

目標產品文件

Apache Hive

Python API

airflow.providers.apache.hive.transfers.s3_to_hive

提供者

apache-airflow-providers-apache-hive

Amazon Simple Storage Service (S3) 到 Google Cloud Storage (GCS) 的傳輸

源產品文件

Amazon Simple Storage Service (S3)

目標產品文件

Google Cloud Storage (GCS)

運算子指南

將資料從 Amazon S3 傳輸到 Google Cloud Storage

Python API

airflow.providers.google.cloud.transfers.s3_to_gcs

提供者

apache-airflow-providers-google

Amazon Simple Storage Service (S3) 到 Microsoft Azure Blob Storage 的傳輸

源產品文件

Amazon Simple Storage Service (S3)

目標產品文件

Microsoft Azure Blob Storage

運算子指南

Amazon S3 到 Azure Blob Storage 傳輸運算子

Python API

airflow.providers.microsoft.azure.transfers.s3_to_wasb

提供者

apache-airflow-providers-microsoft-azure

Amazon Simple Storage Service (S3) 到 MySQL 的傳輸

源產品文件

Amazon Simple Storage Service (S3)

目標產品文件

MySQL

Python API

airflow.providers.mysql.transfers.s3_to_mysql

提供者

apache-airflow-providers-mysql

Amazon Simple Storage Service (S3) 到 Snowflake 的傳輸

源產品文件

Amazon Simple Storage Service (S3)

目標產品文件

Snowflake

運算子指南

CopyFromExternalStageToSnowflakeOperator

Python API

airflow.providers.snowflake.transfers.copy_into_snowflake

提供者

apache-airflow-providers-snowflake

Amazon Simple Storage Service (S3) 到 Teradata 的傳輸

源產品文件

Amazon Simple Storage Service (S3)

目標產品文件

Teradata

運算子指南

S3ToTeradataOperator

Python API

airflow.providers.teradata.transfers.s3_to_teradata

提供者

apache-airflow-providers-teradata

此條目是否有幫助?