IT/Google Cloud
-
GCP Composer - BigQuery DataTransfer OperatorIT/Google Cloud 2024. 3. 1. 21:23
BigQuery의 Data Transfer 작업을 위한 Airflow Operator들에 대한 문서는 현재 bigquery_dts 문서에 있는데, 설명이 친절하지 못하여 여기에 dag 파일 예시를 소개한다. from airflow.providers.google.cloud.operators.bigquery_dts import BigQueryDataTransferServiceStartTransferRunsOperator from airflow.providers.google.cloud.sensors.bigquery_dts import BigQueryDataTransferServiceTransferRunSensor from airflow.models.xcom_arg import XComArg . . . # da..