DuckDB w Airflow: jak zbudować pipeline analityczny na AWS
Artykuł pokazuje praktyczne podejście do orkiestracji analitycznych pipelinów z DuckDB za pomocą Amazon MWAA. Dowiesz się, jak czytać dane Parquet z S3, przetwarzać je w Airflow i publikować wyniki jako tabele Apache Iceberg, z uwzględnieniem retry'ów i optymalizacji workerów.
źródło: [aws/big-data-blog]