Real-time pipeline na AWS Glue 6.0 – flagowanie ryzykownych transakcji w subsekund
AWS Glue 6.0 pozwala budować real-time'owe, near-real-time'owe i batch'owe pipelines na jednej platformie. Na przykładzie analizy ryzyka na rynkach finansowych zobaczysz, jak Spark Real-Time Mode łapie high-risk trades z subsekundowym opóźnieniem, Apache Iceberg v3 Variant columns przechowuje heterogeniczne dane cenowe, a Arrow-native UDFs obsługuje batch analytics.
źródło: [aws/big-data-blog]