Jak wybrać model OpenAI na Amazon Bedrock? Liczy się efekt, nie tylko cena tokena

Artykuł pokazuje, że porównywanie modeli tylko po cenie za milion tokenów to mało – w praktyce liczy się, ile zapłacisz za faktycznie poprawne odpowiedzi. Autorzy udostępniają open-source'owy benchmark, który mierzy koszt per prawidłowa odpowiedź, trajektorię agenta i jakość deliverables'ów dla modeli OpenAI dostępnych na Amazon Bedrock.