AI Engineer: Monitoring i ewaluacja systemów AI
Ten moduł jest częścią kursu: AI Engineer
Systemu AI nie da się utrzymać „na czuja”. Ten moduł uczy śledzić wykonanie grafów agentów krok po kroku oraz mierzyć jakość odpowiedzi, abyś wiedział, czy kolejna zmiana poprawia system, czy go psuje.
Czego się nauczysz
- Śledzenia przebiegu zapytań i kroków agentów
- Diagnozowania błędów i kosztów w działającym systemie
- Tworzenia zbiorów testowych do oceny odpowiedzi
- Automatycznej ewaluacji jakości odpowiedzi
- Wykorzystania wyników ewaluacji do usprawniania systemu
Co obejmuje moduł
- Materiał w formie PDF z wyjaśnieniem zagadnień i przykładami kodu
- Zadanie do samodzielnego wykonania w repozytorium GitHub, sprawdzane w code review
- Kolejny etap projektu przewodniego, który można wykorzystać w portfolio
- Omówienie dobrych praktyk i najczęściej popełnianych błędów w code review
Dla kogo jest ten moduł
Dla osób, które chcą dowodzić jakości swoich rozwiązań AI liczbami, szukają projektu do portfolio na odpowiednim poziomie trudności i wolą mieć wiedzę uporządkowaną w jednym miejscu, z możliwością konsultacji podczas code review.
