T
trulens-dataset-curation
Create and curate evaluation datasets with ground truth for TruLens
Installation
Pick a client and clone the repository into its skills directory.
Installation
About this skill
Create and curate evaluation datasets with ground truth for TruLens
How to use
- Zainstaluj wymagane biblioteki poleceniem pip install trulens pandas. 2. Zaimportuj TruSession z modułu trulens.core i zainicjuj sesję: session = TruSession(). 3. Przygotuj dane w formacie pandas DataFrame z kolumnami: query (wymagana — pytanie lub zapytanie), query_id (opcjonalna — unikalny identyfikator), expected_response (opcjonalna — oczekiwana odpowiedź) oraz expected_chunks (opcjonalna — oczekiwane fragmenty kontekstu pobrane z bazy). 4. Strukturyzuj dane tak, aby każdy wiersz reprezentował jedno pytanie testowe z odpowiadającymi mu danymi referencyjnymi. 5. Przekaż przygotowany DataFrame do TruLens w celu porównania rzeczywistych wyników aplikacji z wartościami referencyjnymi. 6. Wykorzystaj wyniki ewaluacji do śledzenia zmian wydajności między wersjami aplikacji i współpracy z zespołem nad poprawą jakości.