New issue

Have a question about this project? Sign up for a free GitHub account to open an issue and contact its maintainers and the community.

Sign up for GitHub

By clicking “Sign up for GitHub”, you agree to our terms of service and privacy statement. We’ll occasionally send you account related emails.

Already on GitHub? Sign in to your account

Jump to bottom

事前に与えた資料から評価用データセットを自動生成する仕組みを追加する。 #17

Open

Tracked by

matsusho070 opened this issue Dec 16, 2024 · 0 comments

Milestone

仕様書項目（2024/12-202...

Collaborator

matsusho070 commented Dec 16, 2024

RAGでデータソースとして利用する根拠資料群を入力とし、各資料に対して少なくとも以下のようなフィールドを持つデータのリストを作成する仕組みを構築する。

その資料を根拠として回答すべき問い合わせ文
資料内で、問い合わせ文の根拠となるテキストチャンク
想定される模範回答
参考：https://docs.ragas.io/en/v0.1.21/concepts/testset_generation.html

matsusho070 mentioned this issue

評価システムの構築 #14

Open

3 tasks

matsusho070 added this to the 仕様書項目（2024/12-2024/03） milestone

Sign up for free to join this conversation on GitHub. Already have an account? Sign in to comment