nlpgithub

Static-to-Dynamic-LLMEval — The official GitHub repository of the paper "Recent advances in large language model benchmarks against data contamination: From static to dynamic evaluation"

静的評価から、動的評価に進むことができるようにする方法を提案した研究。この研究では、大規模言語モデルを用いてデータ汚染を防ぐための評価方法について検討している。

用途
Large language modelの評価方法について
難易度の目安
Easy
実装コストの目安
High

概要

The official GitHub repository of the paper "Recent advances in large language model benchmarks against data contamination: From static to dynamic evaluation"

参考リンク

リンク先のライセンス・再現性・データ条件をご確認ください。自動分類や実装の目安は保証ではありません。

実装を始めるプロンプト

参考リンクを確認したうえで、次の内容をコピーして利用できます。

# 論文・記事
Static-to-Dynamic-LLMEval — The official GitHub repository of the paper "Recent advances in large language model benchmarks against data contamination: From static to dynamic evaluation"

# 概要
静的評価から、動的評価に進むことができるようにする方法を提案した研究。この研究では、大規模言語モデルを用いてデータ汚染を防ぐための評価方法について検討している。

# 原典
https://github.com/SeekingDream/Static-to-Dynamic-LLMEval

上記の手法を実装してください。実行前に依存関係とライセンスを確認してください。

関連する記事