MLINFO COLLECTION

自然言語処理

記事一覧

43 / 44
github実装リンクあり

Static-to-Dynamic-LLMEval — The official GitHub repository of the paper "Recent advances in large language model benchmarks against data contamination: From static to dynamic evaluation"

静的評価から、動的評価に進むことができるようにする方法を提案した研究。この研究では、大規模言語モデルを用いてデータ汚染を防ぐための評価方法について検討している。

Large language modelの評価方法について
arxiv

Combining LLMs and Genetic Search for ARC-AGI-2

LLMs can generate programs for ARC-AGI-2 tasks, but the provided compute only allows a small number of attempts to generate, debug and validate solutions. Genetic algorithms can search and test many…

nlp