
chainreason
joshawome
A benchmark for evaluating LLM reasoning on Ethereum and DeFi tasks
AI 简介
ChainReason 是一个用于评估语言模型在以太坊和DeFi任务上推理能力的基准测试工具。它提供了五个核心功能,包括协议问答、漏洞检测、合约分类、交易意图推断以及滑点预测,旨在全面考察模型在符号推理、代码理解、结构模式识别和数值推理等方面的能力。该项目采用Python编写,适合于需要对智能合约或DeFi分析相关任务进行自动化处理的场景下使用,帮助开发者快速评估不同模型的实际表现。通过ChainReason,用户可以获得比现有专注于代码生成或漏洞检测的基准更全面的模型性能视图。
Python
MIT License499
Stars
343
Forks
8
Watchers
0
Issues
Star 增长
今日0
近 7 天0
近 30 天+90
综合评分56.61
默认分支main