79f59be6d62e021ff30cd4b140505f34463996d9
v1.2.0 对比车+运行速度对比图+图表可配置:移除前台后台管理链接(网址直达登录);新增🛒对比车(排行榜行加入,浮动条隐藏默认,对比页按加入顺序对比,无车默认前5,默认只对比预填充+解码);首页解码速度对比图改运行速度对比(预填充左轴空心柱+解码右轴实心柱+首字虚线);对比图支持柱状(空心/实心)/折线(实线/虚线)+左右双轴+三色深度+X轴旋转/间隔/字号防拥挤
v1.2.0 对比车+运行速度对比图+图表可配置:移除前台后台管理链接(网址直达登录);新增🛒对比车(排行榜行加入,浮动条隐藏默认,对比页按加入顺序对比,无车默认前5,默认只对比预填充+解码);首页解码速度对比图改运行速度对比(预填充左轴空心柱+解码右轴实心柱+首字虚线);对比图支持柱状(空心/实心)/折线(实线/虚线)+左右双轴+三色深度+X轴旋转/间隔/字号防拥挤
⚡ 模型评测网站(model-eval-site)
聚合展示各种大模型的运行速度评测(解码 / 预填充 / 首字延迟)+ 模型能力测试模块,并支持从 llm-speed-tester 一键把测试结果发送到对应账号下展示。
- 端口:16066
- 技术栈:Flask + SQLite + data-chart-tool(16016) 图表
页面
| 页面 | 说明 |
|---|---|
/(index.html) |
🏆 模型速度排行:按模型+提供商聚合,表头可排序 + 硬件显示 + 🛒加入对比车 + 运行速度对比图(预填充/解码/首字,可勾选指定模型) |
/capabilities.html |
🧪 模型能力测试模块:按分类展示测试卡片,点击展开测试项(内容由后台管理编辑) |
/compare.html |
⚖️ 模型对比(对比车驱动):默认对比前5个,有对比车则按加入顺序;默认只对比预填充+解码;对比项可去留;图表可配置柱状(空心/实心)/折线(实线/虚线)+左右双轴+三色深度+X轴旋转防拥挤 |
/model.html |
单模型详情:按上下文长度的速度折线图 + 各账号提交明细(含硬件) |
/admin.html |
🔐 后台管理(admin/admin123,网址直达登录,前台无入口):提交管理 / 账号管理 / 能力测试管理 |
后台管理(/admin.html)
默认账号 admin / 密码 admin123(config.py 可改)。登录后可:
- 📥 提交管理:分页/搜索(模型/账号/硬件)/查看详情/删除/点击硬件标签直接修改硬件/🎲生成演示数据
- 👥 账号管理:新增/编辑/删除账号(删除连带其提交)
- 🧪 能力测试管理:新增/编辑/删除能力测试模块(名称/分类/图标/说明/测试项JSON/排序/启停),前台只读展示
与 llm-speed-tester 联动
- 在 llm-speed-tester 左侧「📤 评测站同步」填评测站地址(默认
http://127.0.0.1:16066)+ 账号名 + 硬件/GPU(可🔍自动探测) - 测试完成后,历史行「📤 发送」或详情弹窗「📤 发送到评测站」一键提交(含硬件信息)
- 结果以 POST /api/submit 提交,账号不存在自动创建,排行榜/对比实时更新
API
| 方法 | 路径 | 说明 |
|---|---|---|
| POST | /api/submit |
接收 llm-speed-tester 提交(头 X-Token: meval16066,含 hardware) |
| POST | /api/admin/login |
后台登录(session) |
| GET | /api/admin/session |
检查后台登录态 |
| POST | /api/admin/logout |
退出后台 |
| GET | /api/health / /api/stats |
健康检查 + 统计(含能力测试数) |
| GET | /api/leaderboard |
模型速度排行(可 sort/order/limit/models 指定对比) |
| GET | /api/compare |
模型对比(models/chart_metric/chart_type) |
| GET | /api/model |
单模型详情(provider+model) |
| GET | /api/submissions |
提交列表(只读) |
| GET | /api/submissions/<id> |
单条提交详情 |
| DELETE | /api/submissions/<id> |
删除提交(后台) |
| PUT | /api/submissions/<id>/hardware |
修改提交硬件(后台) |
| GET | /api/submissions/<id>/chart |
单条提交:长度→速度折线图 PNG |
| GET/POST/PUT/DELETE | /api/accounts... |
账号管理(后台) |
| GET | /api/capabilities |
能力测试列表(前台只读,仅启用项) |
| GET/POST/PUT/DELETE | /api/admin/capabilities... |
能力测试管理(后台) |
| POST | /api/seed-demo |
🎲 生成演示评测数据(后台) |
| POST | /api/seed-capabilities |
🎲 生成演示能力测试(后台) |
| POST | /api/chart |
图表代理(data-chart-tool 16016) |
数据
data/model_eval.db:SQLite(accounts / submissions / capabilities)- 详细字段见
database.py
部署
./start.sh # 启动(默认 16066,PID 文件管理)
./start.sh stop # 停止
# 依赖: openclaw conda 环境 flask/requests;图表走 data-chart-tool(16016)
# Git: hz4th_coder/model-eval-site
Languages
JavaScript
40.8%
Python
36.4%
HTML
13.5%
CSS
8.7%
Shell
0.6%