跳到正文

#评测/基准

今日 0 条
10月7日周三
  1. Simon Willison40

    Mistral Large 4 生成 SVG 实测

    Simon Willison 用 llm 命令行分别调用 claude-opus-5.5、gpt-6.1-sol、gemini-3.8-flash 和 mistral/mistral-large-4,让它们各自生成一张"穿渔网袜在火星上乱穿马路的犰狳"SVG 图片。这一测试源于 wren6991 对基准测试已饱和的调侃。

10月2日周五
9月30日周三
9月29日周二
8月28日周五
7月27日周一
12月17日周三
8月7日周四
7月10日周四
11月20日周三
10月4日周五
  1. Hugging Face Blog34

    Hugging Face 推出 Open FinLLM Leaderboard,专注金融大模型评测

    Hugging Face 发布 Open FinLLM Leaderboard,一个面向金融领域的专用大模型评测榜单,覆盖信息抽取、文本分析、问答、文本生成、风险管理、预测和决策七大类任务,采用零样本评估且无需微调。评测指标包括 Accuracy、F1 Score、ROUGE Score 和 MCC,任务数据集来自 FinQA、TATQA、ECTSum、EDTSum 等真实金融场景。