社区讨论LinuxDo 最新
做了个 AI 降智观察站:鹈鹕测试榜
公益推广说明 (click for more details) 以下为项目介绍正文内容,AI生成、润色内容已使用截图方式发出; 最近总看到有人说某某模型「降智」了,但又说不清到底变了没有。我就想了个笨办法:每天给它们同一句提示词,让它们画同一张图,画完都存下来,过一段时间回头翻一翻,变没变一眼就能看出来。 提示词就这一句: Generate an SVG of a pelican riding a bicycle 这个题目是 Simon Willison 想出来的,我把它做成每天跑测试用例,记录数据。 现在收录的…
内容摘要
作者:#sonnemusk
板块:#开发调优
公益推广说明 (click for more details)
以下为项目介绍正文内容,AI生成、润色内容已使用截图方式发出;
最近总看到有人说某某模型「降智」了,但又说不清到底变了没有。我就想了个笨办法:每天给它们同一句提示词,让它们画同一张图,画完都存下来,过一段时间回头翻一翻,变没变一眼就能看出来。
提示词就这一句:
Generate an SVG of a pelican riding a bicycle
这个题目是 Simon Willison 想出来的,我把它做成每天跑测试用例,记录数据。
现在收录的模型有 GPT、Grok、Claude、Gemini、Kimi、GLM、Composer 等系列模型,支持的模型会分别跑低、中、高几档推理强度。GPT 和 Grok 系列模型每天都会更新,其他模型每周日跑一次。
网站上能看到:
每个模型每天画的图,可以按日期翻
同一个模型不同档位的对比,以及两个模型并排对比
AI 给每张图打的参考分,可以按分数排着看
几点说明:
这不是能力排名,只是一份画图档案,用来看同一个模型前后有没有变化
分数是 AI 评委打的,仅供参考,欢迎直接看图自己判断
有的鹈鹕骑得有模有样,有的车连链条都没有,还挺好玩的。
站点地址:https://tihu.app/
网站样图:
大家觉得还有哪些模型值得加进来,或者有什么想看的对比,欢迎留言。
资讯来源
LinuxDo