关于本次 TRAE 复赛评审,我想请官方解释几个问题

本来想着比赛结果已经出来,自己没晋级就算了。

但今天看到群里有不少参赛者也在反馈评审过程相关的问题,我还是忍不住想把自己这边能够查到的一些情况客观整理出来。

我并不是想因为没有晋级就质疑比赛结果,更不是要求官方必须改变结果。

我主要想确认一件事:

我们提交到复赛的作品,是否真的按照赛前所说的方式,得到了足够完整的体验和评审?

因为从我目前能够看到的实际使用记录来看,有几个地方让我比较困惑。

1、复赛之前说一个作品会安排多位评委进行评审,但我的项目目前只能确认有 1 位评委实际激活试用

复赛阶段我看到的说明是,一个作品会安排多位评委进行评审,我印象中是 5 位评委,并且会认真体验作品后再进行综合评价。

但从我项目后台能够看到的实际测试情况来看:

目前我只能确认有 1 位评委老师真正激活并使用过测试账号。

所以我比较想知道:

其他评委是否通过其他方式完成了评审?

例如只观看帖子、视频或其他材料,也会算作一次正式评审吗?

如果一个作品理论上有多位评委,那么实际产品体验部分的最低要求是什么?

这一点如果官方可以解释一下,我觉得不仅是我,很多参赛者应该都会比较关心。

2、项目中一个比较重要的“创作者分享”功能,看起来并没有被实际体验

我的项目有一个我认为比较重要的能力:

创作者可以把自己长期收藏整理的网址、收藏库,生成一个公开分享网页,再分享给其他人。

它不是单纯的“导出收藏”,而是把已经整理好的知识收藏转成一个可以直接浏览和传播的页面。

正常是点击图1的青色按钮以后,生成图2的页面:

如果生成了分享页是下面这样的:

但我后来检查了专门提供给评委老师的测试账号。

这个测试账号的分享页面目前实际是这样的:

也就是说,至少从我目前能够观察到的账号状态判断,这个评委测试账号并没有真正生成过分享页。

如果评委实际完整测试了这个功能,正常情况下应该会产生相应的分享页面。

所以这也让我产生了疑问:

复赛评审到底会要求评委实际体验作品中的主要功能,还是主要依据参赛帖子和演示材料评分?

如果是后者,我觉得也可以,但可能需要在比赛规则里提前告诉参赛者。

因为很多参赛者为了复赛,会专门投入大量时间准备:

测试账号、测试数据、服务器、API Key、真实产品环境等。

大家默认这些准备是为了让评委真正进入产品体验,而不是最终基本没有被使用。

3、AI 功能的调用记录也让我很难确认是否进行了实际体验

目前我的项目里包含多项 AI 功能,例如:

项目采用的是 API Provider / API Key 方式。

为了方便评委测试,我提前提供了可以直接使用的 API 账号。

而且系统有一个比较容易核验的特点:

只要在项目里填入 API 账号,系统就会自动进行一次测速。

例如这里:

所以 API 后台的调用记录,大致可以帮助我判断:

是仅仅填写了 API Key,还是后续真正使用了 AI 功能。

8 月 8 日

在提交之前,我自己先测试了提供给评委的 API 账号。

当时我:

  • 测试了 API;
  • 实际体验了 2 个 AI 功能;
  • 并没有把全部 AI 功能都测一遍。

所以当天产生了一部分 API 用量。

8 月 9 日提交前

提交前我又最后进行了一次检查:

  • 填入 API 账号后触发了一次自动测速;
  • 又点击了一个 AI 功能进行了一次测试。

因此,这部分调用也是我本人产生的。

对应的 API 使用记录如下:

8 月 12 日

到 8 月 12 日的时候,我因为一直没有观察到评委测试记录,所以曾经在群里询问过一次:

我的项目是不是还没有评委开始测试?

比较巧的是,在我反馈之后不久,终于出现了一位评委老师激活测试账号的记录。

之后也确实有人填入了我提供的 API 账号。

但是从 API 调用记录来看:

只产生了一次填写 API 后系统自动触发的测速调用。

之后没有看到继续调用 AI 功能所应产生的明显 API 使用记录。

也就是说,至少从我能够核验到的记录看,这次行为更接近于:

填入 API Key
→ 系统自动测速一次
→ 没有继续实际调用 AI 功能

而不是对项目中的多项 AI 能力进行了实际体验。

当然,我无法看到评委的完整评审过程,所以我也不会直接断言“评委完全没有看作品”。

但综合:

  • 测试账号激活情况;
  • 分享页面实际生成状态;
  • API 调用记录;
  • 我能够观察到的产品使用痕迹;

我确实很难确认这个项目是否获得了此前所描述的那种比较充分的产品体验和多人评审。


我真正希望官方回应的其实是几个很简单的问题

我觉得比赛结果本身是一回事,评审过程是否清晰是另一回事。

我更希望官方能够帮参赛者说明:

  1. 复赛所谓“多位评委评审”,是每一位评委都需要实际体验产品,还是其中部分评委只看帖子、视频和其他材料即可完成评审?
  2. 如果作品已经提供完整测试账号,赛方是否对评委有最低实际体验要求,例如最低体验时长、核心功能检查清单,或者至少完成若干关键功能的实际测试?
  3. 如果某项核心功能实际上已经完整实现,但评委没有实际点击或体验,这项功能最终是按“未实现”评分、根据演示材料评分,还是不参与这一部分评价?
  4. 如果实际上只有 1 位评委进入产品进行真实体验,这种情况是否符合复赛原本设定的多人评审流程?如果符合,那么多人评审机制具体体现在哪里?
  5. 如果只有 1 位评委实际体验产品,赛方如何避免这位评委个人的兴趣、产品偏好、专业背景或对某类产品不熟悉,对最终结果产生过大的影响?是否存在第二位评委交叉评审或补充复核机制?
  6. 不同评委之间是否有统一的评分维度和评分尺度校准?例如 A 评委习惯打 90 分,B 评委习惯打 60 分,如果不同作品由不同评委评分,最终排名如何保证横向可比和公平?
  7. 赛方是否会保留每个作品的评委评分记录、评语、评审时间或其他基础评审轨迹,以便在出现明显争议时进行内部复核?
  8. 如果参赛者能够提供测试账号记录、API 调用记录、后台状态等相对客观的证据,表明核心功能并没有被实际体验,赛方是否有正式的申诉或内部复核渠道?

我并不是要求官方因为这些问题重新判我晋级。

比赛一定会有主观判断,而且每个评委对产品价值的理解也可能完全不同,这些我都能接受。

如果评委完整体验之后,认为我的项目做得不够好、不值得进决赛,我完全接受这个结果。

我真正介意的是:

如果参赛者花了大量时间准备完整产品、测试账号、服务器、API、测试数据和演示环境,但最后作品实际上没有得到足够的体验,那么这种情况下,最终分数到底有多大程度能够代表作品本身?

既然这次比赛有非常多认真投入的开发者,我还是希望官方能够对评审流程给一个更明确的解释。

这样即使最后结果不会改变,至少大家能够知道:

自己的作品究竟是“被认真体验之后没有晋级”,还是“在没有充分体验的情况下就完成了评审”。

这两种情况,对参赛者来说感受还是非常不一样的。

7 个赞

希望还是把流程等东西公布出来,透明化些吧!这样子对其他参赛选手也公平,决赛20名里有我认为劣质的内容

6 个赞

这次比赛,难道没有邀请公证员介入?这样的话,主办方需要负起自证的责任。

一个公开的比赛,所有的规则,相当于主办方与参与方的合同约定,具有法定效力。

3 个赞

我是来和稀泥的,不代表官方态度。后面内容纯当我只是顶下帖子。

作品本身通过不了,没法路演或对Trae起到宣传,

这个作品由于存在认知成本、UI过于基基础等情况,

还有明显暴露付费墙,以及名称与其它软件撞车等情况,

字节不可能在比赛展示如何填API_KEY,或者请订阅pro解锁完整权益之类内容。

我觉得从两方面看,

程序正义挺重要的,在表示字节对基本盘的开发者的态度

但是如果我是评委,发现这个作品需要判断是否是付费功能,要求我填api_key,还要从其它账号来确认分享成功,我也可能直接丢了不看

5 个赞

我看你就是来和稀泥的,能用自己的API这是功能亮点,AI功能可以自费成本更低,如果你的项目有AI功能,用户量上来了,还完全免费 你项目能支撑下去?你是大善人,给大家免费买token用

3 个赞

还是个人观点,

你这个产品类型因为使用者必须向其中存入自身习惯,是非常适合免费发布、数据强制云端,拉用户粘性之后对关键功能收费的类型啊

但是订阅制暴露太早,

例如这个产品进决赛了,那么观众会看到其包含了会员订阅的功能,或者展示时已是全权账号但之后比赛后观众实际下载的软件货不对板,这里是明显劣势

我对这事肯定是看热闹态度

比赛也是薅了报名奖就算了。

不过咱俩多聊聊也就表示这帖子一直在被顶起来你说是不是

2 个赞

有些事我觉得它不是内容一定不行

形式会对事情结果产生不少影响

比方说你这个帖子写的非常认真,但是发布时间是周六半夜,

这就表示这个帖子明天会被刷没

以我近期观察半夜会有几个版主在,

但是官方不周六或半夜不值班的,除非发生重要节点

2 个赞

一看你这个回复你就仔细看也没体验就开喷我了,我项目95%的功能都是免费的,大部分常用功能都是免费的。

2 个赞

我看热闹的我喷啥啊 -_-b

点出问题这事有攻击性那是必然的,但是没有乱喷的意思,比如:

“我是真看了帖子才能做出上面回复”,也就是比4个缺席的评委看的更多,你说是不。

继续体验的话会遇到评委相同的问题

从目前截图,我需要一只僚机才能验证分享的功能,

收藏功能需要比浏览器默认的收藏功能产生优势,

要么再介绍下这个产品或者给个链接?

2 个赞

欢迎体验,可以免费送你激活码,虽然大部分功能都是免费的 :laughing:

【灵犀书签中国区官网】

3 个赞

花了2个小时体验了这个软件,写了两千多字的评论,最后成功忍住没发

这个软件本身还差很多,它现在核心不够强只是一个普通RAG,
且存在网络安全、安装、业务和显示bug、付费墙等多重问题,

需要慢慢加工

3 个赞

作为产品是没法用的程度
客观一点
作为练手作品的“完整性”是可以充分肯定的

2 个赞

谢谢你愿意花两个小时体验,也欢迎你批评产品本身。产品肯定还有很多需要完善的地方,这一点我从来没有否认。

不过你这段评价里有几个地方,我觉得最好具体一点,否则像“网络安全、安装、业务问题、没法用”这种结论比较重,但我不知道具体指的是什么。

1、关于你说的“网络安全问题”

我的浏览器插件已经正式通过 Chrome Web Store 和 Edge Add-ons 上架,用户可以直接从官方浏览器商店安装,chrome的审核是出了名的严格的。

当然,我不会说“通过商店审核就绝对不存在任何安全问题”,任何软件都不应该这么承诺。

但如果你认为我的产品存在具体的网络安全问题,希望你能直接指出:

是哪个请求、哪个接口、哪项权限、哪种数据传输,或者哪一个可以复现的安全风险?

如果确实有,我非常愿意修。

但如果只是笼统说一句“存在网络安全问题”,我确实没办法判断你具体发现了什么。

2、关于“安装问题”

这一点我也比较疑惑。

插件目前支持 Chrome 商店直接安装、Edge 商店直接安装,Edge 在国内也可以直接访问;此外还提供离线安装包。

所以如果你确实遇到了安装失败,希望你告诉我:

用的是什么浏览器、什么版本、从哪个入口安装、具体在哪一步失败、报了什么错误。

我很愿意解决具体问题,但“安装有问题”和“某个具体环境下安装遇到什么问题”是两件不同的事。

3、关于“业务问题”

这个范围实在太大了,我目前不知道你具体指什么。

是功能流程不通、账号体系、同步逻辑、支付设计、创作者功能,还是别的业务逻辑?

如果能给一个具体例子,我才能知道应该回应哪一部分。

4、关于显示 Bug

这一点如果你发现了,我完全接受,就算是苹果我估计也不敢说自己的产品完全没有BUG吧。

我的部分新功能官网本身就明确标注了 Beta,目前产品也还没有正式大规模推广,现阶段用户主要来自自然流量和朋友试用,本来就在持续迭代和修复问题。

Beta 并不是“有 Bug 就不用修”的借口,但同样也不能因为存在几个 UI Bug,就直接推导成整个产品“没法用”。

如果你把具体页面、操作步骤或者截图发出来,我会认真修复。

5、关于付费墙

这一点我们可能是产品理念不同。

我从一开始做这个项目就不是把它当成一个纯练习项目,也不是以“永久免费”为目标。我希望它最终能够成为一个真正有人使用、能够持续维护、也能够产生收入的产品。

所以我在开发早期就同时考虑免费功能、Pro 功能、订阅、创作者商业化,这在我看来并不是缺点。

免费发布、积累用户以后再考虑商业化,是一种路线;从产品早期就验证商业模式,也是另一种路线。

可以讨论我的收费时机、价格或者功能划分是否合理,但“项目考虑赚钱”本身,我不认为有什么需要回避的。

6、你说“核心不够强,只是普通 RAG”,这个判断我也不太认同。

你完全可以认为某一项 AI 能力不够强,但这个项目本身并不是一个只做 RAG 的。

它包括浏览器收藏管理、空间/收藏库/分组体系、AI 整理与搜索、知识地图、星图、知识回顾、时间轴、公开分享、Desktop、本地知识索引、MCP、外部 AI 客户端连接、本地优先的数据体系等。

你可以认为这些功能目前做得还不够好,这属于产品评价;但直接把整个产品归结成“普通 RAG”,和我实际做的产品范围并不完全一致。

7、最重要的一点是,其实这些都不是我原帖想讨论的问题。

我的帖子从头到尾都没有表达:

“我的项目特别优秀,所以我必须进决赛。”

我也没有说产品没有 Bug,更没有要求官方因为我功能多就必须给我晋级。

我提出的问题一直只有一个:

官方所说的多人评审、认真体验,实际有没有发生?

如果 5 位评委认真体验了我的作品,最后一致认为产品不够好、Bug 太多、商业化太早、核心价值不够强,所以不给我晋级——这个结果我完全可以接受。

但如果实际上只有一位评委进入过测试账号,而且公开分享功能没有生成过、提供给评委测试的 AI API 也只有一次填写后自动测速,没有后续 AI 功能调用记录,那么我提出“作品是否被充分体验过”的疑问,我认为是合理的。

产品有没有缺点,和评审有没有按照既定流程充分进行,是两个不同的问题。

一个产品有缺点,并不能因此证明评审流程一定充分;

同样,一个产品没有晋级,也不能反过来证明它一定被完整体验过。

8、你说你体验了两个小时,这一点我反而很感谢。

因为至少你愿意真正下载安装、操作产品,然后再给出你的评价。

哪怕最后你的结论是“这个东西很差”,我都觉得这比没有实际体验就给出评价更有价值。

这恰恰也是我原帖想讨论的问题:

我希望自己的作品是“被认真体验以后认为不够好”,而不是“没有充分体验就完成了评分”。

至于你说我现在发帖是因为比赛结果,我也没必要否认——如果晋级了,我大概率确实不会专门去查这些记录。

但“因为结果出来以后才去核查”并不能说明核查出来的问题就不存在。

如果我的账号记录、分享页状态、API 调用记录哪里判断错了,也欢迎官方或者评委直接拿出对应记录说明。

我真正希望得到的不是“必须让我进决赛”,而是一个很简单的答案:

这个作品到底有几位评委实际评审了?评审到了什么程度?是否符合赛方此前公布的评审机制?

如果这些都符合,那我接受结果,也没有什么好争论的。

4 个赞

做好产品吧,打铁还需自身硬 :saluting_face:虽然我也被……

2 个赞

个人认为自己没晋级就是技不如人,继续打磨吧,没啥好问的

1 个赞

我和你一样,我看了后台就一个人进小程序随便点了几页,
从头到尾就不到2分钟。
然后就被PASS了,跟本没有认真的体验。
如果真的输了也服气了,我们参赛者认认真真的备赛,搞作品,然后就这么被对待,
真的难也接受,可能官方也有自己题材和作品展现形式的考量。

2 个赞

是的,一样,感觉都跑题了

3 个赞

不过是一场寻常比试,几句寻常胜负,输了原也寻常。

人生在世,起落输赢本是常态,即便孩童嬉戏,也有得失之分。偏偏有人,赢时便意气风发,自诩天赋过人、技高一筹,处处张扬炫耀;一旦落了下风,即刻换了一副面孔。不怪自己技艺疏浅、心态浮躁,反倒怨对手刁钻、规则不公,甚至揪着细枝末节百般挑刺,横竖不肯认自己输了分毫。

旁人静静看着,不曾多言,他却先急了,横竖要辩解几句,摆尽委屈模样,仿佛满世界都亏欠了他。

我见状只好默然,心里暗暗想着:我还以为你发明了原子弹。

3 个赞

可能选题也有关系。
选题(创意)
技术
产品力
会综合决定你的产品评委愿意花多少时间去评测。
但并不一定说你的产品不好,只是从随机概率上,你的产品被分到的评委中,可能你的产品没有打动到这波人。

1 个赞

比如说页面有设计感一些,足够精致一些,也比较容易让评委愿意进一步查看。
在功能比较复杂的时候,产品的设计上怎么有效体现你的核心功能,让评委愿意体验等。

1 个赞