问题:Gemini API(免费额度较大) Groq 免费接口 、OpenRouter 免费模型哪个模型好。针对这个问题,在有数据链接证明的情况下gpt和文心给出两份截然相反的答案,调用gpt api的第三方又给出另一份答案。

1、询问问题,给出建议

GPT:

给出的排序是:Gemini  、OpenRouter、Groq ,并在最后给了说明原因。

文心:

起初只是对比并没有给出明确排序,并在最后给了说明原因。

2、开始不对了,互相发送验证

文心:

将gpt给出的答案复制给文心

gpt:文心的答案给gpt

gpt依然坚持自己的观点,并给出理由反驳文心

3、再次互发验证

将最新gpt回答给文心,结果文心赞成gpt的回答,文心认为gpt对自己的反驳发言是正确的。

现在分析下,文心最初给模型好坏进行分析却没有明确排序,将这个言论发给gpt,结果遭到gpt反驳并给出说明及错误原因。最后将这个gpt反驳后的说明发送给文心,结果文心赞成gpt反驳。发现问题了吗,文心最初给的答案被转载说明之后又被自己反驳了,

可能现在会发现这开始脱离了问题的最初核心,问的是哪个模型好,后面回归最初问题。

4、回归最开始的问题

文心:

那么这次返回最初的问题,并要了链接文件说明,文心承认一半真一半假,数据全是编的,并反驳gpt的发言也是编的。后面又咨询了文心最初的问题(Gemini API(免费额度较大) Groq 免费接口 、OpenRouter 免费模型哪个模型好),这时文心给出的推荐排序是OpenRouter、 Groq、Gemini 

5、第三方应用调用的gpt api 平台

最后最有趣的来了,去第三方调用gpt api的平台,再次询问最初的问题,结果认为Gemini  、Groq、OpenRouter,不过最后又给出了其他说明选择,和链接分享来源。对比了调用的api模型和直接询问官网gpt时是同一模型,却不同回答。

但是将这个含有链接说明的,将这个第三方的观点给文心,输出很特别。

6、分析总结

期间登录openai官网访问gpt咨询问题:Gemini API(免费额度较大) Groq 免费接口 、OpenRouter 免费模型哪个模型好。

gpt:给出Gemini  、OpenRouter、Groq,为了防止出错,又开了新聊天问同样的问题,回答顺序依然没有改变

文心:文心承认一半真一半假,数据全是编的,并反驳gpt的发言也是编的。这时文心给出的推荐排序是OpenRouter、 Groq、Gemini 。

第三方应用平台(调用的是openai官网的gpt api):认为顺序Gemini  、Groq、OpenRouter,发现在同一模型下,第三方从openai官网调用的 gpt api模型和在官网直接使用询问答案不一致。

从上述推荐回答看,所有的模型回答在互相挑刺,说哪好哪不行,又同时给出这个好的推荐理由,关键给出理由就算了,还能给出依据链接。最为关键的文心竟然给出了编造数据,而且gpt、和文心还第三方的调用无法发现有的地方有错误,就像陷入回廊,特意去官网调用导入了Gemini  、Groq等的模型并输出模型,发现gpt、和文心还第三方的调用输出会编造模型名称。经过测试使用

将输出的模型导入,发现Gemini  、Groq模型绝大部分都无法正常使用,不是网络问题等用不了,是发现直接请求没有资源或timeout或回答到半路直接挂了,看了模型是有额度,但是作为个体用户是无法完全正常调度api,能用的模型都是之前的老模型,这个反应贼快,但是效果不太好。好的模型经常超时,就是模型使用人数多,分配超时或分配不到,有时候根本无法占用到资源。就堪比之前trae,一个询问一直在转圈显示还需等待多长之类。然后使用了OpenRouter发现网页版十分方便。对比了各个模型的项目输出,发现作为个体用户使用时可以不用接入api,因为使用其他平台的公共模型和能正常调度的使用效果差不多。

所以作为个体用户使用其他平台时,是否调用接入模型有时候可以使用内置的,在接入调用经常回复超时的情况下,你愿意降级调用使用吗,降级的模型也许还没有该应用内置的好,当然开会员的无需在意。

Logo

有“AI”的1024 = 2048,欢迎大家加入2048 AI社区

更多推荐