GPT API 真假鉴别的一个思路

XiaoLin

最近在研究GPT的api，我的想法是：给一些随机的测试输入，直接设置logprobs=True， top_logprobs=20， 查看第一个输出token前20的概率与官方的是否一致（或者检查共同输出的前缀所对应的概率）。有官方API作为真值，这应该错不了。

看到有大佬已经做了一些工作（https://linux.do/t/topic/199694），没有那个论坛的账号，只能在这里发一下了。主要是验证思路大概有：
1. 设置较低温度参数，正版api应多次回复结果相似。
2. 使用GPT特色的函数调用接口。
3. 看返回的模型名称和系统指纹（应该api里的system_fingerprint和model）参数。

我觉得这多少都有一些问题：
1. 评价“结果相似”过于主观。商家可能可以针对性优化？
2. 这个函数调用接口，不知道能不能通过分流之类的造假，也不能避免以次充好。
3. 这个模型的名称能不能商家自己修改？我感觉不够稳健。

acm

打酱油的 发表于 2024-9-13 15:26

能不能直接给结论，gptapi.us是真还是假
假的一批还贵,不建议用

打酱油的

能不能直接给结论，gptapi.us是真还是假

XiaoLin

打酱油的 发表于 2024-9-13 15:26

能不能直接给结论，gptapi.us是真还是假
我手头没有官方的API呢，也没时间实现代码，给大佬们提供个思路吧。已经提issue了。

off

打酱油的 发表于 2024-9-13 15:26

能不能直接给结论，gptapi.us是真还是假
这家感觉很假

你号没了

还是用poe吧。mini4 100条够用了 一天

xhcj666

"

谁家假的可以识图？

acm

xhcj666 发表于 2024-9-13 16:23

谁家假的可以识图？
你不知道逆向的也能传图吧,这家官转的都是8-9折,稳定性还差,也不知道谁会用

xhcj666

"

他家一元一刀4o 就能识图

mujj

折腾了一通，发现还是花钱省心。尤其是4o=mini出来之后。

目前用的一个平台，据说是正规付费azure账号。真不真的不知道，但是很稳。

价格=官方费率的1.5倍。