Gemini 比 ChatGPT、Claude 菜是有原因的
在聊天模式下发现一点:对于 GitHub 上的 Public 仓库,如果需要参考里面的代码,这三家会有完全不同的应对方案:
- **ChatGPT 5.5 (免费版)**:怎么都不会去访问 GitHub 仓库的内容。
- **ChatGPT 5.6 (付费版)**:给 GitHub 仓库的 URL 时,不会去访问 GitHub 仓库的内容。只有给的 URL 具体到了某个文件,才会去访问 GitHub 仓库的内容。
- **Claude 4.8 (免费版)**:只要给了 GitHub 仓库的 URL 就会主动去访问仓库的内容。
- **Gemini 3.1 Pro (付费版)**:怎么都不会去访问 GitHub 仓库的内容。
这不是严谨测试,但是能看出 LLM 对获取外部信息准确性的“需求程度”。LLM 刚出现那会儿就提出了 RAG 的概念。虽然现在已经是 Agent 的时代了,但是准确的外部信息依然是提高模型处理具体问题的一个关键要素。
---
原文链接:[点击查看](https://www.v2ex.com/t/1233061)
- **ChatGPT 5.5 (免费版)**:怎么都不会去访问 GitHub 仓库的内容。
- **ChatGPT 5.6 (付费版)**:给 GitHub 仓库的 URL 时,不会去访问 GitHub 仓库的内容。只有给的 URL 具体到了某个文件,才会去访问 GitHub 仓库的内容。
- **Claude 4.8 (免费版)**:只要给了 GitHub 仓库的 URL 就会主动去访问仓库的内容。
- **Gemini 3.1 Pro (付费版)**:怎么都不会去访问 GitHub 仓库的内容。
这不是严谨测试,但是能看出 LLM 对获取外部信息准确性的“需求程度”。LLM 刚出现那会儿就提出了 RAG 的概念。虽然现在已经是 Agent 的时代了,但是准确的外部信息依然是提高模型处理具体问题的一个关键要素。
---
原文链接:[点击查看](https://www.v2ex.com/t/1233061)
评论
暂无评论。