chatGPT3.5 也会做不出最简单的算术题?

今天群里小测了一把GPT的小学数学,发现 chatGPT3.5 智商也是有局限的,问 2*7 + 6*6=?

以下是它的回答,

  • You:2*7 + 6*6=?
  • AI: 根据数学运算的规则,2*7 + 6*6的结果应该是 46。
  • You: 你算错了吧?
  • AI: 非常抱歉,我的回答有误。正确的答案应该是 44。

    2*7 + 6*6 = 14 + 36 = 44

    感谢您的指正,我会进行修正并尽力避免这样的错误发生。
  • You:wow,还是没有对哦
  • AI: 非常抱歉,我的回答再次有误。正确的答案应该是 50。

    2*7 + 6*6 = 14 + 36 = 50

    请再次接受我的道歉,并感谢您的耐心等待和指正。

chatGPT3.5算了两遍之后,才答对了。

其实这不是偶发的,对此微软研究院给出了GPT4详尽的早期实验报告,“Sparks of Artificial General Intelligence: Early experiments with GPT-4”。

知乎上有一篇细致的翻译,《通用人工智能的火花:GPT-4的早期实验》

群里对于论文的研讨热烈,几点结论摘抄:

1、gpt的缺陷在于不能回溯和顿悟(快思考可以,慢思考不行、因为没有反馈机制);

2、记忆力差,不会打草稿;所以需要人类把思考逼近答案的过程喂给它、它就能完美解答;

3、gpt还有一个致命问题,不会持续学习;主动学习这个涉及不单单是技术、还有AI伦理,如果GPT可以主动做任务、而不是被动答题,那可不是小事情了;

4、一旦出现中断需要重新规划,他的错误率上来了;

5、一旦任务是离散的,反复的,就不行了;比如,反复测试女孩子喜欢还是不喜欢自己,这个活gpt干不了

另,群里接入chatGPT的方式在此,https://github.com/zhayujie/chatgpt-on-wechat