主题：辛顿，李飞飞，和AI之问 -- qq97
家园 【讨论】以语言为对象的数据统计游戏 GPT-4 的规模是 GPT-3 的 10 倍以上，是目前人类工程巅峰项目。据估计分析报道 ，它有约 1.8 万亿个参数，这些参数分布在 120 个 transformer 层上，作为对比，GPT-3 的参数为大约 1750 亿个。（GPT-3 仅有 12 个 transformer 层，层数是 GPT-4 的 1/10。）
然而这种所谓artificial intelligence,只是表象上的对人智能的模仿，我判断断基于注意力机制的Transformer模型计算模型的发展也不可延续当前发展路径。
我以前的讨论：
两个看法 https://talkcc.net/article/4861135-10522
可以再想，但把它当成游戏就好 https://talkcc.net/article/4887154
生活在中西文化新旧时代夹缝里的钱穆。我认为钱穆（此人自学成才，由经史训诂而通义理的）学术研究脉络比较清晰，与计算机AI有相通的地方
https://talkcc.net/article/4963737
题外话：
你“现在对大模型对产业能带来多大的促进作用产生疑虑”，这个思考层次是对的，但很有可能识者寥寥。不要迷信流行和权威，独立思考。
以下是我翻出来对马前卒影评的评论，同样识者寥寥。
https://talkcc.net/article/3885389
https://talkcc.net/article/3889541
https://talkcc.net/article/4920555
https://talkcc.net/article/4920560
家园 很有意思，已经通过站内短信联系，请回复 家园 昨天听了AI团队的汇报 昨天AI团队汇报了他们在大模型应用上的一些进展，他们找到了基于图形生成大模型的应用场景，看了一下结果还可以，对我们来说这算是找到了产业应用，虽然远不如第一代AI图像识别的突破那么惊艳，但也有它自己的优势。
AI团队也汇报了他们在文字生成方面的尝试，将我们行业的一些资料喂给国内的一家大模型，也能产生一些看上去还行的内容。但我问了他们一个问题，作为一个商业公司，你们产生的这些内容先不管是否有用，能保证绝对正确么？回答是不能，但行业的人类专家们也会出错。我回答说，人类专家是用他自己的专业信誉为他的回答背书，我们这样的商业公司也得用信誉为我们的产品生成的内容正确与否背书，如果生成的内容错了，那就是我们在行业、在客户端的专业形象受到损害。除非我们也加上一句免责声明，“以上内容由AI生成，其生成内容的准确性和完整性无法保证，不代表我公司的态度或观点”。 所以，这一块，我们暂时还没找到合适的应用场景。
通宝推：广宽,青青的蓝,闻弦歌,