第475章 月下美人舞(1 / 5)
好书推荐:
赛博终极进化:开局植入最强AI
快穿:老婆没有心怎么办,宠着呗
穿书七零:我被大佬撩的脸红心跳
穿越农门之老太太的发家路
这个妖怪不好惹!
重返1973做知青
萌祖宗她投胎现代修仙了
医品嫡妃:王爷请纳妾
我在异世界当军阀
万物图鉴:我的武道能无限升级
两个人靠在一起,沉默了好一会儿。
柳宝月突然开口道:“小颂,我打算明天回帝都。”
“不再待几天吗?”
“不了,下周一,也就是28号,公页科技就会正式发布第一代聊天程序和神经网络架构。
我需要回去配合部门做好运营宣传的工作。”
唐颂摸了摸她的脑袋,柔声道:“辛苦了。”
柳宝月笑道:“不辛苦的,前期我们不会大批量宣传,主要是进行数据收集和功能测试。
这是我们的1.0版本,还存在很多不足。
不过我们的架构非常好,只是训练次数不足。
目前的训练参数大概有170b(1700亿),这个数字非常庞大,耗时也很长。
不过,已经达到了gpt3的水平,在国内绝对是最拔尖的水准。
另外,除了llm(大语言模型),我们在nlp(自然语言处理)领域也有了突破进展。
两者相结合,在智能驾驶领域会有非常不错的效果。
当然,这都是我听同事们说的,我还没有真正接触到,了解有限。”
唐颂点点头,ai技术的发展是一个长期的过程。
公页科技成立至今不足两年。
虽然集合了大量优秀科学家、研究员,但硬件上算力的限制,决定了它不可能一蹴而就。
比如170b的参数,按照a100gpu的理论算力312tflops计算。
考虑到算力的利用率,2千张显卡同时计算。
完成一次训练也需要10天。
就算唐宋集团不断增加ai算力底座的资金投入,也还要考虑模型的性能和成长控制。