科技无垠

辰小序

首页 >> 科技无垠 >> 科技无垠最新章节(目录)
大家在看 万道剑尊 医妃惊世 领主之兵伐天下 武炼巅峰 凌天战神 蜜吻999次:乔爷,抱! 劫天运 重生泼辣小军嫂 修神外传 惊世毒妃:轻狂大小姐 
科技无垠 辰小序 - 科技无垠全文阅读 - 科技无垠txt下载 - 科技无垠最新章节 - 好看的其他类型小说

第7章 这究竟会训练出个什么玩意儿?

上一章 目 录 下一页 阅读记录

“ChatGPT你知道吧?‘言心’也是一个语言模型,跟ChatGPT的差别就是,相比之下,‘言心’更擅长中文语料。”

这个话题一旦展开,是怎么也绕不过去现今大火的聊天机器人ChatGPT的,ChatGPT推出2个月即拥有1亿月活用户,在消费者应用程序里,它是历史上最快达到这个数字的。

如今,它就是聊天机器人的标杆产品,火的一塌糊涂。

“ChatGPT的三代模型的核心架构都是Transformer,从本质上讲,它依然是基于海量数据的延伸,并没有新的颠覆性技术,也没有从本质上超出现有的技术。”

说起ChatGPT,程旭对此很不以为然——现阶段,人工智能的理论并没有新的进展,谁强并不是强在理论先进、技术高超上,而是强在硬件实力、强在算力堆积上。

换句话说,就是钱——就拿ChatGPT来说,它训练一次几乎就差不多需要三千万人民币以上的资金。

更别说每年的运营,据估算,每年仅是CPU和GPU的成本就能达到十亿人民币这个级别,再加上其他的费用,这真的不是一般企业能够承受的住的。

哪怕是千寻这样的巨头搜索企业,搞出“言心”这个语言模型,也是持续投入了十年以上,每年的投入几乎是整个千寻科技利润的五分之一——这绝对是一个惊人的数字。

“但微软是真的舍得投钱啊,十亿美金十亿美金的,钱跟不是钱似的往里投资。”

说着的时候,潘正甚是羡慕:“他们甚至给OpenAi团队配了一台性能极为强悍的超算,看着就让人眼红。”

“千寻科技的投入也不差吧?而且以后肯定还会越来越重视。毕竟现在GPT已经开始集成到bing搜索引擎,未来肯定是要发力的。

“而搜索引擎,这可是千寻科技的核心业务、甚至可以说是根基所在。bing未来在国内肯定是要跟千寻搜索直接竞争的,千寻也绝对不会无动于衷的!”

要说ChatGPT这种极为强悍的聊天机器人出现对谁的影响最大?

那当然是搜索业务,它对搜索引擎的影响简直就是颠覆性的。

相比于传统的搜索引擎来说,拥有极致的语言处理技术和语言理解能力的ChatGPT简直太超前了!

它与用户直接对话,用类似于人与人交互的方式进行搜索,而不是传统的关键词匹配。

这种搜索得出的结果更加直接、快捷,也更加容易使用,甚至直接放到论文里都没问题,查重都查不出来。

更有甚者,程序员给它描述需求,它能直接生成可用的代码——它对语言的理解能力已臻于化境!

而这对于千寻搜索来说,肯定不是什么好消息。

而“言心”模型,程旭印象中,“言心”好像是确实出了什么问题,好像还闹挺大的。

原本说是三月上线,三月是上线了,不过更多的是局限于商业合作伙伴,比如各类媒体、地图、房产等大型的合作伙伴——提供智能化的检索服务。

但对个人的开放一直在断续出问题,从三月上线开始,直到2024年中旬,一整年都没消停。

好像是模型的训练出了什么问题,但这其中究竟发生了什么,程旭也没有过多的关注。

“千寻确实花了不少钱,投资也数十上百亿了。”

潘正没有否认程旭的说法,这些东西都已经是公开可求证的了,不过,随后他便微微摇了摇头:“但是现在有点儿,坏了!”

“坏了?”

程旭有些不解,坏了是个什么概念?有这个术语吗?

“难道是寒武纪受到限制,训练卡和推理卡都不能及时供应得原因?”程旭有些不解,这是有些影响,但按理说,这还影响不到当前的上线。

“也不是什么机密,稍微消息灵通点儿的人一打听都知道。”

潘正无奈道:“不是硬件的问题,寒武纪的问题影响暂时确实没有那么大,是‘言心’基础模型的问题。”

程旭更加不解了,基础模型能有什么问题?

都训练那么长时间了,数十上百亿的资金都投入进去了,基础模型有问题都没发现吗?

“这算是早期的一个小失误,”潘正解释道:“原本不是什么大问题,但现在确实不好解决了。”

程旭没有吭声,等着潘正的下文,他是越听越糊涂了。

“早期训练的时候,训练人员也没想那么多,那个时候也没有什么严苛的标准,就使用了自己的产品做语料……”

“自家的产品?”程旭眼睛猛地一跳,瞬间就想起来发生了什么事儿了——千寻自家的产品,除了搜索引擎,也就文库和贴吧了!

而对话,贴吧,这……

程旭瞬间醍醐灌顶——脑海中冒出了一大堆的名词:大帝吧,航空吧,人口吧,孙吧,中西部发展吧……

这……

用这些语料做得模型早期训练?

这T-M-D究竟会训练出来个什么玩意儿?

“卧槽!”实在是没忍住,程旭爆了个粗口:“不会训练出‘阴阳人’加‘乐子人’的‘言心’模型吧?拿他岂不是只会阴阳怪气儿,指桑骂槐?”

程旭摇了摇头,只是这样还是好的,真要培养出来一个类似“50w人格”的价值观出来,那千寻真的是哭都没地儿哭去!

本小章还未完~.~,请点击下一页继续阅读后面精彩内容!

上一章 目 录 下一页 存书签
站内强推 万道剑尊 宠魅 一世倾城:冷宫弃妃 最强弃少 美利坚财富之路 大道朝天 主神崛起 震惊!我竟成了微世界的主宰 修罗帝尊 无敌战斗力系统 末世之深渊召唤师 修真四万年 都市少年医生 初唐房二传 抬棺匠 这个箭神有亿点强 在苏哥哥怀里撒个野 家有悍妻怎么破 黑暗大纪元 头狼 
经典收藏 待我有罪时 特种奶爸俏老婆 唐砖 劫天运 半仙文明 我其实是一个大佬 大魔头 超级抽奖 亡灵圣魔导 幺女 清道夫 BOSS作死指南 大叔,不可以 丹武帝尊 冒牌大英雄 神医九小姐 御兽:我能变成宠兽无限模拟 红楼,琏二爷也太卑鄙了 全民投资:开局投资朱元璋! 当学霸开了科技 
最近更新 万道剑尊 医妃惊世 领主之兵伐天下 超级兵王 武炼巅峰 最强弃少 养鬼为祸 宠魅 凌天战神 蜜吻999次:乔爷,抱! 劫天运 重生泼辣小军嫂 修神外传 近身兵王 惊世毒妃:轻狂大小姐 帝道至尊 玄天战尊 超级保安在都市 驭香 创始道纪 
科技无垠 辰小序 - 科技无垠txt下载 - 科技无垠最新章节 - 科技无垠全文阅读 - 好看的其他类型小说