孟繁岐的这番话,听起来让人觉得不是那么舒服。
言下之意,给人一种华国AI技术就是不如国外的感觉。
这是李彦弘不大喜欢的,毕竟他这么早就关注AI技术,就是为了研发最前沿最先进的技术。
孟繁岐大概猜到了他的想法,前世他也曾被早期华国大量发表的AI论文所迷惑。
觉得在这个新崛起的技术上,华国已经可以和美国分庭抗礼,不落下风。
虽然AlphaGO震惊了世人,但毕竟有些华而不实。
直到上千亿级别的语言大模型出现,这种纯硬核实力的比拼,让孟繁岐不得不甘拜下风。
实际上,并非是技术手段和算法层面上相差太远。
更多的还是因为优质数据的数量不足。
白度的文心一言,出图的时候甚至会将用户的中文输入翻译成英文,再去作图。
很多较真的网友故意测试了中英文差异很大的词汇,比如总线(Bus),鼠标(mouse)。
文心一言绘出的图像竟然是大巴车和老鼠,这从中文上是完全说不通的事情。
可见即便不是全部,文心一言这个所谓的专注中文的超级大模型,也在相当程度上借助了英文基础的模型权重和技术。
究竟为何要这么做,说到底还是基础不够扎实牢靠。
整理数据,清洗数据,给数据打上高质量的标签。
这些都是脏活累活,见效慢的工作。
把别人公开的数据拿过来跑一跑训一训,多么方便快捷?
以国内996大厂的内卷风气,很难容下长回报周期的基础建设。
早些时候看看不出区别,只觉得国内大厂频繁在XX榜单上露面,刷榜,又是超过这个,又是超过那个。
直到语言大模型阶段,基础语料数量和质量上的劣势才暴露无遗。
“其实这也不能完全怪华国的大厂风气,美国的互联网起步要早,并且很多领域的文献材料归档做得特别好。”孟繁岐也曾仔细思索过这方面的问题。
();() “像github,arxiv这样的大型公开社区,里面都是非常优质的外文代码或者论文。这些也不只是美国人自己的积累。而是通过免费公用的形式,收割了全世界的数据。”
“华国人在github上贡献的代码行数也不在少数,反过来看看华国的论文社区,就比如知网,纯纯就是毒瘤。里面屯点硕博生的论文,还要论页数收费。就连下载之后的阅读器,甚至都需要专门的....”
此消彼长之下,差了多少珍贵的数据啊...
只是此时此刻,李彦弘应该还没有想到这么大规模的数据用于训练。因而孟繁岐也不急于一时和他讨论后面语言类的技术,以及生成式的大模型。
我以道种铸长生 你是我的满世欢喜 明日方舟之铁与血 火枪洗明路 无限超神:抬头看见云霄天庭 神秘复苏之我没有外挂 全职法师之魔法天赋 华娱之开局给周董上上对抗 海贼:阿卡姆肄业的小丑巴基 什么叫世界名帅啊 当场怒喷哥哥,这解说不想干了? 前任都是天后,我火了 陨落星辰: 主宰:虫族崛起 大明:我杨宪,真的治扬! 大唐第一逆子 纵目 异常魔兽见闻录 自遮天世界开始 天骄退婚,我提取词条修行
...
登天路,踏歌行,弹指万界!被一扇神秘的青铜门带至遮天世界,成为未来的叶天帝之同学!脚踏诸强,与叶天帝一同对抗诡异一族,领悟万界之美妙风景!...
郭泰来从一个普通学生,变成制造加工领域的神级大师。不断进取,加工范围从数百米到数十个原子,加工精度从微米到纳米到原子分子级,无所不能。瓦森纳协定对华夏禁运我们禁运的都是华夏看不上的技术,大部分成...
在那个本该诞生魔法界救世主的夜晚,哈利波特却死在了那道不可饶恕之咒下。让几乎所有的英国巫师都不敢称呼名讳的男人,重新从魂器中获得了原本就属于他的智慧和野望。黑暗彻底笼罩了大不列颠岛。巫师由血统划分出了明确的高低贵贱,纯血牢牢的把持住了属于上位者的权柄,而被称为泥巴种的人们,终其一生也只能卑微如泥土任人践踏。本该执行公义的魔法部尽是恶徒,本该传授知识的城堡满是压迫。就在这灰暗的时代。穿越而来的乔恩格林,被带进了那辆真正继承霍格沃茨名号的流亡马车已有两本百万字完结精品老书,质量保证,欢迎入坑!...
大明崇祯十四年,小冰河时代已到最严峻的时期,京师鼠疫风暴已在酝酿,洛阳已经失守皇帝还在为辽东局势忧心,就在这风雨飘摇之际。陈烨,一名幸运的时空交易店员,匹配到了崇祯。崇祯买粮食,买电台,买仙人指导。卖黄金,卖矿产,卖大明能卖的。朕要这天下,日光照耀之处,皆为明土。朕要在仙人的指引,以及完善的知识体系下,建立,富有大明特色的新大明陈烨别问了,这永乐大典,古方秘籍,万国已灭绝动物保护园真是地里长出来的。(书友群954975531)...
孟晓白只是无聊发短视频,吐槽一些科幻电影游戏,谁知道多了一些莫名其妙的粉丝,天天催他更新,还要给他刷礼物。母体豢养人类?这个想法不错,赞!没什么好送的,就送一个智械团吧。海王感谢作者讲解,原来这样就可以拿到三叉戟!等我成为七海之主,送你一艘亚特兰蒂斯的核潜艇!维克托作者,杰斯的海克斯科技炮比我强?海克斯科技核心了解一下!灭霸上次预告不是说要讲灵魂宝石在哪吗?再不更新我就要把宇宙舰队开过去了!孟晓白原来以为这些都是网友的玩笑,直到有一天,他收到了来自这些世界的快递!孟晓白求求你们别刷黑科技了,奥创机器人生化病毒行星毁灭炮二向箔这些东西,我真的用不上啊!...