孟繁岐的这番话,听起来让人觉得不是那么舒服。
言下之意,给人一种华国AI技术就是不如国外的感觉。
这是李彦弘不大喜欢的,毕竟他这么早就关注AI技术,就是为了研发最前沿最先进的技术。
孟繁岐大概猜到了他的想法,前世他也曾被早期华国大量发表的AI论文所迷惑。
觉得在这个新崛起的技术上,华国已经可以和美国分庭抗礼,不落下风。
虽然AlphaGO震惊了世人,但毕竟有些华而不实。
直到上千亿级别的语言大模型出现,这种纯硬核实力的比拼,让孟繁岐不得不甘拜下风。
实际上,并非是技术手段和算法层面上相差太远。
更多的还是因为优质数据的数量不足。
白度的文心一言,出图的时候甚至会将用户的中文输入翻译成英文,再去作图。
很多较真的网友故意测试了中英文差异很大的词汇,比如总线(Bus),鼠标(mouse)。
文心一言绘出的图像竟然是大巴车和老鼠,这从中文上是完全说不通的事情。
可见即便不是全部,文心一言这个所谓的专注中文的超级大模型,也在相当程度上借助了英文基础的模型权重和技术。
究竟为何要这么做,说到底还是基础不够扎实牢靠。
整理数据,清洗数据,给数据打上高质量的标签。
这些都是脏活累活,见效慢的工作。
把别人公开的数据拿过来跑一跑训一训,多么方便快捷?
以国内996大厂的内卷风气,很难容下长回报周期的基础建设。
早些时候看看不出区别,只觉得国内大厂频繁在XX榜单上露面,刷榜,又是超过这个,又是超过那个。
直到语言大模型阶段,基础语料数量和质量上的劣势才暴露无遗。
“其实这也不能完全怪华国的大厂风气,美国的互联网起步要早,并且很多领域的文献材料归档做得特别好。”孟繁岐也曾仔细思索过这方面的问题。
();() “像github,arxiv这样的大型公开社区,里面都是非常优质的外文代码或者论文。这些也不只是美国人自己的积累。而是通过免费公用的形式,收割了全世界的数据。”
“华国人在github上贡献的代码行数也不在少数,反过来看看华国的论文社区,就比如知网,纯纯就是毒瘤。里面屯点硕博生的论文,还要论页数收费。就连下载之后的阅读器,甚至都需要专门的....”
此消彼长之下,差了多少珍贵的数据啊...
只是此时此刻,李彦弘应该还没有想到这么大规模的数据用于训练。因而孟繁岐也不急于一时和他讨论后面语言类的技术,以及生成式的大模型。
我以道种铸长生 主宰:虫族崛起 全职法师之魔法天赋 自遮天世界开始 陨落星辰: 天骄退婚,我提取词条修行 无限超神:抬头看见云霄天庭 明日方舟之铁与血 大明:我杨宪,真的治扬! 火枪洗明路 海贼:阿卡姆肄业的小丑巴基 什么叫世界名帅啊 华娱之开局给周董上上对抗 纵目 大唐第一逆子 当场怒喷哥哥,这解说不想干了? 神秘复苏之我没有外挂 你是我的满世欢喜 前任都是天后,我火了 异常魔兽见闻录
90年代,正当大卫斯特恩一脸焦虑地站在大天朝电视台门外,看着自己手中的NBA录像带,寻思着怎么来打开潜力无穷的中国市场时,他万万没想到原来向上帝许愿,还真TM有用!铁影北方神NBA篮框之笑容保护者不是后仰从不投一手跳投美如画当拥有以上绰号的苏枫横空出世,未来许多人的青春,在这一刻开始了!啊呸!这帮黑粉到底有完没完!劳资的绰号明明是‘弑神者’!看着报纸,苏枫愤愤不平地说道。弑是弑神的弑,者是弑神者的者,至于神?90年代的NBA,能有几位神?...
未婚夫背叛,唐沫儿一不小心招惹上了京都豪门贵胄顾墨寒。某天,唐沫儿捏着手里的两道红杠杠,怒,顾少,你为什么要搞大我的肚子顾墨寒将一个小奶娃塞到她怀里,老婆,乖,那是二胎。于是唐沫儿奶完了大...
平凡了几十年的程佳终于不平凡了一回,她,重生了重生成了一个胎儿远离城市,远离现代化,生活在七十年代的小渔村,程佳佳的日子不要太逍遥遛狗斗鸡,上山下水,还有个妹控的小哥哥保驾护航,再来个憨厚老实...
有一天,陈靖忽然发现自己能猜到彩票号码可以猜到股票涨跌可以猜到漂亮小姐姐有没有男朋友...
末世降临,人间成为炼狱,重生归来的顾杀,在第一天就提起了屠刀,从杀圣母婊开始,踏上了一条猩红的道路,让黑暗都动荡恐惧!记住,在末世,不需要情感,不需要歌颂与赞美,不需要希望,只需要,活下去!我叫顾杀,杀戮的杀,也是无人生还的杀!...
...