AI“数据荒”怎么办?微软、谷歌等公司正使用“合成数据”训练AI ai数据训练公司 AI数据训练
admin
2024-05-12 12:34:28
0

财联社5月12日讯(编辑 周子意)人工智能聊天机器人的背后需要海量高质量数据作为支撑。传统上,人工智能系统依赖于从各种网络来源(如文章、书籍和在线评论)中提取的大量数据来理解用户的查询并生成响应。

长期以来,如何获取更多的高质量数据成为人工智能公司的一大挑战。由于数据在互联网上的可用性是有限的,这促使人工智能公司正寻求一种替代解决方案——合成数据(Synthetic data)。

合成数据,即人工智能系统生成的人工数据。科技公司通过利用自己的人工智能模型,生成合成数据(这也被认为是虚假数据),然后将这些数据用以训练其系统的未来迭代。

谈及合成数据是如何生成的,其过程包括为人工智能模型设置特定参数和提示以创建内容,这种方法可以更精确地控制用于训练人工智能系统的数据。

例如,微软的研究人员向人工智能模型列出了四岁孩子能够理解的3000个词汇,然后,他们要求该模型使用词汇表中的一个名词、一个动词和一个形容词来创造一个儿童故事。通过几天时间内数百万次的重复提示,模型最终产生了数百万个短篇故事。

虽然计算中的合成数据并不是一个新概念,但生成式人工智能的兴起促进了大规模创建更高质量的合成数据。

人工智能初创公司Anthropic首席执行官Dario Amodei将这种方法称为“无限数据生成引擎”,旨在避免与传统数据采集方法相关的一些版权、隐私等问题。

现有用例与分歧观点

目前,Meta、谷歌和微软等主要人工智能公司已经开始使用合成数据开发高级模型,包括聊天机器人和语言处理器。

例如,Anthropic使用合成数据为其聊天机器人Claude提供动力;谷歌DeepMind则使用这种方法来训练能够解决复杂几何问题的模型;与此同时,微软已经公开了使用合成数据开发的小型语言模型。

有支持者认为,如果适当实施,合成数据可以产生准确可靠的模型。

然而,一些人工智能专家对与合成数据相关的风险表示担忧。著名大学的研究人员观察到了“模型崩溃”的例子,即在合成数据上训练的人工智能模型出现了不可逆转的缺陷,并产生了荒谬的输出。此外,有人担心合成数据可能会加剧数据集的偏差和错误。

剑桥大学博士Zakhar Shumaylov在一封电子邮件中写道,”如果处理得当,合成数据会很有用。然而,对于如何才能处理得当,目前还没有明确的答案;有些偏见对于人类来说可能很难察觉。”

此外,围绕对合成数据的依赖存在一场哲学辩论,人们对人工智能的本质提出了质疑——如若使用机器合成的数据,那么人工智能是否还是模仿人类智能的机器?

斯坦福大学教授Percy Liang强调了将真正的人类智能融入数据生成过程的重要性,并强调了大规模创建合成数据的复杂性。他认为,“合成数据不是真实的数据,就像你做梦登上了珠穆朗玛峰并不是真正登顶了一样。”

目前对于生成合成数据的最佳做法尚未达成共识,这突出表明需要在这一领域进一步研究和发展。随着该领域的不断发展,人工智能研究人员和领域专家之间的合作对于充分利用人工智能开发合成数据的潜力至关重要。

相关内容

热门资讯

“摘星脱帽”后连收两个涨停 金... 本报记者 冯雨瑶 7月3日,金科地产集团股份有限公司(以下简称“金科股份”)股价开盘后再度涨停,这是...
三重需求叠加,国产半导体设备企... 记者 郑晨烨 最近几个交易日,股票市场上近期涨势迅猛的科技股群体出现了快速回调。但在产业层面,202...
颈肩腰腿疼得扛不住?博康诊所贾... 现代保健报讯:朔州入了夏,白天热辣辣的,屋里空调一开,冷热交替间,不少人的颈肩腰腿又开始闹别扭了。鄯...
一张“小桌子”何以撬动大消费?... (来源:上海普陀) “太开心了!我是从常州特地来的,一年一次的展会,当然要过来感受一下!”上午10时...
2026四川行|从“四川行”看... 2026中外知名企业四川行投资推介会举行期间,四川重磅推出1.8万亿元投资机会,精选180个重点项目...
每周股票复盘:平安银行(000... 截至2026年7月3日收盘,平安银行(000001)报收于10.29元,较上周的10.23元上涨0....
电商爆款仪器怎么玩?公模现货在... 电商爆款仪器的核心竞争力不是重金投入外观私模,而是极致的供应链测款速度。数据显示,能在5天内完成现货...
起步价2000万的杭州豪宅成交... 界面新闻记者 | 杨冰柯 界面新闻编辑 | 庄键 上半年杭州新房成交2.62万套,总价2000万...
联易融:荣膺ESG可持续发展卓... 6月29日,由格隆汇主办的“中期策略峰会”揭晓“金格奖”年度卓越公司评选榜单,联易融科技集团(下称“...
腾讯、阿里、百度,历史性同台!... 每经编辑:金冥羽,陈俊杰,向江林 记者|郁彪 编辑|金冥羽 陈俊杰向江林 校对|张益铭 这是腾讯、...
3年赚46亿,杨幂喊出一个安徽... 国产零食品牌“溜溜梅”最近上市了。 6月15日,上市首日,溜溜梅的单日涨幅高达193.71%,超过此...
“甘肃银王”被查,“白银龙头”... “甘肃银王”栽了,“白银龙头“一泻千里。 2026年1月29日,盛达资源因为头顶“白银龙头”等热门概...
“霉霉”世纪婚礼耗资过亿!婚礼... (来源:中新文娱) Taylor Swift(霉霉)与美式足球员男友Travis Kelce,于当地...
暗访上海热门黄金回收店,全程录... 暗访上海热门黄金回收店,全程录像记录真实交易过程 为了给大家呈现最真实的黄金回收全流程,我提前准备好...
上海电气与上海交大签署战略合作... 据上海电气消息,7月3日下午,中国科学院院士、上海交通大学(以下简称“上海交大”)党委副书记、校长丁...
原创 警... 2026年上半年,美联储的资产负债表走势走出了和2019年9月高度相似的曲线,口头坚持收紧货币政策、...
半年净利润突破200亿元!券商... 市场迎来了首份券商半年报预告。 7月3日晚间,国泰海通发布2026年半年度业绩预告。2026年上半年...
贵阳对标实时大盘金价回收金项链... 当前黄金回收行业参与主体多样,不同商家的定价标准、服务流程差异较大,不少贵阳用户在处置闲置黄金时,会...
机器人走进生活,风险谁来“抗”... 保险已成为人形机器人规模化落地的关键一环,未来机器人企业将联合头部险企打造覆盖全链路的打包保单,细分...
哪些标准可以判断黄金回收机构的... 近年来随着黄金资产配置需求的提升,不同群体的黄金变现需求也逐渐增多:45-70岁的中老年投资者早年入...