免费 AI “神器”系列第三弹:AI 视频领域的“字节跳动”诞生,首个GPT-4V盲测工具发布|钛媒体AGI 免费 AI “神器”系列第三弹:AI 视频领域的“字节跳动”诞生,首个GPT-4V盲测工具发布|钛媒体AGI
admin
2024-02-13 08:36:53
0


图片来源:unsplash

近期,生成式人工智能(AIGC)领域又涌现出多款创意十足的新应用。

今天,钛媒体AGI梳理了免费 AI “神器”系列第三弹,共五款,其中大多数实用工具能帮你提升一定的生产力。

AI视频编辑神器——Runway Gen-2胸部x光片诊断神器——CheXagentAlphaZero升级版——DeepMind下象棋模型Vision Arena:视觉模型盲测工具图片3D转换器——ComfyUI 3D Pack1、AI 视频编辑神器——Runway Gen-2

产品信息:Runway Gen-2是一款功能强大的AI视频编辑软件,用户可以直接使用“文本”、“图片”和“文本+图片”三种方式提示生成视频内容,并自动剪辑视频。

产品功能:用户在主界面可自由选择“文本”、“图片”和“文本+图片”三种方式来生成视频内容。以“文本”生成视频为例,在输入框输入一段描述词后,等待两分钟左右就会生成一段4秒的视频内容。

除此之外,Runway Gen-2还配备有其他30种强大的 AI 工具,比如:“Remove Background”(绿幕去背景)、“Expand Image”(图片扩展)、“Blur Faces”(模糊人脸)、“Inpainting”(移除视频杂物/人)等,可以帮助视频内容创作者极大提高工作效率。



Runway Gen-2配备有30种 AI 功能

据悉,Runway Gen-2背后的开发团队来自Runway公司,他们致力于开发用于生成视频、图像和多媒体内容的产品和模型。在2023年6月,该公司以15亿美元的估值,完成了1.41亿美元的C轮融资,谷歌、英伟达等科技巨头都参与了投资,被誉为“AI 视频生成领域的字节跳动”。

Runway Gen-2首席执行官Cristobal Valenzuela曾表示,“创意软件的时代已经结束。”而有科技博主认为:“如果(Runway)按照这个速度发展下去,到2024年底,我们或许能够看到导演们手工制作出好莱坞水准的生成式视频作品。”

体验链接:https://app.runwayml.com/

2、胸部x光片诊断神器——CheXagent

产品信息:CheXagent是一个专门用来解读胸部x光片的AI模型,旨在提高医疗影像诊断效率与准确性。

产品功能:用户只需在CheXagent主界面上传一张胸部x光片,等待数秒后即可生成相关的诊断结果,包括疾病识别、异常检测、重要结构分析以及后续步骤建议。


CheXagent 界面

CheXagent由斯坦福大学与Stability AI合作开发,结合了临床医学大语言模型、视觉编码器和视觉-语言桥接网络,利用超过600万组数据的大型集合进行训练,提升了解读X光图像的能力。如若未来进入大规模应用,医疗工作者的工作效率和诊断准确率都将得到提升。

体验链接:https://stanford-aimi.github.io/chexagent.html

3、AlphaZero升级版——DeepMind下象棋模型

产品信息:Google DeepMind抛弃传统的搜索方法,使用Transformer模型,训练了一个AI模型来下国际象棋。

产品功能:Google DeepMind下象棋模型使用了一个国际象棋程序Stockfish 16来训练,AI不再需要像此前普通 AI 国际象棋依赖于搜索算法来预测和评估最佳选择的走法,而是直接学习成千上万棋局中的模式和策略,达到只需通过观察当前棋盘的状态,做出高水平决策的大师级棋艺。

DeepMind下象棋模型相关论文

该模型在性能上超越了AlphaGo Zero和GPT-3.5-Turbo-Instruct,证明了深度学习模型,特别是Transformer模型,能够在复杂的决策和策略游戏中学习和模拟高级人类智能,显著减少了计算需求,为AI的自主学习和理解复杂系统提供了新的范例。

与AI下棋体验地址:https://lichess.org/

4、Vision Arena:视觉模型盲测工具

产品信息:Vision Arena是一款视觉模型领域的开放评测对比平台,目的是测试和比较不同的视觉语言模型(VLMs),比如GPT-4V、Gemini(谷歌模型)、Llava、Qwen-VL(通义模型)等。

产品功能:用户可以在Vision Arena工具上同时测试两个视觉模型,并对它们进行投票,以决定哪个更优秀。而且整个过程处于“盲测”状态,需要选择你认为好的结果才会告诉你模型是什么。



据透露,这是全球首个GPT-4V的盲测工具软件。未来,基于该工具的模型基准排行榜(Elo Rating)功能也将推出。

体验地址:https://huggingface.co/spaces/WildVision/vision-arena

5、图片3D转换器——ComfyUI 3D Pack

产品信息:ComfyUI 是一款基于稳定扩散模型(Stable Diffusion Model)架构技术,直观、功能强大且实现模块化的图形平台,允许用户创建复杂的 AI 文生图工作,无需编程知识。

产品功能:今年1月,ComfyUI 宣布引入3D图像处理模型,能快速将图片转换成3D模型。如今,用户可在ComfyUI 3D Pack平台上将图片快速转换成一个3D模型,并能从不同角度查看该3D模型,还能使用3D高斯扩散技术提升模型质量,让3D模型看起来更加真实和具有立体感。此外,ComfyUI 3D Pack还支持多种格式导出,集成了先进的3D处理算法。


ComfyUI 3D Pack界面

体验地址:https://github.com/MrForExample/ComfyUI-3D-Pack/tree/main

(本文首发钛媒体App,作者|任颖文,编辑|林志佳)

相关内容

热门资讯

一季度增长12.2%后,王莉定... 来源:茅台时空 据茅台官微报道,茅台酱香系列酒一季度交出营业收入78.8亿元、同比增长12.2%的成...
曦智科技沈亦晨:将与上海国资联... 曦智科技创始人、董事长沈亦晨 图片来源:主办方供图 5月10日,上海曦智科技创始人、董事长沈亦晨出现...
东实环境“还贷式IPO”困境:... 图源:图虫创意 来源|时代商业研究院 作者|特约研究员赖钧洪、郑琳 编辑|郑琳 作为东莞市国资委10...
为什么是宁波?扛起中国五金出口... 中国作为全球最大的五金制品生产国和出口国,正以绿色转型、品牌出海为方向,在全球五金供应链中占据核心地...
微信:关于开展涉税虚假宣传信息... 近期,平台接到用户投诉举报,发现个别账户发布“纳税15万,国家补贴5万”“4月恢复核定征收”等涉税虚...
央视调查:AI“买家秀”误导消... IT之家 5 月 10 日消息,据央视新闻今日报道,在网购场景中,由于消费者无法直接接触商品,所以评...
(机遇香港)“温情经济”升温 ... 中新社香港5月10日电 (记者 邱兆翔)5月10日是母亲节。在香港,不少子女与父母一早出门饮茶庆祝,...
原创 3... 5月8日,彭博社一段视频访谈把华尔街炸了。有"新债王"之称的双线资本创始人冈拉克,公开承认自己已经在...
网点关停潮?一半全国性银行机构... 营业网点是商业银行经营的最小细胞,也是直接触达客户、创造价值的核心战场,其竞争力直接关系到银行经营效...
粮农组织:战火阴影下4月全球食... 来源:财联社 联合国粮农组织(FAO)周五指出,由于中东局势紧张及霍尔木兹海峡反复被封,全球粮食价格...
原创 帮... 老铁们,帮主又来了。今天聊个事儿,保证让你觉得,原来国家战略离你的钱包可以这么近!四部门刚发了个文,...
吸引全球资本,亚洲新一轮“超级... 投资者正将目光转向亚洲,寻找全球股市上涨行情的下一个突破口。 在人工智能浪潮驱动下,韩国股市本月涨幅...
越秀区多维经营账服务细致入微的... 越秀区多维经营账服务细致入微的代理机构参考 在广州越秀区这一商贸活跃的核心区域,中小企业对财税服务...
教人挣钱的自媒体平台叫什么 教人挣钱的自媒体平台叫什么?这问题问得太到位了。说实话,我也曾经翻遍全网、踩过无数坑,就为了找一个真...
湖人被无情戏耍又是三节崩 里夫... 与雷霆的半决赛打到第三场,一种无望的情绪已彻底裹挟了湖人全队,彻底无法被摆脱了。 所有人都清楚,湖人...
原创 欧... 据环球网综合报道,欧盟正处于前所未有的抉择压力之下。在俄乌冲突延续近四年的沉重阴影下,欧盟内部关于援...
原创 1... 雷达财经出品 文|丁禹 编|孟帅 五一假期刚刚结束,市值百亿的川酒上市公司水井坊,其核心管理层再次迎...
美银Hartnett:材料板块... 美银证券首席投资策略师Michael Hartnett在最新报告中点名材料板块,称其将是下一个“牛市...
情绪消费的好日子,还剩多久 文|强调Next 2025年是中国潮玩行业最热闹的一年,也是从业者最难熬的一年。 热闹是真的热闹。...