2023-02-01 12:16:05 来源:商业新知网
来源 | arXiv
作者|Roberto Gozalo-Brizuela、Eduardo C. Garrido-Merch´an
转自|机器之心
【资料图】
编辑|rome rome
生成模型领域里,ChatGPT 并不是一切。
过去两年,AI 领域里已经出现大量大型生成模型,如 ChatGPT 或 Stable Diffusion。具体而言,这些模型能够执行像通用问答系统或自动创建艺术图像等任务,这些任务正在彻底改变很多领域。
从目前的发展来看,这些生成模型对行业和社会的影响是巨大的,因为一些工作岗位可能会发生改变。例如,Generative AI 能够有效且创造性地将文本转换为图像,如 DALLE-2 模型;把文本转成 3D 图像,如 Dreamfusion 模型;把图像转成文本,如 Flamingo 模型;把文本转成视频,如 Phenaki 模型;把文本转成音频,如 AudioLM 模型;把文本转成代码,如 Codex 模型;把文本转成科学论文,如 Galactica 模型;甚至创建算法的模型,如 AlphaTensor。
在近日由西班牙 Comillas Pontifical University 研究人员提交的综述论文中,作者试图以简洁的方式描述生成式 AI 对当前很多模型的影响,并对最近发布的主要生成式 AI 模型进行分类。
论文《ChatGPT is not all you need. A State of the Art Review of large Generative AI models》:
链接:https://arxiv.org/abs/2301.04655
为向可能因使用这些模型而受益的专业人士提供有效信息,作者按如下结构组织文章。首先,作者提供行业中出现的主要生成式模型的分类。接着对每个类别进行分析。最后,本文会给出相关结论和未来要做的工作。文章中作者没有详细介绍每个模型的技术细节,如 Transformer,因为文章的目的是研究模型的应用,而不是研究它们的工作原理。
生成式 AI 模型的分类
在详细分析每个模型之前,首先将当前的生成式 AI 进行分类,类别代表输入数据和输出数据类型之间的映射。如图 1 所示。作者总共总结 9 个类别,其中每个出现在图 1 中的模型将在之后详细描述。由于文章主要关注点是描述生成式 AI 模型的最新进展,为让读者能有整体认识,在图 2 中给出了所有已发布的模型。
有趣的是,所有这些模型仅由 6 个公司发布,如图 3 所示。背后的主要原因是为能够估计这些模型的参数,必须拥有巨大的计算能力以及在数据科学和数据工程方面技术精湛、经验丰富的团队。因此,只有图 3 所示的公司,在收购的初创公司的努力下以及与学术界的合作,才能够成功发布生成式 AI 模型。
到此已经介绍了最新的生成式 AI 模型,接下来的部分将详细介绍图 1 中所示每个类别。
随着技术的进步,我们已经在文本到图像或文本到音频等任务中看到了大量的创造力和个性化。它们在文本到科学或文本到代码的任务中也很准确。这可以在很大程度上提升我们的自动化水平,因为它可以帮助优化创造性和非创造性任务。
然而,由于目前构建它们的方式,这些模型面临着许多限制。在数据集方面,找到一些模型的数据,如文本到科学或文本到音频非常困难,使得训练模型非常耗时。特别需要提到的是,数据集和参数必须非常庞大,这使得训练变得更加困难。模型最大的问题之一是从数据集中的问题中尝试获得解决方案,而模型在解决这些问题时遇到了更多麻烦。同样,在计算方面,运行它们需要大量的时间和算力。
我们应该意识到这些模型的局限性,以便在接下来的几年中尝试和改进它们。
更多细节请参见原论文。
©THE END
转载请联系本公众号获得授权
关键词: 计算能力
据报道,知情人士透露,中国跨境电商Shein将任命软银集团前高管MarceloClaure为拉美业务董事长。
进入控制面板,点击【网络和Internet】,然后点击【Internet选项】打开Internet属性界面,点击【连接】点击下方的【局域网设置】然后勾选【
方法1:1 首先按快捷键win+i打开windows设置,然后点击时间和语言。2、然后点击左侧的语言。3、随后在右侧点击添加语言,将默认语言换成英文
1、首先需要用到 Daemon软件 。2、下载并安装 Daemon 。3、完成后打开选择文件类型这里能看到 mdf 。4、点击左边蓝色的圆圈图标选择
首先要找到WPS软件的文件夹,点击windows开始图标,点击所有程序。找到WPSOffice文件夹,点开,找到WPS Office 工具,点开;点击配置工具
融资丨「西安蓝深新材料」完成近2亿元Pre-IPO轮融资,五矿元鼎股权投资基金、陕西兴航成投资基金、陕西财金特精新材股权投资基金、广州中保瀚
低代码平台的火爆,其实也从侧面印证了企业数字化转型进程正在不断加快,同样,市场竞争也会愈加剧烈。
经初步核算,2022年电信业务收入累计完成1 58万亿元,比上年增长8%。
据报道,知情人士透露,中国跨境电商Shein将任命软银集团前高管MarceloClaure为拉美业务董事长。
苹果已经被视为是AR VR头显行业的拯救者。
从外部来看,科大讯飞通往成功的底牌,可能就是专注AI赛道的战略穿透。对于市场来说,战略穿透力其实就是价值定力。