科学网

 找回密码
  注册
前沿观点 | 谷歌BARD的视觉理解能力如何?对开放挑战的实证研究
陈培颖 2023-9-22 10:58
作为OpenAI公司ChatGPT模型的竞品,谷歌公司提出的BARD模型已经在会话型人工智能领域取得了显著进展。特别值得注意的是,BARD模型的最新版本在对话过程中具备了处理文本提示和视觉输入的能力。鉴于BARD模型在文本输入处理方面取得的令人嘱目的成就, 来自 苏黎世联邦理工学院(ETHZ)、澳大利亚国立大学(ANU)和穆罕默 ...
个人分类: 好文推荐|461 次阅读|没有评论
自动化所宗成庆团队 | 综述: Transformer模型-从机器翻译到其他任务的通用框架
陈培颖 2023-8-28 09:13
机器翻译是一项重要且具有挑战性的任务,旨在将自然语言句子从一种语言自动翻译成另一种语言。近年来,基于Transformer模型的神经机器翻译(NMT)在方法论和应用上都取得了重大突破,成为新的主流翻译方法。 中国科学院自动化研究所宗成庆研究员团队 概述了基于Transformer模型的神经机器翻译及其在其他任务的扩展应 ...
个人分类: 好文推荐|484 次阅读|没有评论
西电公茂果团队 | 综述: 多模态数据的联邦学习
陈培颖 2023-8-9 08:45
随着大众对保护数据隐私的意识加强,作为训练模型主要范式之一的联邦学习(FL)因具有数据隐私保护功能而在近年来受到研究者们的越发关注。但是,大多数FL客户端当前还是单模态。随着边缘计算的崛起,多种多样的传感器和可穿戴设备产生了大量不同模态的数据,从而推动了对多模态联邦学习(MMFL)的研究。 西安电子科技大 ...
个人分类: 好文推荐|901 次阅读|没有评论
高文院士团队 | 综述: 大规模多模态预训练模型
陈培颖 2023-8-2 10:01
随着对通用深度模型的迫切需求,人们推出了许多预训练大模型,如双向编码器表示(BERT)、视觉变换器(ViT)、生成预训练转换器(GPT)等。这些模型在单一领域(如计算机视觉和自然语言处理)中取得了成功,受此启发,多模态预训练大模型近年来也受到了越来越多的关注。 北京大学高文院士团队 对这些模型进行了全面 ...
个人分类: 好文推荐|887 次阅读|没有评论
港中文黄锦辉团队 | 综述: 任务型对话对话策略学习的强化学习方法
陈培颖 2023-7-11 11:14
对话策略学习(DPL)是任务型对话(TOD)系统的一个关键组成部分。其主要任务就是根据每一轮的对话状态去决定对话系统下一步的行动。强化学习(RL)广泛被用来优化这类对话策略。在学习过程中,使用者被当作环境,系统则作为个体。 香港中文大学Wong Kam-Fai(黄锦辉)教授团队 从RL的角度切入,对对话策略的近期进展与挑战 ...
个人分类: 好文推荐|776 次阅读|没有评论
综述 | 人机对抗智能:技术、挑战和机遇
陈培颖 2023-6-14 17:47
随着以ChatGPT为代表的生成式人工智能的爆火与取得的惊人成功,以语言或多模态大模型为桥梁的人机混合将潜在成为人机对抗发展的新阶段,进行人机对抗中人工智能综述,凝练其技术、挑战与机遇将能更好地站在巨人的肩膀上。 人机对抗作为人工智能的试金石,研究人员开发了Libratus、OpenAI Five和AlphaStar等代表性 ...
个人分类: 好文推荐|723 次阅读|没有评论
ETHZ最新成果 | 时尚领域中的掩码视觉-语言Transformer模型
陈培颖 2023-6-6 17:50
阿里巴巴集团国际部和苏黎世联邦理工学院的研究人员 合作提出了MVLT模型,这是一种基于掩码的视觉-语言Transformer模型,用于时尚领域中的跨模态表征学习。该模型使用基于视觉Transformer模型对BERT进行了重构,成为时尚领域中第一个可端到端训练的多模态框架。为了更好地理解时尚商品,本文还引入了掩码图像重建(Mask ...
个人分类: 好文推荐|597 次阅读|没有评论
专题好文 | 利用合成数据进行有效关联知识学习的研究
陈培颖 2023-5-9 17:01
关联(Association)是多目标跟踪(MOT)的核心组件,旨在将同一身份的边界框在视频序列中进行连接。为了训练关联模块(例如参数化网络),通常使用真实的视频数据。然而,标注连续视频帧中的人物轨迹成本较高,且由于其缺乏灵活性,这种真实数据为我们评估系统在不同跟踪场景下的性能提供的机会有限。 来自 澳大利亚国立 ...
个人分类: 好文推荐|1017 次阅读|没有评论
专题好文 | 中科大冯福利团队:减少虚假相关性的自监督推荐算法
陈培颖 2023-4-26 16:22
近年来,自监督学习(SSL)在推荐算法系统中的成效显著。但是,SSL推荐模型很可能由于存在虚假相关而导致泛化能力较差。为了减轻虚假相关性的影响,现有研究通常致力于基于ID的SSL推荐或利用特征工程来识别虚假特征。然而,基于ID的SSL方法牺牲了不变特征的优势,而特征工程方法需要借助高成本的人工标记来完成。 为 ...
个人分类: 好文推荐|999 次阅读|没有评论
精选综述 | 医学数据预训练(机器智能研究MIR)
陈培颖 2023-4-6 09:46
医学数据是指与患者护理或临床试验项目相关的健康方面数据。医学数据有很多种类,比如临床影像学数据、生物信号数据、电子健康档案(EHR)、多模态医学数据等。在过去十年中,随着深度深度神经网络不断发展,新兴的预训练范式已经逐渐占据主导地位,它在数据有限的情况下可显著提高机器学习的表现。近年来,有关医学领域内 ...
个人分类: 好文推荐|995 次阅读|没有评论

Archiver|手机版|科学网 ( 京ICP备07017567号-12 )

GMT+8, 2024-3-4 15:54

Powered by ScienceNet.cn

Copyright © 2007- 中国科学报社

返回顶部