三星的AI模型可让照片动起来,不需要传统的3D建模
2019-05-24 来源:eefocus
来自莫斯科三星人工智能中心和斯科尔科沃科技学院的工程师和研究人员已经创建了一个模型,可以从图像中生成逼真的“会说话”的动画头像,而不需要传统的3D建模方法。
三星去年在莫斯科、剑桥和多伦多开设了人工智能研究中心。
工程师Egor Zakharov在解释研究结果的视频中说:“事实上,这种学习模型就像一个人的现实化身。”
该模型上出现的名人包括玛丽莲·梦露、阿尔伯特·爱因斯坦、列奥纳多·达·芬奇的《蒙娜丽莎》和嘻哈界知名人物,武当帮领导者RZA。这项技术专注于合成逼真的头部图像和面部特征,可以应用于视频游戏、视频会议,或者像现在三星Galaxy S10那样的数字化身。
很明显,这种技术也可以用来合成某种电影,你懂得。
Few-shot learning意味着该模型可以开始使用一些甚至是单人的图像来生成一个人脸的动画。首先使用VoxCeleb2视频数据集进行元训练,然后该模型才能对以前未见过的人脸进行动画处理。
在训练过程中,该系统建立了三种神经网络: 嵌入式网络将帧映射到矢量,生成网络将合成视频中的人脸地标映射到生成的图像中,并通过鉴别网络对生成的图像的真实感和姿态进行评估。
“至关重要的是,该系统能够以一种特定于人的方式初始化生成器和识别器的参数,这样,尽管需要调整数千万个参数,但训练可以基于少量图像并快速完成。我们的研究表明,这种方法能够学习到非常逼真、个性化的动画人脸模型,甚至是肖像画。” 合作者在arXiv论文的摘要中说。
华盛顿大学(University of Washington)的研究人员去年分享了他们是如何创造出ObamaNet的。这是一种基于Pix2Pix的唇形同步模型,根据美国前总统奥巴马的视频进行训练。
加州大学伯克利分校(University of California, Berkeley)的研究人员去年秋天推出了一个模型,利用YouTube上的视频训练人工智能数据集跳舞或做后空翻等杂技动作。
- 三星代工迎来大逆转!接连拿下NVIDIA、Tesla、AMD大单:Q4有望扭亏
- 三星电子:HBM5 与 HBM5E 将分别升级基础裸片与 DRAM 的制程
- 曝三星计划在美国得州泰勒建立第二座芯片厂,规模与第一工厂相当
- 三星回应内存短缺:预计2028年结束
- 内存价格疯涨倒逼厂商停产性价比机型
- 英伟达罕见入局内存研发:联手三星共同推进铁电NAND商业化
- 三星电子:2nm 良率爬坡好于预期,泰勒晶圆厂预计年底完成首批流片
- 消息称特斯拉计划就大幅提升AI6芯片产能规模与三星电子磋商
- 消息称三星电子 FOPLP 先进封装研发转而聚焦 415mm × 510mm 基板
- 是德科技与三星携手NVIDIA展示端到端AI-RAN验证工作流程
- 嵌入式的风向变了:2026纽伦堡嵌入式展透露这些趋势
- 高通确认不在GDC 2026发布新款骁龙G系列掌机处理器SoC
- 行业评论 从工具到平台:如何化解跨架构时代的工程开发和管理难题
- 阿里达摩院发布玄铁C950,打破全球RISC-V CPU性能纪录
- 面向嵌入式部署的神经网络优化:模型压缩深度解析
- Mujoco中添加Apriltag标签并实现相机识别教程
- 摩尔线程MTT S5000全面适配Qwen3.5三款新模型
- 英飞凌与宝马集团携手合作,基于Neue Klasse架构塑造软件定义汽车的未来
- 物理AI仿真新突破:摩尔线程与五一视界共建全栈国产化生态
- 爆火的OpenClaw! 告别云端,米尔RK3576开发板本地部署
- Altera 与 Arm 深化合作,共筑 AI 数据中心高效可编程新方案
- 莱迪思加入英伟达 Halos生态系统,通过Holoscan传感器桥接技术提升物理人工智能安全性
- 芯科科技闪耀2026嵌入式世界展 以Connected Intelligence赋能,构建边缘智能网联新生态
- 边缘计算主机盒选购指南:五大核心指标解析
- Arm AGI CPU 更多细节:台积电 3nm 制程、Neoverse V3 微架构
- Arm AGI CPU 重磅发布:构筑代理式 AI 云时代的芯片基石
- Arm 拓展其计算平台矩阵,首次跨足芯片产品
- 阿里达摩院发布RISC-V CPU玄铁C950,首次原生支持千亿参数大模型
- 边缘 AI 加速的 Arm® Cortex® ‑M0+ MCU 如何为电子产品注入更强智能




