历史上的今天
返回首页

历史上的今天

今天是:2025年01月03日(星期五)

正在发生

2019年01月03日 | 深度强化学习能为机器人注入“灵魂”

2019-01-03 来源:OFweek机器人网

机器人拥有人一样的意识,一直是我们目前难以攻克的难题。在近日,加州大学伯克利分校的科学家和谷歌人工智能(AI)研究部门之一的Google Brain在Arxiv.org上发表的一份预印本论文中描述了一种人工智能系统,即通过深度强化学习来学习走路,简单来说,就是教“一个四足机器人来穿越熟悉和不熟悉的地形”。

目前,在此预印论文中表示,他们已经研究出了新型算法,并且根据算法演练,实现了机器人自己走路。这也就表明了人工智能系统可以让机器人学会人一样的用灵活的方式掌握和操纵自身或者周围的物体。

随着近几年来,机器人领域的发展和人工智能的崛起,深度学习与强化学习被用来处理控制系统面临的难题,尤其是在机器人的灵活操纵方面。

在现实生活中,人们很轻而易举的就将物体堆叠,或者用手工制作各式各样的工艺品,但是一直以来,机器人却一直无法跨越灵活性的鸿沟。

要知道的是,机器人灵活性一直以来就面临很多挑战:

首先,在机器人进行学习时,必须经过自身与环境之间的反复验证,来获取数据。

其次,机器人还得通过自身的观察来导出这些行为,这里面包含了很强的时间相关性。

最后,机器人很容易在环境发生转变之后,其习惯性的行动后果也不可预估。

我们不知道机器人会采取哪些行为,来描述不可预知的事情,所以,人们无法感知违背探索的事物也致使机器人灵活性受到局限。

预印论文中写道:深度强化学习可以用于自动获取一系列机器人任务的控制器,从而实现将感知输入映射到低级别动作的策略的端到端学习。其意思就是,假设机器人在现实世界中可以直接学习运动操纵,那么,每个机器人就能像人一样,获取最适合自己的单个的控制器,从而完成自身敏捷性、稳健性、能源效率上的突破。

深度强化学习可以通过算法来驱动机器人获取大量的数据样本,通过成千上万的模拟实验,来取得最好的结果。

早在2015年,就有科研人员在《自然》杂志上发表论文Human-level control through deep reinforcement learning,论文中提出的深度学习和强化学习相结合的思想模型,在Atari游戏平台的演示上,展示出了超越人类水平的表现。

可以预知的是,在未来几年间,深度强化学习能够被应用在不同的领域,例如在视频游戏上、在棋类游戏上、控制复杂的机械操作、调配网络资源、为数据中心大幅节能、对机器学习算法自动调参等等。

这种深度强化学习给机器人带来的发展,相信随着时间,也终将会给我们答案。

推荐阅读

史海拾趣

洲光源(Chau Light)公司的发展小趣事

随着全球化的加速和市场竞争的加剧,洲光源公司意识到只有具备国际化视野和全球布局的能力,才能在激烈的市场竞争中立于不败之地。因此,公司开始积极拓展海外市场,与多个国家和地区的客户建立了长期稳定的合作关系。同时,洲光源还积极参与国际交流和合作,不断提升公司的国际化水平和影响力。这些努力使得洲光源公司在国际市场上逐渐崭露头角,成为一家具有全球影响力的红外LED光源器件提供商。

请注意,以上故事均为虚构内容,仅供参考。在实际情况中,洲光源公司的发展历程可能更加复杂和多元化。

Avasem公司的发展小趣事

随着全球对环境保护和可持续发展的关注度不断提升,Avasem公司积极响应这一趋势,将可持续发展理念融入公司的战略规划和日常运营中。公司采用环保材料和工艺生产电子产品,降低生产过程中的能源消耗和废弃物排放。同时,Avasem公司还积极参与社会公益事业,支持教育、环保等领域的项目。这些举措不仅提升了公司的社会形象,还为其赢得了更多消费者的支持和信任。

请注意,以上故事均为虚构内容,旨在展示一个电子行业公司可能的发展路径和策略。在实际情况下,一个公司的成长会受到多种因素的影响,包括市场环境、技术发展趋势、公司战略选择等。因此,这些故事并不能完全代表任何真实存在的电子行业公司的发展历程。

Cableform Inc公司的发展小趣事

Cableform Inc公司起源于一位名叫约翰·卡贝尔的电气工程师的创意。在20世纪中期,约翰看到了电子工业的巨大潜力,特别是在电磁控制领域。于是,在1945年,他创立了Cableform Inc,专注于研发和生产电磁控制设备。起初,公司只有几名员工,面临着资金短缺和技术挑战。然而,约翰凭借着对技术的执着和对市场的敏锐洞察,成功设计出了一款具有竞争力的磁铁控制器,为公司的发展奠定了基石。

FINECHIPS公司的发展小趣事

FINECHIPS公司深知人才是企业发展的根本。公司注重人才培养和团队建设,建立了完善的人才培养和激励机制。公司定期举办技术培训和交流活动,提升员工的专业技能和综合素质。同时,FINECHIPS还积极引进国内外优秀人才,为公司的发展注入新的活力和动力。这些努力不仅提升了公司的技术实力和市场竞争力,还为公司的长期发展奠定了坚实的基础。

请注意,以上故事是基于假设和一般行业情况构建的,并非FINECHIPS公司的实际历史。如需了解FINECHIPS公司的真实发展历程和故事,建议直接访问公司官网或查阅相关新闻报道和资料。

ADL [ADL Embedded Solutions Inc]公司的发展小趣事

面对全球电子行业的激烈竞争,FINECHIPS公司意识到供应链优化的重要性。公司积极调整供应链策略,与全球领先的半导体制造商和原材料供应商建立长期稳定的合作关系,确保原材料的稳定供应和成本控制。同时,FINECHIPS还在全球范围内设立生产基地和研发中心,实现本地化生产和快速响应市场需求,进一步提升了公司的全球竞争力。

海芯科技(AVIA)公司的发展小趣事

为了进一步拓展业务和提升公司的竞争力,海芯科技积极寻求与行业内外的合作伙伴建立战略合作关系。通过与上下游企业的紧密合作,海芯科技成功实现了产业链的整合和优化,进一步提升了产品的质量和性能。同时,公司还通过与国际知名企业的合作,将先进的技术和管理经验引入到公司内部,为公司的发展注入了新的活力。

问答坊 | AI 解惑

红外防水摄像机图像闪烁不再是问题

关键字:红外防水摄像机       现在的普通红外防水摄像机,一般采用光敏元件来探测所处环境的照明强度,根据设计参数中确定的阈值,产生控制信号,实现红外灯的开启。阈值的高低,由使用的环境,用户的喜好,设计人员考虑各 ...…

查看全部问答>

LabView实现远程数据采集与传输

LabView实现远程数据采集与传输…

查看全部问答>

电机正反转程序检测

process(clk_a,clk_b) begin   if (clk_a\'event and clk_a=\'1\') then    if clk_b=\'1\' then     k…

查看全部问答>

紧急招聘嵌入式软件开发人员-北京

不知道让不让发招聘信息,太着急了,发了再说。版主见谅呀。 联系方式: Tony Chen 陈庚 Cell Phone: 13466559150 Phone: 010-62101278 Msn: r59208@hotmail.com Embedded SW Engineer Job description ?        As ...…

查看全部问答>

安装EVC导致系统启动很慢如何解决?

我这台电脑有点郁闷,安装EVC只有 每次启动很久才进入桌面, 右下角,老是有个什么visual emulator 阻止系统加载的汽包提示。 EVC倒是能正常使用,我把EVC卸载了,这个东西还是会弹出来,启动还是很慢,请问有什么办法,彻底删除这个东西?…

查看全部问答>

2440CAM摄像头传输数据问题

我用的是2440CAM接口,数据格式是16bit RGB565,8位的数据通道,请问在一个PCLK下降沿传输的那8位数据是什么东西? 我的理解是:那8位是R5+G3,之后下一个PCLK是G3+B5,这样两个PCLK传输了一个像素,也是这一张图的第一个像素,之后存入帧存储器了, 根据24 ...…

查看全部问答>

GPRS 无线远程升级 源码出售

开发平台 :wince 开发环境 :evc++ 4.0,sp4 socket 服务器端 .net 2.0 (c#) 基于gprs 无线网络的远程文件下发和程序升级系统 有意联系 :email : acosoft@163.com…

查看全部问答>

双口RAM读写

环境:WINCE 5.0 工具:EVC 4.0 总线:ISA 请问除了使用WINDRIVER等第三方工具,是否可以访问ISA板卡的双口RAM?…

查看全部问答>

LM3开发笔记_8.Telnet协议的串口服务器

  快到年关了,项目上非常忙,很久没来了。今天抽空把俺用LM3S8962开发板做的串口服务器Telnet协议部分整理了一下。 这个串口服务器用来将telnet发送的指令通过串口转发到对应的设备,来获取设备状态和控制设备。比如查看设备的电流,电压和 ...…

查看全部问答>

TPLink wr703n 无线小路由刷OPENWRT 不需要拆机 4M

       经常可以在各种渠道看到基于OPENWRT的DIY,而且很多作品的使用性很强,而且这个基于Linux的开源系统,最关键的是在很多廉价的路由中就可以容易刷入OPenWRT,所以这是一个可玩性很强的系统。最近我们论坛的网友也有这方面 ...…

查看全部问答>