历史上的今天
今天是：2024年08月27日（星期二）
2020年08月27日 | Socionext联手大阪大学正在开发新型深度学习算法
2020-08-27 来源：EEWORLD
SoC设计与应用技术领导厂商Socionext Inc.（以下“Socionext”，或“公司”）宣布，联合大阪大学数据能力科学研究所长原教授研究小组共同开发新型深度学习算法，该算法无需制作庞大的数据集，只需通过融合多个模型便可在极度弱光的条件下进行精准检测物体及图像识别。Socionext笹川幸宏先生和大阪大学长原教授在8月23日至28日（英国夏令时间）举办的欧洲计算机视觉国际会议（ECCV 2020）上报告了这一研究成果。
近年来尽管计算机视觉技术取得了飞速发展，但在低照度环境下车载摄像头、安防系统等获取的图像质量仍不理想，图像辨识性能较差。不断提升低照度环境下图像识别性能依旧是目前计算机视觉技术面临的主要课题之一。CVPR2018中一篇名为《Learning to See in the Dark》[1]的论文曾介绍过利用图像传感器的RAW图像数据的深度学习算法，但这种算法需要制作超过200,000张图像和150多万个批注 [2]数据集才能进行端到端学习，既费时又费钱，难以实现商业化落地（如下图1）。
图1：《Learning to See in the Dark》及RAW 图像识别课题
为解决上述课题，Socionext与大阪大学联合研究团队通过迁移学习（Transfer Learning）和知识蒸馏（Knowledge Distillation）等机器学习方法，提出采用领域自适应（Domain Adaptation）的学习方法，即利用现有数据集来提升目标域模型的性能，具体内容如下（如图2）：
（1）使用现有数据集构建推理模型；
（2）通过迁移学习从上述推理模型中提取知识；
（3）利用Glue layer合并模型；
（4）通过知识蒸馏建立并生成模型。
图2：本次开发的领域适应方法（Domain Adaptation Method）
此外，结合领域自适应方法和物体检测YOLO模型[3]，并利用在极端弱光条件下拍摄的RAW图像还可构建“YOLO in the Dark”检测模型。YOLO in the Dark模型可仅通过现有数据集实现对RAW图像的对象检测模型的学习。针对那些通过使用现有YOLO模型，校正图像亮度后仍无法检测到图像的（如下图a），则可以通过直接识别RAW图像确认到物体被正常检测（如下图b）。同时测试结果发现，YOLO in the Dark模型识别处理时所需的处理量约为常规模型组合（如下图c）的一半左右。
本次利用领域自适应法所开发的“直接识别RAW图像”可不仅应用于极端黑暗条件下的物体检测，还可应用于车载摄像头、安防系统和工业等多个领域。未来，Socionext还计划将该技术整合到公司自主研发的图像信号处理器（ISP）中开发下一代SoC，并基于此类SoC开发全新摄像系统，进一步提升公司产品性能，助力产业再升级。
史海拾趣
|
传统的灯泡都是使用钨丝，这款灯泡则是巧妙的将钨丝替换成了LED灯珠。用传统的外表来包括现代的科技也是近来比较流行的一种设计思路。由于是用LED来提供光源的，因此这种灯泡的节能性快要远远优于传统的产品，乃是复古中的时尚呀！ … 查看全部问答＞ |
|
本帖最后由 paulhyde 于 2014-9-15 08:56 编辑 “英飞凌杯”第四届全国嵌入式处理器设计应用大奖赛 英飞凌科技有限公司简介 总部位于德国Neubiberg的英飞凌科技股份公司， 为现代社会的三大科技挑战领域——高能效、连通性和安全性提供半导体和 ...… 查看全部问答＞ |
|
无线结帐是很多小店铺、超市的梦想。如果这种技术得以实现，大家在现实世界中结帐就会像上淘宝一样方便，周末黄金时段超市出口排起的结帐长龙将再也不见身影。 一种新的可打印标签正将其一步步付诸实际。RFID标签技术可以把物品的简要信息打 ...… 查看全部问答＞ |
|
打印B超图像100%的时候，图像正常打印， 现需要放大150%，使用手动写插值，可以实现放大功能,但缺点就是慢了好多,方法如下: 800X576的图像ScreenBuffer，放大1.5倍，每两个字节中间插一个，需要插(800X576)/2个字节,这样打印速度就慢了. 本人把 ...… 查看全部问答＞ |
|
在mobile在用mapirule拦截短信时，如何拦截到二进制短信息 用mapirule可以拦截文本短消息，但是我要拦截二进制短信息，通过二进制串中的某个字段来判断是不是我们的短信息，如果实现，万分感谢！万分感谢！万分感谢！万分感谢！ 同时想问一下vc开发如何发二进制短信息，我用SmsSendMessage可以发文本短信息 ...… 查看全部问答＞ |
|
我在点击开始菜单中的SUSPEND后，系统不能挂起。DEBUG时不能进入函数 KCall ((FARPROC) CallOEMPowerOff)（文件Kwin32.c中）;系统直接往下运行。 因为CallOEMPowerOff函数调用的是OEMPowerOff(),而这个函数是系统挂起的关键函数，所以SUSPEND失败 ...… 查看全部问答＞ |
|
所谓安全距离，就是为保护人在使用电子产品的时候，危险电压带电部分与人不能轻易接 触到，也不能让它来引起危险导致威胁人身安全。 因此必须在一般情况下，安全距离是在产品设计中最重要的部分之一。检查安全距离从设 计阶段开始。结构检查人员 ...… 查看全部问答＞ |