面向工业机器人领域，针对柔性定制作业研究深度视觉感知与理解关键技术。智能视觉感知与理解系统能够快速自主适应不同种类图像目标的识别、跟踪、检测等任务；不需复杂繁琐的编程方式来设置指令，可快速感应、学习并模仿人类，在工业机器人中将被广泛采用。
小Q机器人融合了互联网技术和智能机器人技术，是中国科学院与腾讯公司重大战略合作项目，依靠强大的技术平台，通过与腾讯QQ的整合，以生动的表情肢体动作、语音互动、行为学习等方式，丰富和拓展了人们的在线生活，并使智能机器人走进千家万户，真正成为人们的在线生活伴侣，主要功能包括： 仿生互动：小Q拥有当下完整的基础仿生体系，拥有“微米级”高精度体感装置——搭配智能摄像头，对于人的语音、触摸、指令等均有流程的互动回应，同时其头部、翅膀、眼睛的灵活互动能让用户充分感受到智能宠物所带来的不同体验！ 语音操控：小Q的智能系统可以在中文环境下得到充分发挥，让用户体验智能时代的语音控制。用户通过发出语音操控指令，小Q随之互动给予反应，时时刻刻为用户带来小惊喜！ 远程传情：小Q是QQ的真实宠物体，化身小Q以真实的语音对话为基础进行即时语音消息提醒，便捷的智能语音输入转化为文字在线聊天，同时小Q还可以将表情真实立体的通过眼睛表现出来，使用户QQ聊天更加便捷，体验化身带来的真实感！ 动感音响：小Q拥有良好的SRS智能系统环绕音响，在互联音乐上首次达成了宠物触摸语音控制——让一个手势和一句歌名就能满足用户随时享受音乐的意愿。不仅如此，小Q还可以随着音乐节拍舞动！ 更多
自主研发的微型互动投影Q影，是全球首创光控是移动投影仪。Q影是投影画面16：9，采用DLP技术，使其只有拳头大小的机身可以投影超过120英寸的影像。Q影与普通微型投影仪最大的领先优势在于——Q影拥有独特的互动技术，能够感知配套的触控笔或遥控笔操作。用户可使用触控笔在投影画面上直接点触操作，比如涂鸦作画、修改PPT、电子书备注、浏览网页、玩网页游戏等，让任何一个屏幕成为触摸屏；使用遥控笔可以模拟鼠标操作，实现远程操作。 Q影配备的光学触控笔，能在投影平面进行互动，操作分辨率高达32002400，显示倍数高达20倍。同时Q影配备的远距光控笔，采用半导体激光技术，可以带来完美线性光控反馈。光控笔分辨率高达25601920，并设置了单双击操作，控制定位精度1个像素，响应时间小于40ms，隔空与投影画面进行互动，体验游戏带来的快感。Q影支持连接苹果、安卓系统设备，可无缝结合支持家庭影院设备Apple TV以及小米盒子。 更多
计算机视觉（Computer Vision）又称为机器视觉（Machine Vision），顾名思义是一门“教”会计算机如何去“看”世界的学科。在机器学习大热的前景之下，计算机视觉与自然语言处理（Natural Language Process， NLP）及语音识别（Speech Recognition）并列为机器学习方向的三大热点方向。而计算机视觉也由诸如梯度方向直方图（Histogram of Gradient， HOG）以及尺度不变特征变换（Scale-Invariant Feature Transform， SIFT）等传统的手办特征（Hand-Crafted Feature）与浅层模型的组合逐渐转向了以卷积神经网络（Convolutional Neural Network， CNN）为代表的深度学习模型。 计算机视觉本身又包括了诸多不同的研究方向，比较基础和热门的几个方向主要包括了：物体识别和检测（Object Detection），语义分割（Semantic Segmentation），运动和跟踪（Motion & Tracking），三维重建（3D Reconstruction），视觉问答（Visual Question & Answering），动作识别（Action Recognition）等
五金制品广泛应用于工业、农业和人们生活的各个领域，当前五金行业市场需求变化迅速，例如在餐厨具和办公家具文具等个性化产品定制领域。传统生产模式自动化水平低，难以应对小批量、多批次的快速产线切换需求，亟需提升柔性化和智能化水平。本项目紧跟“中国制造 2025”国家重要战略步伐，紧密结合国内五金行业的重大需求和国际机器人前沿技术，通过理论研究、技术研发、应用单元研制与示范应用，研发具有自主知识产权的多品种多工艺五金件柔性生产线并起到示范作用，全面提升我国五金行业的智能化制造水平。 本项目主要面向五金行业多工艺多工序的特点，通过理论研究、技术研发和应用示范，解决五金件柔性制造的作业资源布局优化与多机器人协同作业优化、多品种异形五金件机器人制造加工的工艺优化与控制两个关键科学问题，突破五金行业机器人柔性化智能生产线的数字化建模仿真和布局优化、五金制造过程的多机器人自组织协作与柔性车间调度、五金件刚柔耦合夹持与抛光力位控制强化学习优化、多样化五金件三维重建及RGB-D图像检测识别和多工艺多机器人协作及柔性化智能生产线集成五个关键技术，构建具有自主知识产权的机器人制造加工与物流系统并应用于两类生产线的数字化工厂，实现多工艺多工序国产机器人在五金餐厨具和办公家具文具两类柔性化智能生产线中的批量应用示范。
V2.6爱动感应器内置一颗idong100图像处理芯片，能够精确识别标识点在三维空间内的位置，提供其坐标和运动轨迹。基于应用层界面设计，爱动感应器可为基于Windows、Linux或Android的消费电子设备提供空中鼠标、虚拟触摸屏、手势控制、体感游戏等多种人机交互方案支持。同时，支持爱动游戏，可以在于Windows、Linux或Android上运行。 我们可直接提供感应器成品，在Android系统下即插即用，实现了极好的稳定性和通用性。同时我们也提供Open BOM的方式，让客户自行设计外观和生产，各种功能模块可按需定制，灵活搭配，以支撑不同的业务应用和产品定位。 更多
随着机器人技术的快速发展，家庭服务机器人逐渐走进了普通家居生活。人机交互技术，作为一项关键技术已成为机器人领域的研究热点，即用户以何种方式实现与机器人之间的交流与控制。本项目针对家庭服务机器人的人机交互需求，系统地研究了人-机信息感知和反馈方法，实现人与机器人的自然交互，主要功能包括： 下棋功能：投影仪投射数字棋盘，例如“五子棋”或“象棋”，通过视觉识别人手和机器手指的空间位置，驱动机器手沿着规划路径运动到指定位置，实现人与机器对弈 猜拳功能：用户与机器手同时出拳，例如，“石头”、“剪刀”或“布”，同时，机器人识别人手的状态，判断结果，并通过语音输出，实现猜拳互动
本项目通过理论和实验研究，开发了基于纹理光投射的双目立体视觉系统，并提出了一种基于相邻点的数字散斑快速搜索方法，该方法有效地提高了数据的利用率，灵活地避免了复杂运算。根据测量点的误差特征，提出了距离加权邻域平均法，显著地提高了测量精度并得到了非常好的测量结果。实验证明所提方法能快速、有效地测量物体的深度信息。
基于深度图像的人体姿态估计与动作识别，可融合时空信息、深度图像信息、以及加速度等其他传感信号，通过提取不同维度上的特征，采用深度神经网络的分类方法，实现快速鲁棒的大规模动作识别，同时便于通过增量学习的方法不断扩展待识别动作的类别。本项目在多种信息融合实现大规模的动作类别识别理论上有所创新，研究成果可应用于增强现实、机器人、智能终端等多种人机交互场景。
AOI不但可对焊接质量进行检验，还可对光板、焊膏印刷质量、贴片质量等进行检查。各工序AOI的出现几乎完全替代人工操作，对提高产品质量、生产效率都是大有作为的。AOI通过摄像头自动采集PCB图像，测试焊点与数据库中合格参数比较，检查出缺陷，并通过显示器或自动标志把缺陷显示、标示出来，方便维修。本项目设计的AOI平台，针对半导体产品表面反射特性不均匀，提出创新的方法来完成晶圆、PCB等的二维和三维检测。
在家电产品生产中，框架板材经常出现外观缺陷，严重影响了喷漆后表面的美观性。因此，板材冲压件在喷漆之前，需要检测其表面的缺陷分布，以确保最终的家电外观质量。在现有检测技术中，光学检测具有判断准确、快速、稳定性高的优点，为表面缺陷的实时检测提供了解决方案。本项目采用三组彩色光源和CCD相机组成的模块高速抓拍冲压件表面图像，并将其传输到分布式硬件处理单元，经相关图像算法处理后，得到冲孔位置数据和冲压件表面异常数据，并判断缺陷类型及其所在区域。本项目系统已交付企业使用，克服了人工目检时存在的检测速度慢、准确率低等缺点，能满足自动化生产需求。由于该检测系统兼具成本和效率优势，可面向自动化生产的家电企业，起到改善产品质量控制的作用，进而获得更多的市场份额，创造更优的品牌价值。
本项目面向我市移动终端制造业的需求，将研发工业视觉在产品表面缺陷检测系统中关键技术，实现高度集成的智能化表面缺陷检测设备。项目的顺利实施将提升我市在高端检测成套设备领域的自主创新能力，打破欧美、日本在该领域的垄断局面，从而推动深圳智能制造技术水平的突破，引领相关行业的产业升级，提高企业面对诸多因素导致的用工荒时的抗风险能力
