首页
产品系列
行业应用
渠道合作
新闻中心
研究院
投资者关系
技术支持
关于创泽
| En
 
  当前位置:首页 > 新闻资讯 > 机器人开发 > 机器人的视觉传感技术,从二维图像中理解和构造出三维世界的真实模型  
 

机器人的视觉传感技术,从二维图像中理解和构造出三维世界的真实模型

来源:视觉传感技术      编辑:创泽      时间:2025/12/17      主题:其他   [加盟]

①视觉传感系统组成 装配过程中,机器人使用视觉传感系统可以解决零件平面测量、 字符识别. (文字、条码、符号等)、完善性检测、表面检测(裂纹、刻痕、纹理)和三维测 量。类似人的视觉系统,机器人的视觉系统是通过图像和距离等传感器来获取环境对象的图像、颜色和距离等信息,然后传递给图像处理器,利用计算机从二维图像中理解和构造出三维世界的真实模型。

图6-27所示为机器人视觉传感系统的原理。摄像机获取环境对象的图像,经 A/D 转 换 器转换成数字量,从而变成数字化图形。通常一幅图像划分为512×512或者256×256,各 点亮度用8位二进制表示,即可表示256个灰度。图像输入以后进行各种处理、识别以及理解,另外通过距离测定器得到距离信息,经过计算机处理得到物体的空间位置和方位;通过 彩色滤光片得到颜色信息。上述信息经图像处理器进行处理,提取特征,处理的结果再输出 到机器人,以控制它进行动作。另外,作为机器人的眼睛不但要对所得到的图像进行静止处 理,而且要积极地扩大视野,根据所观察的对象,改变眼睛的焦距和光圈。因此,机器人视 觉系统还应具有调节焦距、光圈、放大倍数和摄像机角度的装置。

②图像处理过程 视觉系统先要做的工作是摄入实物对象的图形,即解决摄像机的 图像生成模型。包含两个方面的内容:一是摄像机的几何模型,即实物对象从三维景物空间 转换到二维图像空间,关键是确定转换的几何关系;二是摄像机的光学模型,即摄像机的图 像灰度与景物间的关系。由于图像的灰度是摄像机的光学特性、物体表面的反射特性、照明 情况、景物中各物体的分布情况(产生重复反射照明)的综合结果,所以从摄入的图像分解 出各因素在此过程中所起的作用是不容易的。

视觉系统要对摄入的图像进行处理和分析。摄像机捕捉到的图像不一定是图像分析程序 可用的格式,有些需要进行改善以消除噪声,有些则需要简化,还有的需要增强、修改、分 割和滤波等。图像处理指的就是对图像进行改善、简化、增强或者其他变换的程序和技术的 总称。图像分析是对一幅捕捉到的并经过处理后的图像进行分析、从中提取图像信息、辨识 或提取关于物体或周围环境特征。

③Consight-I视觉系统 图6-28所示 Consight-I视觉系统,用于美国通用汽车公司的 制造装置中,能在噪声环境下利用视觉识别抓取工件。

该系统为了从零件的外形获得准确、稳定的识别信息,巧妙地设置照明光,从倾斜方向 向传送带发送两条窄条缝隙光,用安装在传送带上方的固态线性传感器摄取图像,而且预先 把两条缝隙光调整到刚好在传送带上重合的位置。这样,当传送带上没有零件时,缝隙光合 成了一条直线,可是当零件随传送带通过时,缝隙光变成两条线,其分开的距离同零件的厚 度成正比。由于光线的分离之处正好就是零件的边界,所以利用零件在传感器下通过的时间 就可以取出准确的边界信息。主计算机可处理装在机器人工作位置上方的固态线性阵列摄像 机所检测的工件,有关传送带速度的数据也送到计算机中处理。当工件从视觉系统位置移动 到机器人工作位置时,计算机利用视觉和速度数据确定工件的位置、取向和形状,并把这种 信息经接口送到机器人控制器。根据这种信息,工件仍在传送带上移动时,机器人便能成功地接近和拾取工件。





机器人的工件识别传感器:接触识别、采样式测量、邻近探测、距离测量、机械视觉识别

接触识别这种测量一般精度不高;采样式测量如测量某一目标的位置、方向和形状;距离测量测量某一目标到某一基准点的距离;机械视觉识别测量某一目标相对于一基准点的位置方向和距离

机器人的柔性腕力传感器:检测末端执行器所受外力/力矩的大小和方向

腕力传感器安装在机器人手臂和末端执行器之间,更接近力的作用点,准确地检测末端执行器所受外力/力矩的大小和方向,为机器人提供力感信息,扩展了机器人的作业能力

机器人位姿传感器:6个电涡流传感器组成的特定空间结构

6个传感器构成三维测量坐标系, 其中传感器1、2、3对应测量面 xOy, 传感器4、5对应测量面 xOz, 传感器6对应测量面 yOz 。 每个传感器在坐标系中的位置固定,这6个传感器所标定的测量范围就是该测量系统 的测量范围

机器人轨迹规划的基本原理

以两自由度机器人为例,将机器人操作臂两个关节的运动用一个公共因子做归一化处理,使其运动范围较小的关节运动成 比例地减慢,这样可使得两个关节能够同步开始和 同步结束运动

机器人操作臂动力学方程系数的简化

机器人动力学的显式状态方程,可用来分析和设计高级的关节变量空间的控制策略,给定力和力矩,用动力学方程求解关节的加速度,再积分求得速度及广义坐标

WebSocket在实时对话中存在关键缺陷:数据包丢失或延迟,破坏对话流畅性

WebSocket 基于 TCP 协议,其可靠传输机制在实时媒体流中反而成为瓶颈,会导致单个数据包丢失或延迟时,对于对话式 AI 需连续交互的场景,此问题会显著破坏对话流畅性

机器人互动如何做好上下文:短期记忆,固化和注入长期记忆:

通过结构化短期记忆+动态长期记忆注入,在保障兼容性的同时,针对实时语音交互场景进行深度优化,并赋予开发者高度灵 活的上下文控制权限

机器人的动力学:拉格朗日法

拉格朗日函数L被定义为系统的动能K 和势能P 之差,即 L=K 一P 式中 K—— 机器人手臂的总动能,P—— 机器人手臂的总势能,机器人系统的拉格朗日方程为

机器人的自由度,直接影响到机器人的机动性

自由度是机器人的一个重要技术指标,它是由机器人的结构决定的,并直接影响到机器人的机动性;机器人机械手的手臂具有三个自由度,其他的自由度数为末端执行装置所具有

机器人系统的结构:机械手、环境、任务 和控制器

机械手是具有传动执行装置的机械,它由臂、关节和末端执行装置(工具等)构成,组合为一个互相连接和互相依赖的运动机构;机器人接收来自传感器的信号产生出控制信号去驱动机器人的各个关节

商用服务机器人控制系统的组成:任务规划,动作规划,轨迹规划

前台接待机器人的控制系统由“任务规划” “动作规划”“轨迹规划”和基于模型的 “伺服控制”等多个层次组成,机器人针对各个任务进行动作分解,实现机器人的一系列动作

智能交互机器人的主要部件选型参考方案:伺服电机,减速机和减速齿轮,陀螺仪

伺服电机的转动速度、扭矩、反馈信号频率和额定电压等参数是整个机器人控制系统的决定性因素之一;减速机和减速齿轮降低电机的转动速度,加大输出扭矩
 
资料获取
新闻资讯
== 资讯 ==
» 机器人的电子鼻工作原理:特定气味会产生电
» 智能机器人的声源定位方法:头部相关联函数
» 机器人非特定人语音识别流程:幅度检测,过
» 机器人特定人语音识别系统判别的基本方法:
» 机器人语音识别主要模式:频谱图法,LPC
» 机器人图像处理的几种方法:点运算、图像增
» 机器人如何看到物体:由硬件图像采集和软件
» 机器人如何规划行走路线:全局规划方法,局
» 机器人应用的趋势:垂直化、工艺化、多样化
» 协作机器人的中国市场格局:初具雏形,未完
» 中国协作机器人市场前景:高速稳步增长,未
» 协作机器人市场的发展历程:起步期、调整期
» 机器人的安全解决方案:力感知方案,轻量化
» 机器人的视觉解决方案:2D视觉和 3D
» 协作机器人与人形机器人的发展关系:应用领
 
== 机器人推荐 ==
 
迎宾讲解服务机器人

服务机器人(迎宾、讲解、导诊...)

智能消毒机器人

智能消毒机器人

机器人底盘

机器人底盘

 

商用机器人  Disinfection Robot   展厅机器人  智能垃圾站  轮式机器人底盘  迎宾机器人  移动机器人底盘  讲解机器人  紫外线消毒机器人  大屏机器人  雾化消毒机器人  服务机器人底盘  智能送餐机器人  雾化消毒机  机器人OEM代工厂  消毒机器人排名  智能配送机器人  图书馆机器人  导引机器人  移动消毒机器人  导诊机器人  迎宾接待机器人  前台机器人  导览机器人  酒店送物机器人  云迹科技润机器人  云迹酒店机器人  智能导诊机器人 
版权所有 © 创泽智能机器人集团股份有限公司     中国运营中心:北京·清华科技园九号楼5层     中国生产中心:山东日照太原路71号
销售1:4006-935-088    销售2:4006-937-088   客服电话: 4008-128-728