北京航空航天大学：《数字图像处理》课程教学资源（讲稿）基于流形学习的多视角目标识别 Lecture notes for Digital Image Processing-upload

北京航空航天大学 B E I H A N G U N I VERS I TY 数字图像处理裸程 基于流形学习的多视角目标识别 Multi-View Object Recognition Based on Manifold Learning 张浩鹏 宇航学院图像处理中心 zhanghaopeng@buaa.edu.cn 2014年12月

基于流形学习的多视角目标识别 Multi-View Object Recognition Based on Manifold Learning 张浩鹏 宇航学院图像处理中心 zhanghaopeng@buaa.edu.cn 2014年12月 数字图像处理课程

北京航空航天大学 Outl ine 1图像特征描述概述 2目标识别概述 3流形学习概述 4应用实例：多视角目标识别 2014/12/31 的北京航空航天大学数字图傣处理课程

北京航空航天大学数字图像处理课程 Outline 2 2014/12/31 1 图像特征描述概述 2 目标识别概述 3 流形学习概述 4 应用实例：多视角目标识别

北京航室航天大学 0.0图像处理技术应用实例 准实时桌面 We use Point Cloud Library (PCL)for: Kinect point cloud capture Real-time Object depth segmentation We achieve close to real-time category 分类系统 recognition using our Homeomorphic Manifold Approach 2014/12/31 北京航空航天大学数字图像处理课程

3 2014/12/31 北京航空航天大学数字图像处理课程 准 实 时 桌 面 物 体 分 类 系 统 0.0 图像处理技术应用实例

北京航室航天大学 0.1视点变化难题 ·视点变化是目标识别技术面临的一个难点问题 长 人脑对三维物体的描述形式与视点有关 2014/12/31 北京航空航天大学数字图像处理课程

0.1 视点变化难题 • 视点变化是目标识别技术面临的一个难点问题 人脑对三维物体的描述形式与视点有关 4 2014/12/31 北京航空航天大学数字图像处理课程

CA 北京航室航天大学 0.2研究对象 多视角目标识别 目标检测 类别识别 实例识别 视点识别 object category instance viewpoint detection recognition recognition recognition 类别识别 实例识别 视点识别 mug or bottle? Whose mug? Where is the handle? 5 2014/12/31 北京航空航天大学数字图像处理裸程

0.2 研究对象 多视角目标识别 目标检测 object detection 类别识别 category recognition 实例识别 instance recognition 视点识别 viewpoint recognition mug or bottle? Whose mug? Where is the handle? 类别识别 实例识别 视点识别 5 2014/12/31 北京航空航天大学数字图像处理课程

北京航室航天大学 0.3研究范畴 特征描 计算机视 觉与机器 学习 流形学 目标识 习 别 6 2014/12/31 北京航空航天大学数字图像处理课程

0.3 研究范畴 计算机视 觉与机器 学习 特征描 述 目标识 别 流形学 习 6 2014/12/31 北京航空航天大学数字图像处理课程

北京航室航天大学 1.1图像特征描述的定义 ·图像特征（feature) ·像素的灰度值或颜色向量以及像素坐标 像特征描述 ·颜色、形状、区域、纹理等 ·图像描述（description or representation) ·对原始采集图像的初步抽象，通过描述图像 特征的描述子(descriptor)表示 2014/12/31 北京航空航天大学数字图像处理课程

1.1 图像特征描述的定义 • 图像特征（feature） • 像素的灰度值或颜色向量以及像素坐标 • 颜色、形状、区域、纹理等 • 图像描述（description or representation） • 对原始采集图像的初步抽象，通过描述图像 特征的描述子（descriptor）表示 7 2014/12/31 北京航空航天大学数字图像处理课程 图 像 特 征 描 述

北京航室航天大学 1.2常用图像特征描述类别 ·颜色描述 直方图类颜色描述(GB直方图、色调直方图等)、颜色矩 和颜色不变矩、Color SIFT ·形状描述 ·边缘和轮廓(Canny3算子、链码等)、不变矩(Hu矩、Zernike 矩等)、傅立叶描述子 ·局部区域描述 ·SlFT、Affine-Harris、Daisy、HOG ·纹理描述 ·灰度共生矩阵、LBP、Gabor、.Haar、分形 2014/12/31 北京航空航天大学数字图像处理课程

1.2 常用图像特征描述类别 • 颜色描述 • 直方图类颜色描述（RGB直方图、色调直方图等）、颜色矩 和颜色不变矩、Color SIFT • 形状描述 • 边缘和轮廓（Canny算子、链码等）、不变矩（Hu矩、Zernike 矩等）、傅立叶描述子 • 局部区域描述 • SIFT、Affine-Harris、Daisy、HOG • 纹理描述 • 灰度共生矩阵、LBP、Gabor、Haar、分形 8 2014/12/31 北京航空航天大学数字图像处理课程

北京航室航天大学 1.3图像特征描述技术研究现状 ·图像描述 ·常用描述子：SIFT及其扩展、HOG、LBP及其改进、不变矩等 ·研究趋势：局部描述方式占主流，结合具体应用进行改进 ·针对具体的识别问题，对于不同目标，可以有不同的特征及描述 米 P=l2R=.5 因size (Ce 9 2014/12/31 北京航空航天大学数字图像处理裸程

1.3 图像特征描述技术研究现状 • 图像描述 • 常用描述子：SIFT及其扩展、HOG、LBP及其改进、不变矩等 • 研究趋势：局部描述方式占主流，结合具体应用进行改进 • 针对具体的识别问题，对于不同目标，可以有不同的特征及描述 9 2014/12/31 北京航空航天大学数字图像处理课程

北京航室航天大学 2.1目标识别问题 目标检测object detection 类别识别category recognition 实例识别 instance recognition 10 2014/12/31 北京航空航天大学数字图像处理课程

2.1 目标识别问题 目标识别 目标检测 object detection 类别识别 category recognition 实例识别 instance recognition 10 2014/12/31 北京航空航天大学数字图像处理课程