基于Aforge的手势识别之二~~~单点手势识别

本文来自http://blog.youkuaiyun.com/hellogv/ ，引用必须注明出处！

       本文把Aforge的运动识别与前面介绍的手写识别融合在一起，实现单个手指的手势识别。下图演示了本文代码运行的结果，图片有点大，请稍候。。。

       我预先让程序学习了B和C这两个字母，然后通过手指的手势识别向程序绘画图形，所以点击recorgize时，就自动把图形的特征对应的字母给识别出来了。

      这个例子关键部分在于如何灵活运用Aforge的运动识别，如何判断是要画图，还是普通的移来移去呢？在这里，我判断移动对象的大小，当突然面积增大(即两个指套合并)则开始绘图(手势识别的开始)，当拆开再合并则为解除绘图(手势识别的结束)，说白了就是用一个当前状态=!当前状态去做。

      本文的代码可以到这里下载：http://download.youkuaiyun.com/source/2313846

      下面贴出运动判断的核心代码：

private void videoSourcePlayer1_NewFrame( object sender, ref Bitmap image ) { nowImg = (Bitmap)image.Clone(); Bitmap objectImage = colorFilter.Apply( image ); // lock image for further processing BitmapData objectData = objectImage.LockBits( new Rectangle( 0, 0, image.Width, image.Height ), ImageLockMode.ReadOnly, image.PixelFormat ); // grayscaling UnmanagedImage grayImage = grayFilter.Apply( new UnmanagedImage( objectData ) ); // unlock image objectImage.UnlockBits( objectData ); // locate blobs blobCounter1.ProcessImage( grayImage ); List<Rectangle> rects = new List<Rectangle>(); rects.AddRange(blobCounter1.GetObjectsRectangles()); if ( rects.Count >0 ) { #region 去掉内部和黏在一起的对象 for (int i = 0; i < rects.Count - 1; i++) { //true表示X轴上不能相交，false表示相交 Boolean isNoTouchX = Math.Max(rects[i + 1].Right , rects[i].Right) - Math.Min(rects[i + 1].Left ,rects[i].Left) > (rects[i].Width + rects[i + 1].Width); //true表示Y轴上不能相交，false表示相交 Boolean isNoTouchY = Math.Max(rects[i + 1].Bottom, rects[i].Bottom) - Math.Min(rects[i + 1].Top, rects[i].Top) > (rects[i].Height + rects[i + 1].Height); if (isNoTouchX == false && isNoTouchY == false)//如果两个对象相交 { Rectangle rect = new Rectangle(Math.Min(rects[i].Left, rects[i + 1].Left), Math.Min(rects[i].Top, rects[i + 1].Top), Math.Max(rects[i].Right, rects[i + 1].Right) - Math.Min(rects[i].Left, rects[i + 1].Left), Math.Max(rects[i].Bottom, rects[i + 1].Bottom) - Math.Min(rects[i].Top, rects[i + 1].Top)); rects.RemoveAt(i + 1); rects.RemoveAt(i); rects.Add(rect); i = 0; } } #endregion #region 画出表示点 Rectangle objectRect = rects[0]; int oldSize=oldRect.Width+oldRect.Height; int nowSize=rects[0].Width+rects[0].Height; if (nowSize > (oldSize * 1.2))//如果突然变大，即两个指套合并 { isCapture =!isCapture; clsHandWrite.Clear(); } Graphics g = Graphics.FromImage(image); if (isCapture)//如果捕捉到对象 { Pen pen = new Pen(Color.FromArgb(255, 0, 0), 3); g.DrawRectangle(pen, objectRect); int x = (objectRect.Left + objectRect.Width / 2) * pbDraw.Width / videoSourcePlayer1.Width; int y = (objectRect.Top + objectRect.Height / 2) * pbDraw.Height / videoSourcePlayer1.Height; clsHandWrite.Draw(x,y ); } else//如果没有捕捉到对象 { Pen pen = new Pen(Color.FromArgb(160, 255, 160), 3); g.DrawRectangle(pen, objectRect); } g.Dispose(); #endregion oldRect = rects[0]; } UpdateObjectPicture(objectImage ); }