此次iOS5的一个新特性就是提供了人脸检测的API,这也是被媒体关注的一个功能,基本上,我看到的报道都是说iOS5提供了人脸识别的功能,然后又是设想要通过人脸来实现解锁屏幕等等,如何如何的。一开始,我也以为iOS5确实提供了这样的功能,这意味着可能不用opencv等静态库来实现了,免去了一旦OS版本升级要重新编译静态库的麻烦。研究了几天,发现并不是这么回事:
首先,此次iOS5提供的人脸检测API是Core Image这个Framework中,Core Image实际上在Mac OS下早就有了,只不过这次才引入到iOS5中。但是,apple还是比较谨慎的,并没有引入Core Image所有的功能到iOS下,只是提供了少数的API而已,而且可以看出基本都是对系统性能要求不怎么高的功能,可能apple对手机上做图像处理的性能问题还是有些顾虑的。例如,Core Image下图形处理的上百个filter,到了iOS下就只剩下20来个了,关键的轮廓提取,高斯模糊等filter都没有提供,很多复杂的处理都无法直接用Core Image来实现。但我相信随着iOS设备硬件性能的不断提上,开放所有的功能应该是迟早的事。
其次,谈谈人脸识别。严格的说,此次提供的API并不能叫人脸识别(face recognition),只能叫人脸检测(face detection),这二者在图像处理领域是有很大差别的,作用和实现难度都是天差地别。简单的说,人脸检测就是检测出图像中是否包含人脸,此次apple提供的API就是这个功能,可以给你指出图像中每一个人脸的位置,还有人脸中眼见、嘴巴的位置。而人脸识别则是更加高级的技术,可以告诉你几张照片中的人是不是同一人。是不是觉得在哪见过,没错,就是iPhoto里提供的功能。对apple来说,这样的技术也应该不是什么难事,关键是什么时候可以开放给开发者的问题了。
最后,当然要谈谈怎么用了。具体的使用,其实很简单,看看后面的代码你就明白了,如果要实现一些高级的应用,目前来说可能还得结合opencv或image-processing等开源的处理库来用。但如果只是简单的人脸检测,Core Image的效率就我个人感觉来说,还是很不错的,不比opencv的差。
首先,此次iOS5提供的人脸检测API是Core Image这个Framework中,Core Image实际上在Mac OS下早就有了,只不过这次才引入到iOS5中。但是,apple还是比较谨慎的,并没有引入Core Image所有的功能到iOS下,只是提供了少数的API而已,而且可以看出基本都是对系统性能要求不怎么高的功能,可能apple对手机上做图像处理的性能问题还是有些顾虑的。例如,Core Image下图形处理的上百个filter,到了iOS下就只剩下20来个了,关键的轮廓提取,高斯模糊等filter都没有提供,很多复杂的处理都无法直接用Core Image来实现。但我相信随着iOS设备硬件性能的不断提上,开放所有的功能应该是迟早的事。
其次,谈谈人脸识别。严格的说,此次提供的API并不能叫人脸识别(face recognition),只能叫人脸检测(face detection),这二者在图像处理领域是有很大差别的,作用和实现难度都是天差地别。简单的说,人脸检测就是检测出图像中是否包含人脸,此次apple提供的API就是这个功能,可以给你指出图像中每一个人脸的位置,还有人脸中眼见、嘴巴的位置。而人脸识别则是更加高级的技术,可以告诉你几张照片中的人是不是同一人。是不是觉得在哪见过,没错,就是iPhoto里提供的功能。对apple来说,这样的技术也应该不是什么难事,关键是什么时候可以开放给开发者的问题了。
最后,当然要谈谈怎么用了。具体的使用,其实很简单,看看后面的代码你就明白了,如果要实现一些高级的应用,目前来说可能还得结合opencv或image-processing等开源的处理库来用。但如果只是简单的人脸检测,Core Image的效率就我个人感觉来说,还是很不错的,不比opencv的差。
人脸检测代码(大部分代码都是参考国外2篇文章的,在此特别指出)
- -(void)DetectFace{
- UIImage*image=[UIImageimageNamed:@"face.png"];
- UIImageViewtestImage=[[UIImageViewalloc]initWithImage:image];
- [testImagesetTransform:CGAffineTransformMakeScale(1,-1)];
- [[[UIApplicationsharedApplication]delegate].windowsetTransform:
- CGAffineTransformMakeScale(1,-1)];
- [testImagesetFrame:CGRectMake(0,0,testImage.image.size.width,
- testImage.image.size.height)];
- [self.viewaddSubview:testImage];
- CIImage*ciimage=[CIImageimageWithCGImage:image.CGImage];
- NSDictionary*opts=[NSDictionarydictionaryWithObject:
- CIDetectorAccuracyHighforKey:CIDetectorAccuracy];
- CIDetector*detector=[CIDetectordetectorOfType:CIDetectorTypeFace
- context:niloptions:opts];
- NSArray*features=[detectorfeaturesInImage:ciimage];
- for(CIFaceFeature*faceFeatureinfeatures){
- CGFloatfaceWidth=faceFeature.bounds.size.width;
- //createaUIViewusingtheboundsoftheface
- UIView*faceView=[[UIViewalloc]initWithFrame:faceFeature.bounds];
- //addaborderaroundthenewlycreatedUIView
- faceView.layer.borderWidth=1;
- faceView.layer.borderColor=[[UIColorredColor]CGColor];
- [self.viewaddSubview:faceView];
- if(faceFeature.hasLeftEyePosition)
- {
- //createaUIViewwithasizebasedonthewidthoftheface
- UIView*leftEyeView=[[UIViewalloc]initWithFrame:
- CGRectMake(faceFeature.leftEyePosition.x-faceWidth*0.15,
- faceFeature.leftEyePosition.y-faceWidth*0.15,faceWidth*0.3,faceWidth*0.3)];
- //changethebackgroundcoloroftheeyeview
- [leftEyeViewsetBackgroundColor:[[UIColorblueColor]
- colorWithAlphaComponent:0.3]];
- //setthepositionoftheleftEyeViewbasedontheface
- [leftEyeViewsetCenter:faceFeature.leftEyePosition];
- //roundthecorners
- leftEyeView.layer.cornerRadius=faceWidth*0.15;
- //addtheviewtothewindow
- [self.viewaddSubview:leftEyeView];
- }
- if(faceFeature.hasRightEyePosition)
- {
- //createaUIViewwithasizebasedonthewidthoftheface
- UIView*leftEye=[[UIViewalloc]initWithFrame:
- CGRectMake(faceFeature.rightEyePosition.x-faceWidth*0.15,
- faceFeature.rightEyePosition.y-faceWidth*0.15,faceWidth*0.3,faceWidth*0.3)];
- //changethebackgroundcoloroftheeyeview
- [leftEyesetBackgroundColor:[[UIColorblueColor]
- colorWithAlphaComponent:0.3]];
- //setthepositionoftherightEyeViewbasedontheface
- [leftEyesetCenter:faceFeature.rightEyePosition];
- //roundthecorners
- leftEye.layer.cornerRadius=faceWidth*0.15;
- //addthenewviewtothewindow
- [self.viewaddSubview:leftEye];
- }
- if(faceFeature.hasMouthPosition)
- {
- //createaUIViewwithasizebasedonthewidthoftheface
- UIView*mouth=[[UIViewalloc]initWithFrame:
- CGRectMake(faceFeature.mouthPosition.x-faceWidth*0.2,
- faceFeature.mouthPosition.y-faceWidth*0.2,faceWidth*0.4,faceWidth*0.4)];
- //changethebackgroundcolorforthemouthtogreen
- [mouthsetBackgroundColor:[[UIColorgreenColor]
- colorWithAlphaComponent:0.3]];
- //setthepositionofthemouthViewbasedontheface
- [mouthsetCenter:faceFeature.mouthPosition];
- //roundthecorners
- mouth.layer.cornerRadius=faceWidth*0.2;
- //addthenewviewtothewindow
- [self.viewaddSubview:mouth];
- }
- }
- }