用HTML5进行人脸识别

开发 前端
其中的一个特性是getUserMedia( W3C规范 )。它是一个JavaScript API,可以让你访问(需要权限)用户的网络摄像头和麦克风。

今天发现一篇文章写的很有趣,叫你如何使用HTML5进行人脸识别。在网页内进行人脸识别,很好很强大!

“现代Web”不断发展出不少有趣的API,但你并不会在大多数项目中使用到所有的内容。例如我一直特别关注Canvas特性。它对游戏和绘图意义重大 – 但是仅此而已。它并不是一个不好的特性,我只是不会经常用到它。每当看到一些开发中酷炫的新功能,我的大脑里都会思考它们可以产生哪些实际用途。显然对你有价值的内容可能对我来说并不一定,但搞清楚我如何实际使用一个功能是我学习它的一部分。

其中的一个特性是getUserMedia( W3C规范 )。它是一个JavaScript API,可以让你访问(需要权限)用户的网络摄像头和麦克风。 目前Opera和Chrome(我相信现在的版本18可以支持,但是你可能需要使用Canary。你还需要启用它。这儿有一个说明。)一旦你启用了getUserMedia,它使用起来相当简单。这里有一个快速的访问请求:

  1. //a video tag  
  2. var video = document.getElementById(‘monitor’);  
  3. //request it  
  4. navigator.webkitGetUserMedia(‘video’, gotStream, noStream);  
  5. function gotStream(stream) {  
  6. video.src = webkitURL.createObjectURL(stream);  
  7. video.onerror = function () {  
  8. stream.stop();  
  9. streamError();  
  10. };  
  11. }  
  12. function noStream() {  
  13. document.getElementById(‘errorMessage’).textContent = ‘No camera available.’;  
  14. }  
  15. function streamError() {  
  16. document.getElementById(‘errorMessage’).textContent = ‘Camera error.’;  

getUserMedia的***个参数是类型。根据规范,这应该是一个对象,你可以启用音频、视频,或两者兼而有之,像这样:{audio:true, video:true}。然而在我的测试中,传递一个字符串“video”也可以正常工作。你将看到的演示基于另一个演示,所以代码来自于一个较早的Chrome下的版本。第二个和第三个参数是操作成功和失败的回调函数。

你可以看到操作成功的事件处理函数将视频流分配给HTML5 Video标签。最酷的是,一旦运行起来,你就可以使用Canvas API来拍照。对于这个演示,可以看看Greg Miernicki的Demo:http://miernicki.com/cam.html

如果这个Demo无法工作,可以按照下面的说明来开启getUserMedia支持后再次进行尝试。(虽然我打算分享一些屏幕截图,所以如果你只是想继续阅读,那也没关系。)

基于Greg的Demo,我突然想到可以用网络摄像头的照片做一些很酷的东西。我记得Face.com有一个非常酷的API来解析脸部的图片。(我11月曾经在博客里写了一个ColdFusion的例子。)然后我在想,是否我们能把Greg的Demo与Face.com的API结合起来做一些基本面部识别的Demo。

[[68839]]

这有这几个重大问题。 *** – Face.com有一个很好的REST API,我们将如何从JavaScript应用程序里面来调用它?其次 – Face.com需要你可以上传图片,或给它一个网址。 我知道可以把一个Canvas图片发送给服务器,并通过我的后台上传到Face.com,但有没有办法绕过服务器来把图片发送给这个API?

***个实际上并不是问题。Face.com实现了CORS(跨域资源共享)。CORS系统基本上可以让服务器暴露给其它域上文件的Ajax调用。这是一个伟大的功能,我希望更多的服务能够使用它。

更复杂的问题则是如何把画布上的数据发送到Face.com(注:还可以参考我的这篇文章《如何使用HTML5实现拍照上传应用》)。我如何模拟文件上传?这里有另一个很酷的新技巧 – Formdata。ColdFusion的研究员Sagar Ganatra关于这个话题有一篇很棒的博客。下面展示了我如何使用它:

  1. function snapshot() {  
  2. $(“#result“).html(“<p><i>Working hard for the money…</i></p>“);  
  3. canvas.width = video.videoWidth;  
  4. canvas.height = video.videoHeight;  
  5. canvas.getContext(’2d’).drawImage(video, 0, 0);  
  6. var data = canvas.toDataURL(‘image/jpeg’, 1.0);  
  7. newblob = dataURItoBlob(data);  
  8. var formdata = new FormData();  
  9. formdata.append(“api_key“, faceKey);  
  10. formdata.append(“api_secret“, faceSecret);  
  11. formdata.append(“filename“,”temp.jpg“);    
  12. formdata.append(“file“,newblob);  
  13. $.ajax({  
  14.     url: ‘http://api.face.com/faces/detect.json?attributes=age_est,gender,mood,smiling,glasses’,  
  15.       data: formdata,  
  16.     cache: false,  
  17.     contentType: false,  
  18.     processData: false,  
  19.     dataType:”json“,  
  20.     type: ‘POST’,  
  21.     success: function (data) {  
  22.         handleResult(data.photos[0]);  
  23.     }  
  24. });      

让我们一行行来看这段代码。首先 – 我需要从画布对象获取二进制数据。有几种方法可以实现,但是我尤其想要一个二进制的Blob。请注意dataURIToBlob方法。这是几周前我从StockOverflow上发现的。

我创建了一个新的formdata对象,然后简单地设置了自己所需的值。你可以看到我发起了几个API请求,但关键在于文件名和文件对象本身。

接下来你可以看到简单的jQuery Ajax调用。Face.com有多种选择,但我基本只要求它返回预测年龄、性别、情绪,是否面带微笑以及戴着眼镜。就是这些。我得到了一个很棒的JSON包,并且对它进行了格式化。

现在显然API并不***。我获得了使用API一些不同程度的结果。有时相当准确,有时相反。但是总体来说,这相当酷。这里有一些实际测试的图片,看起来有点“可怕”。

识别结果:neutral(无表情)

识别结果:happy(开心)

识别结果:surprised(惊讶)

识别结果:sad(悲伤)

好了,准备自己亲自来试试? 只需点击下面的演示按钮。如果需要源代码,可以直接在页面上查看! 这是100%的纯客户端代码。

原文地址:http://www.html5cn.org/article-2554-1.html

 

 

 

责任编辑:张伟 来源: HTML5中国
相关推荐

2022-05-25 07:11:13

Python人脸识别代码

2013-05-28 11:08:51

人脸识别html5

2018-05-08 14:25:22

Pythondlib人脸检测

2021-03-29 15:13:23

深度学习人脸解锁算法

2015-01-05 09:37:01

HTML5原生app拼积木方式

2020-12-22 21:57:39

人脸识别AI人工智能

2013-01-24 10:26:04

HTML5HTML 5HTML5的未来

2011-04-22 15:02:19

HTML5Dojo

2013-10-21 15:24:49

html5游戏

2011-05-13 17:36:05

HTML

2021-10-29 10:10:28

人工智能AI人脸识别

2012-04-12 11:11:15

HTML5APIWEB

2021-05-10 11:08:00

人工智能人脸识别

2012-03-07 15:24:41

2017-01-03 18:09:33

HTML5本地存储Web

2011-05-12 15:42:16

HTML5

2011-05-13 17:41:40

2011-01-14 17:53:33

HTML5cssweb

2023-03-16 09:00:00

HTML5HTML语言

2013-03-22 08:59:57

HTML5移动应用Web App
点赞
收藏

51CTO技术栈公众号