基于Virtex5的婴幼儿智能监护助理---“安富利杯”赛灵思FPGA设计技巧与应用创新博文

当今社会,多媒体的广泛应用和信息时代的到来使得人们的日常生活方式发生了天翻地覆的变化,他们越来越需要改善自己的生活质量,随着生活节奏的快捷化以及便携式消费电子产品的日益普及,人们家庭消费电子终端产品提出了越来越高的要求,现代人们在日常生活和休闲娱乐中追求的一个明显的趋势是新型人机交互方式如动作识别、语音识别等技术。但同时,由于其技术复杂度高、环境影响因素多而且大、数据处理量大、成本高,研发速度和研发水平等受到严重的制约。
目前,在PC机上,语音识别技术已经获得了一定的进步,在关键词的识别已经很不错了,我们可以在很多多媒体产品、人机交互产品中找到其踪影,下面我主要是想来跟大家分享一下实现在SOPC的基础上构建一个智能的识别系统。我就实际问题来引入我们的探讨。下面我想实现一个帮助家庭实现婴幼儿智能监护功能的系统,我想,这是有一定实现意义的,可能这也只是我的陋见,希望大家多多指导。
随着现代社会节奏的急剧加快和社会压力的加剧,现在的父母忙于各种工作。对于年轻的父母而言,又要照料婴儿同时又忙于工作,对于婴幼儿的监护成为了一个亟待解决的问题。传统的婴儿监护仪只能将婴儿的实时视频信息或音频信息传递给父母,只能实现实时监控功能,我们设计的系统致力于开发智能的婴幼儿监护助理,能够实时的捕捉婴幼儿的面部表情信息及语音信息,并且能够实现动态的图像追踪,通过基于XUPV5平台进行设计,实现对婴儿信息的实时处理并且反馈回调节婴儿情绪,行为的信息,对其行为进行智能调节,而不需要其他人进行控制,同时还设有网络传输模块,对于紧急情况,可以通过以太网传送到上位机上,实现紧急预警功能,为婴儿的监护提供了很好的安全保障。
我们通过cmos摄像头采集到视频信息,前端用视频采集卡采集,经过面部表情识别处理系统处理,识别出婴幼儿的面部表情,比如:生气、厌恶、害怕、伤心、高兴和吃惊这些基本表情,然后根据表情分别播放不同的音乐,视频,实现对婴儿的情绪进行及时的调理。
通过话筒输入,利用先进的语音识别和处理技术,做出实时响应,对婴儿的哭声,笑声等都能够及时的调节,对婴幼儿的情绪进行及时的调理。
网络无线传输设计能够将婴幼儿的突发情况实时的传输,使父母能够及时的突发情况,提醒他们做出及时的响应,该设计基于以其特有的优势改变了传统监控手段,为远程实时监控提供了出色的解决方案。
本设计基于XUPV5的开发平台,实现基于SOPC的婴儿监护助理,其基本功能模块如下:在这里我想实现双核来实现整个系统,在板子上构建两个microblaze软核,一个用于做表情识别的处理,一个用于做语音识别的处理。
dualcore.JPG
这里,我想通过CMOS传感器和话筒传入视频和音频信号,用FPGA对音频和视频信号进行处理,对语音进行智能识别,对视频进行人脸表情检测,综合两者输入,通过FPGA 的处理实现音乐或视频等反馈来调理婴儿,并对突发情况能及时通过网络传输模块传输给远程的监护人。

附件大小
dualcore.JPG41.14 KB

1 条评论

(1楼)蛮有创意的,谢谢分享

FPGA菜鸟 在 星期一, 06/21/2010 - 11:18 发表。

蛮有创意的,谢谢分享