专利摘要

本实用新型公开一种表情、声音、动作混合自发微表情采集装置，第一摄像模块配置有第一摄像头，第二摄像模块配置有第二摄像头，第三摄像模块配置有第三摄像头，第一摄像模块通过第一摄像头采集用户的面部表情信息，第二摄像模块通过第二摄像头采集用户一侧的肢体动作信息，第三摄像模块通过第三摄像头采集用户另外一侧的肢体动作信息，第一摄像头、第二摄像头和第三摄像头呈三角形排列；语音采集模块与中央处理器连接，语音采集模块采集用户的声音信息；显示模块显示向用户进行提问的问题信息。本技术方案在采集面部微表情动作的同时，记录测试者的语音和肢体动作；更加准确地实现微表情的识别，可以应用在刑侦、医学、教育、心理、安防领域。

权利要求

1.一种表情、声音、动作混合自发微表情采集装置，其特征在于，包括中央处理器(1)、第一摄像模块(2)、第二摄像模块(3)、第三摄像模块(4)、语音采集模块(5)和显示模块(6)，所述第一摄像模块(2)、第二摄像模块(3)、第三摄像模块(4)分别与所述中央处理器(1)连接，第一摄像模块(2)配置有第一摄像头(7)，第二摄像模块(3)配置有第二摄像头(8)，第三摄像模块(4)配置有第三摄像头(9)，第一摄像模块(2)用于通过所述第一摄像头(7)采集用户的面部表情信息，第二摄像模块(3)用于通过所述第二摄像头(8)采集用户一侧的肢体动作信息，第三摄像模块(4)用于通过第三摄像头(9)采集用户另外一侧的肢体动作信息，第一摄像头(7)、第二摄像头(8)和第三摄像头(9)呈三角形排列；所述语音采集模块(5)与所述中央处理器(1)连接，语音采集模块(5)用于采集用户的声音信息；所述显示模块(6)与所述中央处理器(1)连接，显示模块(6)用于显示向用户进行提问的问题信息。

2.根据权利要求1所述的一种表情、声音、动作混合自发微表情采集装置，其特征在于，所述第一摄像头(7)采用200fps高帧率摄像头，所述第二摄像头(8)和第三摄像头(9)采用1080p高清摄像头。

3.根据权利要求1所述的一种表情、声音、动作混合自发微表情采集装置，其特征在于，所述语音采集模块(5)配置有传声器(10)，语音采集模块(5)通过所述传声器(10)采集用户的声音信息；

所述显示模块(6)配置有LCD显示器(11)，显示模块(6)通过所述LCD显示器(11)显示向用户进行提问的问题信息。

4.根据权利要求1所述的一种表情、声音、动作混合自发微表情采集装置，其特征在于，还包括电源模块(12)，电源模块(12)接入220V市电，电源模块(12)与所述中央处理器(1)连接，所述电源模块(12)用于对表情、声音、动作混合自发微表情采集装置进行供电。

5.根据权利要求4所述的一种表情、声音、动作混合自发微表情采集装置，其特征在于，还包括摄影灯(18)，所述摄影灯(18)连接所述电源模块(12)，摄影灯(18)用于对第一摄像头(7)、第二摄像头(8)和第三摄像头(9)提供照明。

6.根据权利要求1所述的一种表情、声音、动作混合自发微表情采集装置，其特征在于，还包括无线传输模块(13)，所述无线传输模块(13)与所述中央处理器(1)连接，中央处理器(1)通过所述无线传输模块(13)连接有管理服务器(14)，管理服务器(14)用于对表情、声音、动作混合自发微表情采集装置采集的表情、声音、动作信息进行管理。

7.根据权利要求1所述的一种表情、声音、动作混合自发微表情采集装置，其特征在于，还包括存储模块(15)，所述存储模块(15)与所述中央处理器(1)连接，存储模块(15)配置有Flash存储器(16)，存储模块(15)通过所述Flash存储器(16)对表情、声音、动作混合自发微表情采集装置采集的表情、声音、动作信息进行存储。

8.根据权利要求1所述的一种表情、声音、动作混合自发微表情采集装置，其特征在于，所述第一摄像头(7)、第二摄像头(8)和第三摄像头(9)连接有图像处理器(17)，图像处理器(17)用于对采集的表情、动作信息进行处理。

说明书

技术领域

本实用新型实施例涉及图像采集技术领域，具体涉及一种表情、声音、动作混合自发微表情采集装置。

背景技术

微表情是人们在某些高强度环境下试图隐藏而不由自主地发生的一种短暂面部表情，它揭露了人们内心的真实情感，在刑侦、医学、教育、心理、安防领域都有潜在应用。人们通过做一些表情把内心感受表达给对方看，在人们做的不同表情之间，或是某个表情里，脸部会“泄露”出其它的信息。微表情最短可持续1/25秒，虽然一个下意识的表情可能只持续一瞬间，但有时表达相反的情绪。微表情不仅与面部动作相关，肢体动作和声音也是反映微表情的重要指标。

微表情持续时间短，通常甚至清醒的作表情的人和观察者都察觉不到。在实验里，只有10％的人察觉到。比起人们有意识做出的表情，“微表情”更能体现人们真实的感受和动机。比如某人很自然地表现高兴的表情，且其中不含有微表情，就能断定此人是高兴的。但是如果其间有“嗤笑”的“微表情”闪现，就算你没有刻意去察觉，你会更倾向于认为这张“高兴”的面孔是“狡猾的”或“不可信的”。微表情前期数据的采集处理及模型构建是微表情识别技术的关键，传统技术方案只是考虑到对面部表情的采集，缺少对肢体动作和声音的混合采集，需要一种融合表情、声音和肢体动作的微表情采集技术方案。

实用新型内容

为此，本实用新型实施例提供一种表情、声音、动作混合自发微表情采集装置，在采集面部微表情动作的同时，还能记录测试者的语音和肢体动作，使采集微表情数据更加全面。

为了实现上述目的，本实用新型实施例提供如下技术方案：一种表情、声音、动作混合自发微表情采集装置，包括中央处理器、第一摄像模块、第二摄像模块、第三摄像模块、语音采集模块和显示模块，所述第一摄像模块、第二摄像模块、第三摄像模块分别与所述中央处理器连接，第一摄像模块配置有第一摄像头，第二摄像模块配置有第二摄像头，第三摄像模块配置有第三摄像头，第一摄像模块用于通过所述第一摄像头采集用户的面部表情信息，第二摄像模块用于通过所述第二摄像头采集用户一侧的肢体动作信息，第三摄像模块用于通过第三摄像头采集用户另外一侧的肢体动作信息，第一摄像头、第二摄像头和第三摄像头呈三角形排列；所述语音采集模块与所述中央处理器连接，语音采集模块用于采集用户的声音信息；所述显示模块与所述中央处理器连接，显示模块用于显示向用户进行提问的问题信息。

作为表情、声音、动作混合自发微表情采集装置的优选方案，所述第一摄像头采用200fps高帧率摄像头，所述第二摄像头和第三摄像头采用1080p高清摄像头。

作为表情、声音、动作混合自发微表情采集装置的优选方案，所述语音采集模块配置有传声器，语音采集模块通过所述传声器采集用户的声音信息；

所述显示模块配置有LCD显示器，显示模块通过所述LCD显示器显示向用户进行提问的问题信息。

作为表情、声音、动作混合自发微表情采集装置的优选方案，还包括电源模块，电源模块接入220V市电，电源模块与所述中央处理器连接，所述电源模块用于对表情、声音、动作混合自发微表情采集装置进行供电。

作为表情、声音、动作混合自发微表情采集装置的优选方案，还包括摄影灯，所述摄影灯连接所述电源模块，摄影灯用于对第一摄像头、第二摄像头和第三摄像头提供照明。

作为表情、声音、动作混合自发微表情采集装置的优选方案，还包括无线传输模块，所述无线传输模块与所述中央处理器连接，中央处理器通过所述无线传输模块连接有管理服务器，管理服务器用于对表情、声音、动作混合自发微表情采集装置采集的表情、声音、动作信息进行管理。

作为表情、声音、动作混合自发微表情采集装置的优选方案，还包括存储模块，所述存储模块与所述中央处理器连接，存储模块配置有Flash存储器，存储模块通过所述Flash存储器对表情、声音、动作混合自发微表情采集装置采集的表情、声音、动作信息进行存储。

作为表情、声音、动作混合自发微表情采集装置的优选方案，所述第一摄像头、第二摄像头和第三摄像头连接有图像处理器，图像处理器用于对采集的表情、动作信息进行处理。

本实用新型实施例具有如下优点：设有中央处理器、第一摄像模块、第二摄像模块、第三摄像模块、语音采集模块和显示模块，第一摄像模块、第二摄像模块、第三摄像模块分别与中央处理器连接，第一摄像模块配置有第一摄像头，第二摄像模块配置有第二摄像头，第三摄像模块配置有第三摄像头，第一摄像模块通过第一摄像头采集用户的面部表情信息，第二摄像模块通过第二摄像头采集用户一侧的肢体动作信息，第三摄像模块通过第三摄像头采集用户另外一侧的肢体动作信息，第一摄像头、第二摄像头和第三摄像头呈三角形排列；语音采集模块与中央处理器连接，语音采集模块采集用户的声音信息；显示模块显示向用户进行提问的问题信息。本技术方案在采集面部微表情动作的同时，记录测试者的语音和肢体动作；采集更加全面的微表情数据，以便更加准确地实现微表情的识别，可以应用在刑侦、医学、教育、心理、安防领域。

附图说明

为了更清楚地说明本实用新型的实施方式或现有技术中的技术方案，下面将对实施方式或现有技术描述中所需要使用的附图作简单地介绍。显而易见地，下面描述中的附图仅仅是示例性的，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据提供的附图引伸获得其它的实施附图。

图1为本实用新型实施例中提供的一种表情、声音、动作混合自发微表情采集装置示意图；

图中：1、中央处理器；2、第一摄像模块；3、第二摄像模块；4、第三摄像模块；5、语音采集模块；6、显示模块；7、第一摄像头；8、第二摄像头；9、第三摄像头；10、传声器；11、LCD显示器；12、电源模块；13、无线传输模块；14、管理服务器；15、存储模块；16、Flash存储器；17、图像处理器；18、摄影灯。

具体实施方式

以下由特定的具体实施例说明本实用新型的实施方式，熟悉此技术的人士可由本说明书所揭露的内容轻易地了解本实用新型的其他优点及功效，显然，所描述的实施例是本实用新型一部分实施例，而不是全部的实施例。基于本实用新型中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本实用新型保护的范围。

需要进一步说明的是，本技术方案请求保护的是实现表情、声音、动作混合自发微表情采集装置的硬件部署，并不请求对涉及的算法或方法进行保护，此外本技术方案对涉及的算法或方法将在实施例中作为现有技术进行充分的公开，以使本领域的技术人员更好的实现本技术方案。类比的，本技术方案涉及的算法或方法相当于一个工作流程和使用方法，任何一个结构性技术方案在实施或实现的过程中必然有一个实施方法性的方案对应，在申请人不请求对方法进行保护的前提下，并不能因涉及方法而否定结构技术方案作为实用新型进行保护的客体。

参见图1，提供一种表情、声音、动作混合自发微表情采集装置，包括中央处理器1、第一摄像模块2、第二摄像模块3、第三摄像模块4、语音采集模块5和显示模块6，所述第一摄像模块2、第二摄像模块3、第三摄像模块4分别与所述中央处理器1连接，第一摄像模块2配置有第一摄像头7，第二摄像模块3配置有第二摄像头8，第三摄像模块4配置有第三摄像头9，第一摄像模块2用于通过所述第一摄像头7采集用户的面部表情信息，第二摄像模块3用于通过所述第二摄像头8采集用户一侧的肢体动作信息，第三摄像模块4用于通过第三摄像头9采集用户另外一侧的肢体动作信息，第一摄像头7、第二摄像头8和第三摄像头9呈三角形排列；所述语音采集模块5与所述中央处理器1连接，语音采集模块5用于采集用户的声音信息；所述显示模块6与所述中央处理器1连接，显示模块6用于显示向用户进行提问的问题信息。

表情、声音、动作混合自发微表情采集装置的一个实施例中，所述第一摄像头7采用200fps高帧率摄像头，帧率是摄像机在单位秒钟内生成图片的帧数，每一帧静止的图像快速连续地显示便形成了运动的画面，体现了物体的状态。高帧率摄像头可以得到更流畅、更逼真的动画，每秒钟帧数越多，所显示的动作就会越流畅，画面的质感也就越好，高帧率摄像头从正面拍摄被试者的面部表情，确保面部表情的准确记录。

具体的，所述第二摄像头8和第三摄像头9采用1080p高清摄像头，1080p高清摄像头能够满足对肢体动作的采集需求。此外，还包括摄影灯18，所述摄影灯18连接所述电源模块12，摄影灯18用于对第一摄像头7、第二摄像头8和第三摄像头9提供照明，摄影灯18保证采集效果。所述第一摄像头7、第二摄像头8和第三摄像头9连接有图像处理器17，图像处理器17用于对采集的表情、动作信息进行处理。具体的，可以采用基于X86架构的图形处理器，比如型号为INTEL HD4000或INTEL I3 3210的图形处理器。

表情、声音、动作混合自发微表情采集装置的一个实施例中，所述语音采集模块5配置有传声器10，语音采集模块5通过所述传声器10采集用户的声音信息。语音采集模块5采用ISD1820，高质量、自然的语音还原，供电电源：3-5V，可接排针上电，实现被测试者的声音准确还原。所述显示模块6配置有LCD显示器11，显示模块6通过所述LCD显示器11显示向用户进行提问的问题信息。具体的，LCD显示器11采用LCD1602液晶屏，LCD1602的内部结构可以分成三部分：一为LCD控制器，二为LCD驱动器，三为LCD显示装备。LCD1602液晶屏能够同时显示32个字符，价格便宜，编程简单而且稳定可靠。LCD1602液晶屏显示质量高，数字式接口，操作更加方便，体积小、重量轻，功耗低。

表情、声音、动作混合自发微表情采集装置的一个实施例中，还包括电源模块12，电源模块12接入220V市电，电源模块12与所述中央处理器1连接，所述电源模块12用于对表情、声音、动作混合自发微表情采集装置进行供电。电源模块12采用LM2596降压模块，输出电压：3.3V、5V、12V及(ADJ)等，最大输出电压37V；工作模式：低功耗/正常两种模式，可外部控制。工作模式控制：TTL电平相容；器件保护：热关断及电流限制；封装形式：5脚(TO-220(T)；TO-263(S)。

表情、声音、动作混合自发微表情采集装置的一个实施例中，还包括无线传输模块13，所述无线传输模块13与所述中央处理器1连接，中央处理器1通过所述无线传输模块13连接有管理服务器14，管理服务器14用于对表情、声音、动作混合自发微表情采集装置采集的表情、声音、动作信息进行管理。无线传输模块13可以采用GPRS通信模块或WiFi模块。GPRS通信模块采用移远通信GSM/GPRSM26，M26是贴片式模块，44个引脚，采用LCC封装，并通过焊盘内嵌于各类数传产品应用中，提供了模块与客户主板间丰富的硬件接口。M26具有17.7mm×15.8mm×2.3mm的超小尺寸，M26模块采用了低功耗技术，电流功耗在睡眠模式DRX＝5下，低至1.3mA。M26内嵌TCP、UDP、FTP、PPP、HTTP等数据传输协议，已内嵌的扩展AT命令可以使用户更容易地使用这些互联网协议。管理服务器14可以对接管理中心。

具体的，WiFi模块可以采用ESP8266，主要功能包括：串口透传，PWM调控，GPIO控制。串口透传：数据传输，传输的可靠性好，最大的传输速率为：460800bps。支持STA/AP/STA+AP三种工作模式。STA模式：ESP8266模块通过路由器连接互联网，手机或电脑通过互联网实现对设备的远程控制。AP模式：ESP8266模块作为热点，实现手机或电脑直接与模块通信，实现局域网无线控制。STA+AP模式：两种模式的共存模式，可以通过互联网控制可实现无缝切换，方便操作。

作为表情、声音、动作混合自发微表情采集装置的优选方案，还包括存储模块15，所述存储模块15与所述中央处理器1连接，存储模块15配置有Flash存储器16，存储模块15通过所述Flash存储器16对表情、声音、动作混合自发微表情采集装置采集的表情、声音、动作信息进行存储。FLASH存储器16可以采用W25Q32FVSSIG系列，工作温度-40℃～85℃，存储容量32M(4M x 8)；电压电源2.7V～3.6V；封装/外壳8-SOIC(0.209",5.30mm Width)；接口SPI Serial；速度104MHz。

本实用新型实施例设有中央处理器1、第一摄像模块2、第二摄像模块3、第三摄像模块4、语音采集模块5和显示模块6，第一摄像模块2、第二摄像模块3、第三摄像模块4分别与中央处理器1连接，第一摄像模块2配置有第一摄像头7，第二摄像模块3配置有第二摄像头8，第三摄像模块4配置有第三摄像头9，第一摄像模块2通过第一摄像头7采集用户的面部表情信息，第二摄像模块3通过第二摄像头8采集用户一侧的肢体动作信息，第三摄像模块4通过第三摄像头9采集用户另外一侧的肢体动作信息，第一摄像头7、第二摄像头8和第三摄像头9呈三角形排列；语音采集模块5与中央处理器1连接，语音采集模块5采集用户的声音信息；显示模块6显示向用户进行提问的问题信息。通过本技术方案录制视频，视频中包括能引起被测者不同情绪的问题。被测试者头带耳机(排出外界干扰)，观看显示器中的视频，并回答视频中提出的问题。被测者尽量隐藏自己的真实情绪。摄影灯保证被测试者的面部光照良好；200fps高帧率摄像头从正面拍摄被试者的面部表情；两个1080p高清摄像头从侧前方拍摄被测试者的肢体动作；高清传声器记录被试者回答的语音。首先根据一些被测者个人信息的回答建立被测者语音和动作的基准。自动剪裁出偏离基准较远的视频片断和短暂(1/25s-1/5s)的面部微表情片断(排除持续时间长的宏表情)，并请领域专家标注表情类型。建立混合表情、声音、动作的微表情数据库，以便微表情的精准识别。本技术方案在采集面部微表情动作的同时，记录测试者的语音和肢体动作；采集更加全面的微表情数据，以便更加准确地实现微表情的识别，可以应用在刑侦、医学、教育、心理、安防领域。

虽然，上文中已经用一般性说明及具体实施例对本实用新型作了详尽的描述，但在本实用新型基础上，可以对之作一些修改或改进，这对本领域技术人员而言是显而易见的。因此，在不偏离本实用新型精神的基础上所做的这些修改或改进，均属于本实用新型要求保护的范围。

一种表情、声音、动作混合自发微表情采集装置专利购买费用说明

Q：办理专利转让的流程及所需资料

A：专利权人变更需要办理著录项目变更手续，有代理机构的，变更手续应当由代理机构办理。

1：专利变更应当使用专利局统一制作的“著录项目变更申报书”提出。

2：按规定缴纳著录项目变更手续费。

3：同时提交相关证明文件原件。

4：专利权转移的，变更后的专利权人委托新专利代理机构的，应当提交变更后的全体专利申请人签字或者盖章的委托书。

Q:专利著录项目变更费用如何缴交

A：（1）直接到国家知识产权局受理大厅收费窗口缴纳,（2）通过代办处缴纳，（3）通过邮局或者银行汇款,更多缴纳方式

Q：专利转让变更，多久能出结果

A：著录项目变更请求书递交后，一般1-2个月左右就会收到通知，国家知识产权局会下达《转让手续合格通知书》。