发明名称 |
一种3D即时通讯系统及其通讯方法 |
摘要 |
本发明提出了一种3D即时通讯系统,包括:客户端和服务器端;客户端内设置有人脸合成部和语音合成部;人脸合成部包括:人脸特征提取装置、模型嵌套装置和纹理映射装置;人脸提取装置用于从2D人脸照片中提取脸部特征;模型嵌套装置用于根据提取的脸部特征将3D人脸网格模型投影到2D人脸照片上,得到3D人脸网格模型的纹理坐标;纹理映射装置将2D人脸照片映射回3D人脸网格,形成3D人脸;语音合成部用于根据3D人脸和输入的文本生成语音流及3D人脸动画并输出至服务器端;服务器端用于实现各客户端之间的信息交互。本发明将3D技术引入通讯系统,使用户能够设计并使用个性化3D人脸动画进行网络聊天,增加了实际操作的趣味性和生动性。 |
申请公布号 |
CN104835190A |
申请公布日期 |
2015.08.12 |
申请号 |
CN201510215785.9 |
申请日期 |
2015.04.29 |
申请人 |
华东师范大学 |
发明人 |
陆远刚;盛蕴;张桂戌 |
分类号 |
G06T13/40(2011.01)I;G06K9/00(2006.01)I;G06F3/0481(2013.01)I |
主分类号 |
G06T13/40(2011.01)I |
代理机构 |
上海麦其知识产权代理事务所(普通合伙) 31257 |
代理人 |
董红曼 |
主权项 |
一种3D即时通讯系统,其特征在于,包括:客户端和服务器端;所述客户端用于实现用户的登陆及信息的输入与输出;所述客户端内设置有人脸合成部(1)和语音合成部(2);其中,所述人脸合成部(1)包括:人脸特征提取装置(11)、模型嵌套装置(12)和纹理映射装置(13);所述人脸提取装置(11)用于从2D人脸照片中提取脸部特征;所述模型嵌套装置(12)用于根据提取的所述脸部特征对3D人脸网格模型进行校准,得到所述3D人脸网格模型的纹理坐标;所述纹理映射装置(13)根据所述纹理坐标将所述2D人脸照片映射回3D人脸网格,形成3D人脸;所述语音合成部(2)用于根据所述3D人脸和输入的文本生成语音流及3D人脸动画并输出至所述服务器端;所述服务器端用于实现各客户端之间的信息交互。 |
地址 |
200062 上海市普陀区中山北路3663号 |