发明名称 一种3D即时通讯系统及其通讯方法
摘要 本发明提出了一种3D即时通讯系统,包括:客户端和服务器端;客户端内设置有人脸合成部和语音合成部;人脸合成部包括:人脸特征提取装置、模型嵌套装置和纹理映射装置;人脸提取装置用于从2D人脸照片中提取脸部特征;模型嵌套装置用于根据提取的脸部特征将3D人脸网格模型投影到2D人脸照片上,得到3D人脸网格模型的纹理坐标;纹理映射装置将2D人脸照片映射回3D人脸网格,形成3D人脸;语音合成部用于根据3D人脸和输入的文本生成语音流及3D人脸动画并输出至服务器端;服务器端用于实现各客户端之间的信息交互。本发明将3D技术引入通讯系统,使用户能够设计并使用个性化3D人脸动画进行网络聊天,增加了实际操作的趣味性和生动性。
申请公布号 CN104835190A 申请公布日期 2015.08.12
申请号 CN201510215785.9 申请日期 2015.04.29
申请人 华东师范大学 发明人 陆远刚;盛蕴;张桂戌
分类号 G06T13/40(2011.01)I;G06K9/00(2006.01)I;G06F3/0481(2013.01)I 主分类号 G06T13/40(2011.01)I
代理机构 上海麦其知识产权代理事务所(普通合伙) 31257 代理人 董红曼
主权项 一种3D即时通讯系统,其特征在于,包括:客户端和服务器端;所述客户端用于实现用户的登陆及信息的输入与输出;所述客户端内设置有人脸合成部(1)和语音合成部(2);其中,所述人脸合成部(1)包括:人脸特征提取装置(11)、模型嵌套装置(12)和纹理映射装置(13);所述人脸提取装置(11)用于从2D人脸照片中提取脸部特征;所述模型嵌套装置(12)用于根据提取的所述脸部特征对3D人脸网格模型进行校准,得到所述3D人脸网格模型的纹理坐标;所述纹理映射装置(13)根据所述纹理坐标将所述2D人脸照片映射回3D人脸网格,形成3D人脸;所述语音合成部(2)用于根据所述3D人脸和输入的文本生成语音流及3D人脸动画并输出至所述服务器端;所述服务器端用于实现各客户端之间的信息交互。
地址 200062 上海市普陀区中山北路3663号