一个基于多媒介用户交互的电子绘画创作的方法

摘要

本发明公开了一个基于多媒介用户交互的电子绘画创作的方法，方法包括：(1)绘画内容由使用电子画笔绘制的笔划和从图片中提取的绘画元素组成；(2)用户通过语音、静态姿势或者动态肢体表演从图片素材库中搜索候选图片集；(3)用户通过语音、静态手势或者眼球跟踪从候选图片集中选取图片；(4)自动对用户选取的图片进行分割，将图片中有意义的元素提取出来，通过识别用户的语音、静态手势，或者眼球跟踪从分割结果中选取用户需要的绘图元素画；(5)用户通过静态手势或者语音调整每个绘画元素的大小，角度和位置，使绘画作品美观。本发明公开的基于用户的语音、静态姿势或者动态肢体表演的电子绘画方式使得绘图过程更加人性化。

主权项

一个基于多媒介用户交互的电子绘画创作的方法，使用绘图软件绘制的元素和从图片中提取的绘画元素组成绘画的内容，用户通过静态手势和语音调整每个绘画元素的大小和位置，其特征在于使用从图片中提取的绘画元素组成绘画的内容包括如下步骤：1)用户通过语音、静态姿势、动态肢体表演或者素描绘画的方法，从图片素材库中搜索候选图片集；2)用户通过语音、静态手势或眼球跟踪选取候选图片集中的一幅图片；3)自动对用户选取的图片进行分割，提取图片中的元素，通过识别用户的语音、静态手势或眼球跟踪从分割结果中选取用户需要的元素；所述的自动对用户选取的图片进行分割，提取图片中的元素，通过识别用户的语音、静态手势或眼球跟踪从分割结果中选取用户需要的元素为：(1)通过识别用户的语音从分割结果中选取用户需要的元素为：使用图像分割算法对选中的图片进行分割，提取图片中的元素，并对提取出来的每一个元素进行编号，用户通过麦克风说出元素的编号；(2)通过识别用户的静态手势从分割结果中选取用户需要的元素为：用户用手指指向从图像中提取出来的一个元素，摄像头会捕捉到用户的手势，并且分析用户的手势指向屏幕中的哪个区域，确定用户想要选取哪一个分割元素；(3)通过识别用户的眼球跟踪从分割结果中选取用户需要的元素为：通过摄像头追踪用户的眼球运动，通过统计用户的目光停留在屏幕上哪个区域的时间最长来确定用户想要选取的分割元素。