[发明专利]图像处理装置、显示装置、动画生成方法以及动画显示方法

说明书

技术领域

本发明涉及图像处理装置、显示装置、动画生成方法以及动画显示方法。

背景技术

以往，已知一种影像输出装置，通过向形成为内容的轮廓的形状的屏幕投影内容，由此能够对阅览者加深印象(参照专利文献1)。例如，通过向人形状的屏幕投影人对商品等进行说明的动画内容，由此能够得到好像人站立在那里那样的具有存在感的投影像。

此外，近年来，利用了基于1张面部图像和语音数据来生成与语音相匹配地使面部图像的嘴活动的唇音同步动画的技术。在唇音同步动画中，例如，根据所发音的声音的母音使嘴的形状变化。

专利文献1：日本特开2011-150221号公报

然而，如专利文献1所记载的那样，在使用人形状的屏幕的情况下，优选根据1张面部图像来生成唇音同步动画，并将其作为内容进行显示。其原因在于，在使用对人物进行摄影而得到的动态图像作为内容的情况下，当在摄影时人活动了时，人物像不会收到屏幕中、需要进行繁琐的调整。

然而，唇音同步动画仅根据声音使嘴活动，因此存在缺乏表现力这样的问题。

发明内容

本发明的目的在于，提高基于面部图像生成的动画的表现力。

为了实现上述的目的，本发明的图像处理装置，具备：

表情附加部，对于与语音的输出一起显示的面部图像附加与上述语音对应的表情；以及

生成部，生成使附加有上述表情的面部图像中包含的嘴根据上述语音活动的动画。

发明的效果

根据本发明，能够提高基于面部图像生成的动画的表现力。

附图说明

图1是表示图像处理装置的功能的构成的框图。

图2是表示由图1的控制部执行的动画生成处理的流程图。

符号的说明

10显示装置

11控制部

12操作部

13显示部

14语音输出部

15通信部

16存储器

17存储部

A 语音数据

B 文本数据

C 词语(word or phrase)数据组

D 词语表情数据组

E 语句表情数据组

F 面部图像数据

G 翻译语句数据组

H1影像数据

H2影像数据

I 表情参数

P 程序

T1词语·表情对应表

具体实施方式

以下，参照附图对本发明的实施方式进行说明。在以下的实施方式中，以将本发明的图像处理装置以及显示装置应用于显示装置10的情况为例进行说明。此外，本发明不限定于图示例。

[显示装置10的构成]

图1是表示本实施方式的显示装置10的功能的构成的框图。

显示装置10具备控制部11、操作部12、显示部13、语音输出部14、通信部15、存储器16、以及存储部17，各部经由总线18连接。显示装置10构成为包括能够进行影像加工的图像处理装置。

控制部11由执行存储部17所存储的各种程序而进行规定的计算、各部的控制的CPU(Central Processing Unit：中央处理单元)构成。控制部11通过与存储部17所存储的程序P的协作，来执行图2所示的动画生成处理，基于所生成的动画的影像数据H1或者H2，使显示部13显示动画。控制部11作为表情附加单元、生成单元、以及翻译单元起作用。

操作部12构成为具备键盘以及鼠标等指示设备，该键盘具备光标键、文字输入键、数字键以及各种功能键等，将通过对于键盘的键操作、鼠标操作而输入的指示信号向控制部11输出。

显示部13由LCD(Liquid Crystal Display：液晶显示器)等监视器构成，根据从控制部11输入的显示信号的指示，显示各种画面。

语音输出部14具备扬声器、D/A转换电路等，根据来自控制部11的控制而输出语音。

通信部15由调制解调器、路由器、网卡等构成，与连接于通信网络的外部设备进行通信。

存储器16由DRAM(Dynamic Random Access Memory：动态随机存取存储器)等半导体存储器等构成，暂时存储由显示装置10的各部处理的数据等。