图像编辑方法、图像编辑系统和存储介质与流程

1.本发明涉及图像编辑方法、图像编辑系统和存储介质。


背景技术：

2.近年来，通过从投影仪对具有三维形状的物体投射各种图像来进行各种演出的投影映射正在普及。以下，将从投影仪被投射图像的物体被称为投射对象物。为了进行投影映射，需要预先生成从投影仪投射的二维图像、即投影仪视点的二维图像。提出了各种与投影仪视点的二维图像的生成有关的技术，作为其一例，可举出专利文献1所公开的技术。在专利文献1所公开的技术中，取得三维的投影对象的投影装置视点图像，作为投影内容而准备与投影对象对应的三维模型，将该三维模型变换为与投影装置视点图像一致的二维图像，由此生成从投影装置投影的二维图像。
3.专利文献1：日本特开2017-192040号公报
4.为了利用专利文献1所公开的技术进行投影映射，对用户要求与从投影仪的视点看到的投射对象物的形状有关的见解、以及与三维模型有关的见解等专业知识。但是，要进行投影映射的用户不一定都具有这样的专业知识。在专利文献1所公开的技术中，存在不具有专业知识的用户无法轻松地实现投影映射的问题。


技术实现要素：

5.本公开的图像编辑方法的一个方式包括以下处理：利用照相机从实际空间内的如下位置对所述实际空间内的投射区域进行拍摄来取得拍摄图像，其中，所述实际空间内的投射区域是包含成为来自投影仪的图像的投射目的地的投射对象物并且通过所述投影仪显示第1图像的区域，所述位置是所述照相机的拍摄范围的中心部分与所述第1图像的中心部分重叠的位置；以及将通过编辑所述拍摄图像而得到的第2图像发送到投影仪。
6.本公开的图像编辑系统的一个方式包括：照相机；以及处理装置，其控制所述照相机，所述处理装置执行以下处理：利用照相机从实际空间内的如下位置对所述实际空间内的投射区域进行拍摄来取得拍摄图像，其中，所述实际空间内的投射区域是包含成为来自投影仪的图像的投射目的地的投射对象物并且通过所述投影仪显示第1图像的区域，所述位置是所述照相机的拍摄范围的中心部分与所述第1图像的中心部分重叠的位置；以及将通过编辑所述拍摄图像而得到的第2图像发送到投影仪。
7.本公开的程序使计算机执行以下处理：利用照相机从实际空间内的如下位置对所述实际空间内的投射区域进行拍摄来取得拍摄图像，其中，所述实际空间内的投射区域是包含成为来自投影仪的图像的投射目的地的投射对象物并且通过所述投影仪显示第1图像的区域，所述位置是所述照相机的拍摄范围的中心部分与所述第1图像的中心部分重叠的位置；以及将通过编辑所述拍摄图像而得到的第2图像发送到投影仪。
附图说明
8.图1是表示本公开的实施方式的图像编辑系统1的结构例的图。
9.图2是表示信息处理装置20的结构例的图。
10.图3是表示第1引导图像ga1的一例的图。
11.图4是表示投射对象物sc相对于投射区域的设置例的图。
12.图5是表示拍摄图像ga2、第2引导图像ga3以及重叠图像ga4的关系的图。
13.图6是表示重叠图像ga4、消息m1以及用户界面图像ga5的显示例的图。
14.图7是表示第1引导图像ga1的中心部分与第2引导图像ga3的中心部分大致一致时的重叠图像ga4的一例的图。
15.图8是表示基于基准图像编辑的投射图像gb1的一例的图。
16.图9是表示投影仪10对投射图像gb1的投射例的图。
17.图10是表示处理装置210按照程序pa执行的图像编辑方法的流程的流程图。
18.标号说明
19.1：图像编辑系统；10：投影仪；20：信息处理装置；30：照相机；40：终端装置；50：通信网；60：图像保管装置；210：处理装置；210a：投射控制部；210b：显示控制部；210c：通知部；210d：取得部；210e：输出部；220、410：外部if装置；230：存储装置；420：显示装置；430：输入装置；pa：程序；sc：投射对象物。
具体实施方式
20.对以下所述的实施方式附加了技术上优选的各种限定。但是，本公开的实施方式不限于以下所述的方式。
21.1.实施方式
22.图1是表示本公开的实施方式的图像编辑系统1的结构例的图。图像编辑系统1是用于对表示从投影仪10对包含投射对象物sc的投射区域投射的图像的图像数据进行编辑的信息处理系统。本实施方式中的投射对象物sc是在基底纸上描绘有人物的圆扇。投影仪10和投射对象物sc设置于使用投影仪10的用户的居室。使用投影仪10的用户的居室是本公开中的实际空间的一例。
23.投影仪10是通过投射与从图像提供装置提供的图像数据对应的图像光来投射该图像数据所表示的图像的装置。本实施方式中的图像提供装置是信息处理装置20，详细内容后述。在图1中，虽然省略了详细的图示，但投影仪10包括投射透镜、液晶驱动部、液晶面板以及光源部。液晶驱动部按照从图像提供装置提供的图像数据来驱动液晶面板，由此将该图像数据所表示的图像描绘于液晶面板。光源部例如包括卤素灯或激光二极管等光源。来自光源部的光在液晶面板中按照每个像素被调制，经由投射透镜作为图像光被投射。
24.本实施方式中的投射区域是投影仪10的居室内的规定的区域。通过从投影仪10向投射区域投射图像，在投射区域显示图像。以下，将被投影仪10投射的图像称为投射图像。表示投射图像的图像数据有时被称为投射图像数据。投射区域中包含投射对象物sc。在本实施方式中，通过在投射区域显示投射图像，实现装饰投射对象物sc的投影映射。投射图像可以是静止图像，也可以是动态图像。本实施方式中的投射图像是静止图像。
25.如图1所示，图像编辑系统1包括信息处理装置20、照相机30和终端装置40。在图1
中，除了图像编辑系统1之外，还图示了投影仪10、投射对象物sc、通信网50以及图像保管装置60。
26.信息处理装置20例如是棒(stick)型个人计算机。信息处理装置20例如具备依据usb(universal serial bus：通用串行总线)等规定的标准的阳型连接器。投影仪10具备与该阳型连接器对应的阴型连接器。通过将信息处理装置20的阳型连接器插入投影仪10的阴型连接器，从而信息处理装置20与投影仪10电连接。信息处理装置20通过无线或有线方式与照相机30及终端装置40进行通信。
27.照相机30是用于拍摄投射区域的装置。照相机30例如使用三脚架以光轴朝向投射对象物sc的姿势设置在用户的居室内。在本实施方式中，用户能够任意地变更在居室内设置照相机30的位置。照相机30在信息处理装置20的控制下进行拍摄，将表示拍摄图像的图像数据输出到信息处理装置20。以下，将表示拍摄图像的图像数据称为拍摄图像数据。
28.通信网50例如是互联网等电气通信线路。在通信网50上连接有图像保管装置60。图像保管装置60例如是数据服务器。在图像保管装置60中存储1个或多个图像数据。作为图像保管装置60中存储的图像数据的具体例，可举出由图像编辑系统1编辑后的投射图像数据、或者表示照相机30的拍摄图像的拍摄图像数据。通过使图像保管装置60存储图像数据，投影仪10的用户能够重新利用编辑完毕的投射图像或者投射区域的拍摄图像。
29.终端装置40是投影仪10的用户使用的智能手机。如图1所示，终端装置40具备外部if装置410、显示装置420以及输入装置430。外部if装置410包括经由通信网50与图像保管装置60进行通信并且与信息处理装置20进行通信的通信电路。if是interface(接口)的缩写。显示装置420包括液晶显示器和该液晶显示器的驱动电路。终端装置40在信息处理装置20的控制下，在显示装置420上显示各种图像。输入装置430是以覆盖显示装置420的显示区域的方式设置的透明的片状的压敏传感器，受理用户的输入操作。终端装置40将表示用户对输入装置430的输入操作的输入操作数据经由外部if装置410发送到信息处理装置20。由此，用户的输入操作被传递到信息处理装置20。在终端装置40中预先安装有图像描绘工具，该图像描绘工具是用于通过编辑照相机30的拍摄图像来生成投射图像的软件。该图像描绘工具对应于本公开中的编辑功能。
30.信息处理装置20根据对终端装置40进行的输入操作，进行基于照相机30的投射区域的拍摄、与用户对输入装置430进行的输入操作对应的投射图像数据的编辑、以及编辑后的投射图像数据向投影仪10的输出，详情后述。投影仪10将从信息处理装置20输出的投射图像数据所表示的投射图像投射到投射区域。
31.图2是表示信息处理装置20的结构例的图。如图2所示，信息处理装置20包括处理装置210、外部if装置220以及存储装置230。处理装置210例如构成为包括cpu(central processing unit)等处理器、即计算机。处理装置210可以由单一的处理器构成，也可以由多个处理器构成。处理装置210按照存储于存储装置230的程序pa进行工作，由此作为信息处理装置20的控制中枢发挥功能。
32.外部if装置220包括上述的阳型连接器。在该阳型连接器插入到投影仪10的阴型连接器中，信息处理装置20与投影仪10电连接的状态下，外部if装置220将从处理装置210提供的数据或信号输出到投影仪10。外部if装置220包括与照相机30或终端装置40进行通信的通信电路。
33.存储装置230是处理装置210可读取的记录介质。存储装置230例如包括非易失性存储器和易失性存储器。非易失性存储器例如是rom(read only memory)、eprom(erasable programmable read only memory)或eeprom(electrically erasable programmable read only memory)。易失性存储器例如是ram(random access memory)。
34.在存储装置230的非易失性存储器中预先存储有使处理装置210执行本公开的图像编辑方法的程序pa。存储装置230的易失性存储器作为执行程序pa时的工作区域而被处理装置210利用。
35.处理装置210在检测到信息处理装置20与投影仪10的连接的情况下，将程序pa从非易失性存储器读出到易失性存储器，开始执行读出的程序pa。按照程序pa进行工作的处理装置210在检测到终端装置40和照相机30的连接时，作为图2所示的投射控制部210a、显示控制部210b、通知部210c、取得部210d和输出部210e发挥功能。图2所示的投射控制部210a、显示控制部210b、通知部210c、取得部210d以及输出部210e是通过按照程序pa使处理装置210工作而实现的软件模块。图2所示的投射控制部210a、显示控制部210b、通知部210c、取得部210d以及输出部210e各自所承担的功能如下。
36.投射控制部210a将指示投射表示投影仪10的投射范围的图像的第1信号输出到投影仪10。投影仪10的投射范围根据投影仪10的光轴的朝向和投影仪10的视场角来确定。以下，将表示投影仪10的投射范围的图像称为第1引导图像ga1。作为第1引导图像ga1的具体例，例如可举出用白色等第1颜色均匀地涂抹的矩形的图像、或者用与第1颜色不同的第2颜色实施了镶边后的该矩形的图像。本实施方式中的第2颜色为红色，但第2颜色并不限定于红色。图3是表示第1引导图像ga1的一例的图。在图3中，阴影表示第1颜色，虚线表示用第2颜色描绘的线。即，本实施方式中的第1引导图像ga1是被第1颜色均匀地涂抹且被第2颜色镶边的矩形的图像，由虚线包围的区域成为投射范围。第1引导图像ga1是本公开中的第1图像的一例。接收到第1信号的投影仪10将第1引导图像ga1投射到投射区域。如图4所示，视觉确认了显示于投射区域的第1引导图像ga1的用户在第1引导图像ga1所示的投射范围内设置投射对象物sc。在图4中，省略了表示第1颜色的阴影线的描绘。即，在投射区域中包含投射对象物sc，并且显示第1引导图像ga1。
37.显示控制部210b将指示拍摄开始的第2信号输出到照相机30。照相机30在接收到第2信号时，例如以数毫秒间隔等规定的周期进行拍摄，将拍摄图像数据输出到信息处理装置20。如上所述，照相机30以光轴朝向投射对象物sc的姿势设置于用户的居室。因此，在照相机30的拍摄图像ga2中，映现出显示有第1引导图像ga1的投射区域和设置于该投射区域的投射对象物sc。
38.每当从照相机30输入拍摄图像数据时，显示控制部210b基于拍摄图像数据生成图5所示的重叠图像ga4。图5是表示重叠图像ga4、拍摄图像数据表示的拍摄图像ga2、以及第2引导图像ga3的关系的图。第2引导图像ga3是表示照相机30的拍摄范围的图像。照相机30的拍摄范围根据照相机30的光轴的朝向以及照相机30的视场角来确定。本实施方式中的第2引导图像ga3是划分拍摄图像ga2的外缘的矩形状的框线的图像。在本实施方式中，该框线以与第1颜色不同且与第2颜色也不同的第3颜色着色，在图5中用单点划线表示基于第3颜色的着色。本实施方式中的第3颜色为蓝色，但第3颜色并不限定于蓝色。如图5所示，重叠图像ga4是对拍摄图像ga2重叠了第2引导图像ga3的图像。
39.如图6所示，显示控制部210b将重叠图像ga4显示于显示装置420。显示控制部210b将催促用户进行决定照相机30的位置的输入的用户界面图像ga5显示于显示装置420。如图6所示，本公开中的用户界面图像ga5是虚拟操作件的图像。
40.通知部210c进行催促使照相机30移动到第1引导图像ga1的中心部分与第2引导图像ga3的中心部分重叠的位置的通知。第1引导图像ga1的中心部分是指在第1引导图像ga1中以第1引导图像ga1的中心位置为中心的规定半径的第1圆的内侧的区域。第2引导图像ga3的中心部分是指在第2引导图像ga3中以第2引导图像ga3的中心位置为中心的该规定半径的第2圆的内侧的区域。第1引导图像ga1的中心位置是指第1引导图像ga1中的2个对角线的交点。同样地，第2引导图像ga3的中心位置是指第2引导图像ga3中的2个对角线的交点。规定第1引导图像ga1及第2引导图像ga3的中心部分的圆的半径也可以通过实验等确定为适当的值。第1引导图像ga1的中心部分与第2引导图像ga3的中心部分重叠是指第1圆的中心与第2圆的中心之间的距离小于前述的半径。
41.如上所述，第1引导图像ga1与投影仪10的投射范围对应，第2引导图像ga3与照相机30的拍摄范围对应。因此，第1引导图像ga1的中心部分与第2引导图像ga3的中心部分重叠相当于投影仪10的投射范围的中心部分与照相机30的拍摄范围的中心部分重叠。
42.在本实施方式中，通知部210c如图6所示那样在显示装置420中显示催促使照相机30移动到第1引导图像ga1的中心部分与第2引导图像ga3的中心部分重叠的位置的语句的消息m1。在本实施方式中，将消息m1显示于显示装置420相当于进行催促使照相机30移动到第1引导图像ga1的中心部分与第2引导图像ga3的中心部分重叠的位置的通知。通知部210c也可以通过朗读消息m1的声音的输出来进行上述通知。看到消息m1的用户一边通过显示于显示装置420的重叠图像ga4确认第1引导图像ga1的中心部分与第2引导图像ga3的中心部分的重叠情况，一边拿着照相机30进行移动。随着照相机30的移动，显示装置420所显示的重叠图像ga4中的第1引导图像ga1的中心部分与第2引导图像ga3的中心部分的重叠情况发生变化。
43.取得部210d基于重叠图像ga4判定第1引导图像ga1的中心部分与第2引导图像ga3的中心部分重叠的重叠区域的大小是否为阈值以上。该阈值也可以根据上述的第1圆或第2圆的面积来确定，作为该方式中的阈值的具体例，可举出上述的第1圆或第2圆的面积的60～90％的值。在重叠区域的大小小于阈值的情况下，取得部210d使通知部210c继续进行消息m1的显示。在重叠区域的大小为阈值以上的情况下，取得部210d使通知部210c结束消息m1的显示。图7是表示重叠区域的大小为阈值以上的情况下的重叠图像ga4以及用户界面图像ga5的显示例的图。由于重叠区域的大小为阈值以上，因此在图7所示的例子中，不显示消息m1。如图7所示，当消息m1不再显示于显示装置420时，用户进行对用户界面图像ga5的触摸操作。
44.在检测到对用户界面图像ga5的触摸操作的情况下，取得部210d首先向投影仪10输出指示停止第1引导图像ga1的投射的第3信号。接着，取得部210d将从照相机30输出的拍摄图像数据作为表示成为编辑投射图像时的基准的基准图像的基准图像数据写入存储装置230的易失性存储器。基准图像数据是表示未显示第1引导图像ga1的投射区域的拍摄图像ga2的图像数据。
45.输出部210e通过使用户进行对基准图像的编辑，取得表示投射图像的投射图像数
据。在本实施方式中，输出部210e首先向终端装置40发送基准图像数据并使图像描绘工具启动。正在执行图像描绘工具的终端装置40将基准图像数据所表示的图像显示于显示装置420。用户一边参考在基准图像中映现的投射对象物sc的位置以及形状，一边使用该图像描绘工具来编辑用于装饰投射对象物sc的投射图像。
46.图8是表示基于基准图像编辑的投射图像的一例的图。在图8中，基准图像中映现的投射对象物sc由虚线表示，赋予了横线的阴影的星星的图像是为了装饰投射对象物sc而由用户描绘的投射图像。图8中的横线的阴影表示例如黄色等对星星的图像赋予的颜色。输出部210e从终端装置40取得表示基于基准图像编辑后的投射图像的图像数据作为投射图像数据。基于基准图像编辑后的投射图像是本公开中的第2图像的一例。输出部210e将投射图像数据输出到投影仪10。投影仪10将从信息处理装置20输出的投射图像数据所表示的投射图像投射到投射区域。其结果，如图9所示，在投射对象物sc的周围显示用于装饰该投射对象物sc的星星的图像。图9中的横线的阴影表示例如黄色等对星星的图像赋予的颜色。
47.拍摄到基准图像时的照相机30的位置是第1引导图像ga1的中心部分与第2引导图像ga3的中心部分重叠的位置。第1引导图像ga1的中心部分与第2引导图像ga3的中心部分重叠是指投影仪10的投射范围的中心部分与照相机30的拍摄范围的中心部分重叠。投影仪10的投射范围的中心部分与照相机30的拍摄范围的中心部分重叠是指投影仪10的光轴的朝向与照相机30的光轴的朝向大致一致，并且投影仪10的视场角与照相机30的视场角大致一致。因此，基准图像中的投射对象物sc的位置和形状与从投影仪10观察投射对象物sc时的投射对象物sc的位置和形状大致一致。因此，用户通过一边参考在基准图像中映现的投射对象物sc的位置以及形状，一边描绘用于装饰投射对象物sc的投射图像，能够生成与投射对象物sc的位置以及形状匹配的投射图像。
48.按照程序pa进行工作的处理装置210执行图10所示的图像编辑方法。如图10所示，本实施方式的图像编辑方法包括投射控制处理sa110、显示控制处理sa120、通知处理sa130、取得处理sa140以及输出处理sa150。
49.在投射控制处理sa110中，处理装置210作为投射控制部210a发挥功能。在投射控制处理sa110中，处理装置210通过向投影仪10输出指示第1引导图像ga1的投射的第1信号，使投影仪10显示第1引导图像ga1。
50.在显示控制处理sa120中，处理装置210作为显示控制部210b发挥功能。在显示控制处理sa120中，处理装置210将指示拍摄的第2信号输出到照相机30。接下来，处理装置210将对由照相机30拍摄到的拍摄图像ga2重叠第2引导图像ga3得到的重叠图像ga4、以及用户界面图像ga5显示于显示装置420。
51.在通知处理sa130中，处理装置210作为通知部210c发挥功能。在通知处理sa130中，处理装置210通过将消息m1显示于显示装置420，进行催促使照相机30移动到第1引导图像ga1的中心部分与第2引导图像ga3的中心部分重叠的位置的通知。
52.在取得处理sa140中，处理装置210作为取得部210d发挥功能。在取得处理sa140中，处理装置210判定重叠区域的大小是否为阈值以上。在重叠区域的大小小于阈值的情况下，取得部210d使通知部210c继续进行消息m1的显示。在重叠区域的大小为阈值以上的情况下，取得部210d使通知部210c结束消息m1的显示。用户以消息m1不再显示于显示装置420为契机，进行对用户界面图像ga5的触摸操作。在检测到对用户界面图像ga5的触摸操作的
情况下，处理装置210向投影仪10输出指示停止第1引导图像ga1的投射的第3信号，将表示未显示第1引导图像ga1的投射区域的拍摄图像ga2的拍摄图像数据、即表示基准图像的基准图像数据写入存储装置230的易失性存储器。
53.在输出处理sa150中，处理装置210作为输出部210e发挥功能。在输出处理sa150中，处理装置210通过使用户对基准图像数据表示的基准图像进行编辑，取得表示投射图像的投射图像数据。接着，处理装置210将投射图像数据输出到投影仪10。
54.如上所述，在本实施方式中，对投影仪10的用户所要求的是根据消息m1决定照相机30的位置而进行触摸操作、以及参考照相机30的拍摄图像ga2来编辑投射图像。在专利文献1所公开的技术中，需要准备与投射对象物sc对应的三维模型、以及将该三维模型坐标变换为与投影装置视点图像一致的二维图像，需要与三维模型有关的专业知识以及与坐标变换有关的专业知识。与此相对，在本实施方式中，不需要准备与投射对象物sc对应的三维模型，也不需要在编辑投射图像时进行坐标变换。因此，根据本实施方式，不具有与三维模型等有关的专业知识的用户能够轻松地进行投影映射。
55.2.变形
56.上述实施方式能够如以下那样变形。
57.(1)在上述实施方式中，说明了本公开向实现投影仪10的用户的居室中的装饰的投影映射的应用例。但是，本公开既可以应用于实现零售店等店铺中的商品展示的投影映射，也可以应用于用于实现主题公园或活动会场等中的演出的投影映射。
58.(2)在上述实施方式中，一个投影仪10对一个投射对象物sc进行投射图像的投射。但是，也可以由相对于一个投射对象物sc分别配置于不同的位置的多个投影仪10进行投射图像的投射。通过从相对于一个投射对象物sc分别配置于不同的位置的多个投影仪10进行投射图像的投射，能够实现增加了明亮度的投影映射。另外，通过从相对于一个投射对象物sc分别配置于不同的位置的多个投影仪10进行投射图像的投射，能够极力减少影子，实现从360
°
的哪里都能看到的投影映射。
59.(3)上述实施方式中的取得部210d在进行了对用户界面图像ga5的触摸操作的情况下，输出停止第1引导图像ga1的显示的第3信号，之后，取得基准图像数据。但是，也可以省略第3信号的输出。在省略第3信号的输出的方式中，在从照相机30输出的拍摄图像数据表示的拍摄图像ga2中包含第1引导图像ga1。取得部210d也可以将表示包含第1引导图像ga1的拍摄图像ga2的拍摄图像数据直接作为基准图像数据写入存储装置230的易失性存储器，在该方式中的基准图像中包含第1引导图像ga1。另外，在省略第3信号的输出的方式中，取得部210d也可以通过对拍摄图像数据实施消除或减薄第1引导图像ga1的图像处理，生成基准图像数据。作为消除或减薄第1引导图像ga1的图像处理的具体例，可举出将与第1引导图像ga1对应的像素的像素值置换为位于该像素的周围且不与第1引导图像ga1对应的像素即周边像素的像素值的图像处理。作为消除或减薄第1引导图像ga1的图像处理的其他具体例，可举出将与第1引导图像ga1对应的像素的像素值置换为该像素的像素值和多个周边像素各自的像素值的平均值的图像处理。根据本方式，缩短了从进行了指示拍摄的输入操作起到实际进行拍摄为止的期间。
60.(4)上述实施方式中的取得部210d在判定为重叠区域的大小小于阈值的情况下，使通知部210c继续进行催促照相机30的移动的通知，在判定为重叠区域的大小为阈值以上
的情况下，使通知部210c的通知结束。但是，取得部210d也可以在判定为重叠区域的大小为阈值以上的情况下，使通知部210c进行催促用户进行指示照相机30的位置的决定的输入的通知。取得部210d也可以在判定为重叠区域的大小为阈值以上的情况下，不等待用户的输入操作而进行基准图像数据的存储。根据后者的方式，在重叠区域的大小为阈值以上的情况下，能够自动地存储基准图像数据，减轻用户的麻烦。在后者的方式中，不需要用户界面图像ga5的显示。另外，重叠区域的大小是否小于阈值的判定不是必须的，也可以省略。
61.(5)上述实施方式中的第2引导图像ga3是表示照相机30的拍摄范围的图像。但是，显示控制部210b为了明示照相机30的拍摄范围的中心部分，也可以代替第2引导图像ga3或者与第2引导图像ga3一起，将表示照相机30的拍摄范围的中心部分的第3引导图像显示于显示装置420。在该方式中，拍摄范围的中心部分与第1引导图像ga1的中心部分重叠的实际空间内的位置是指重叠图像ga4中的第3引导图像的中心部分或者第3引导图像自身与第1引导图像ga1的中心部分重叠的位置。
62.第3引导图像也可以是比第2引导图像ga3小的图像。作为比第2引导图像ga3小的第3引导图像的具体例，可举出前述的第2圆的图像、与前述的第2圆内接或外接的多边形的图像、或在第2圆的中心交叉的多个线段的图像。通过将比第2引导图像ga3小的第3引导图像与第2引导图像ga3一起显示，能够向用户明示照相机30的拍摄范围整体和该拍摄范围的中心部分。在代替第2引导图像ga3而显示比第2引导图像ga3小的第3引导图像的情况下，能够向用户明示照相机30的拍摄范围的中心部分。
63.第3引导图像也可以是与第2引导图像ga3相同大小的图像。作为与第2引导图像ga3相同大小的第3引导图像的具体例，可举出包含划分拍摄图像ga2的外缘的矩形状的框线和该框线的对角线的图像、或该对角线的图像。第3引导图像是本公开中的第3图像的一例。如果是前者的方式，则通过代替第2引导图像ga3而显示第3引导图像，能够向用户明示照相机30的拍摄范围整体和该拍摄范围的中心部分。如果是后者的方式，则在与第2引导图像ga3一起显示第3引导图像的情况下，能够向用户明示照相机30的拍摄范围整体和该拍摄范围的中心部分，在代替第2引导图像ga3而显示第3引导图像的情况下，能够向用户明示照相机30的拍摄范围的中心部分。
64.此外，也可以为了明示第1引导图像ga1的中心部分，而在第1引导图像ga1中包含表示第1引导图像ga1的中心部分的图像。作为表示第1引导图像ga1的中心部分的图像的具体例，可举出前述的第1圆的图像、与前述的第1圆内接或外接的多边形的图像、或在第1圆的中心交叉的多个线段的图像。
65.(6)在上述实施方式中，输出部210e以基准图像数据向易失性存储器的存储为契机，将该基准图像数据向终端装置40发送而启动图像描绘工具。但是，输出部210e也可以以基准图像数据向易失性存储器的存储为契机，将用于使用户输入图像描绘工具的启动的虚拟操作件等用户界面图像显示于显示装置420。在该方式中，输出部210e根据针对该用户界面图像的输入操作使终端装置40启动图像描绘工具。
66.(7)也可以省略上述实施方式中的通知处理sa130。在省略通知处理sa130的方式中，也可以省略通知部210c。这是因为，即使省略通知处理sa130，也能够轻松地生成投射图像。在以投影仪10的电源接通为契机而投影仪10投射第1引导图像ga1的情况下，能够省略投射控制部210a和投射控制处理sa110。由于能够根据拍摄图像ga2掌握照相机30的拍摄范
围，并且还能够掌握该拍摄范围的中心部分，因此也可以省略第2引导图像ga3的重叠。
67.(8)在上述实施方式中，照相机30与终端装置40是独立的装置，但照相机30也可以包含于终端装置40。例如，在终端装置40为具备照相机的智能手机的情况下，该智能手机的照相机承担照相机30的作用即可。另外，在上述实施方式中，信息处理装置20是与终端装置40、照相机30以及投影仪10均不同的装置。但是，信息处理装置20也可以包含于终端装置40、照相机30以及投影仪10中的任意方。
68.(9)上述实施方式中的投射控制部210a、显示控制部210b、通知部210c、取得部210d以及输出部210e是软件模块。但是，投射控制部210a、显示控制部210b、通知部210c、取得部210d以及输出部210e中的任意一个或多个或者全部也可以是asic(application specific integrated circuit)等硬件模块。即使投射控制部210a、显示控制部210b、通知部210c、取得部210d以及输出部210e中的任意一个或多个或者全部是硬件模块，也能够起到与上述实施方式相同的效果。
69.(10)程序pa可以是以单体制造的，也可以是有偿或无偿地提供的。作为提供程序pa时的具体方式，可举出在闪存rom等计算机可读取的记录介质中写入程序pa来提供的方式、或者通过经由因特网等电气通信线路的下载来提供程序pa的方式。通过按照由这些方式提供的程序pa使一般的计算机工作，能够使该计算机执行本公开的图像编辑方法。
70.3.根据实施方式以及各变形例中的至少1个而掌握的方式
71.本公开不限于上述的实施方式以及变形例，在不脱离其主旨的范围内能够以各种方式实现。例如，本公开也能够通过以下的方式来实现。与以下记载的各方式中的技术特征对应的上述实施方式中的技术特征为了解决本公开的课题的一部分或全部，或者为了实现本公开的效果的一部分或全部，能够适当地进行替换、组合。另外，该技术特征在本说明书中只要不是作为必须的特征进行说明，就能够适当删除。
72.本公开的图像编辑方法的一个方式包含取得处理以及输出处理。在取得处理中，取得照相机对包含成为来自投影仪的图像的投射目的地的投射对象物且通过投影仪显示第1引导图像的投射区域的拍摄图像。投射区域是配置投影仪和投射对象物的实际空间内的区域。拍摄该拍摄图像的照相机的位置是照相机的拍摄范围的中心部分与第1引导图像的中心部分重叠的实际空间内的位置。在输出处理中，通过对在取得处理中取得的拍摄图像进行编辑而得到投射图像，该投射图像被发送到投影仪。根据本方式的图像编辑方法，即使是不具有专业知识的用户，也能够轻松地进行投影映射。
73.更优选的方式的图像编辑方法也可以还包括：在显示装置上显示重叠图像，该重叠图像是通过利用照相机对投射有第1引导图像的投射区域进行拍摄而得到的图像与表示拍摄范围的中心部分的第3引导图像重叠而成的。第3引导图像是本公开中的第3图像的一例。本方式中的照相机的实际空间内的位置是在重叠图像中第1引导图像的中心部分与第3引导图像的中心部分或第3引导图像自身重叠的位置。根据本方式，用户能够一边根据重叠图像中的第1引导图像和第3引导图像掌握照相机的拍摄范围的中心部分与投影仪的投射范围的中心部分的重叠程度，一边决定照相机的位置。
74.更优选的方式的图像编辑方法也可以还包括：在取得了所述拍摄图像的情况下，显示用户界面图像，该用户界面图像用于调出对所述拍摄图像进行编辑的编辑功能，本方式中的所述第2图像可以通过利用所述编辑功能对所述拍摄图像进行编辑而得到。根据本
方式，用户能够通过对用户界面图像的操作来调用编辑拍摄图像的编辑功能。
75.更优选的方式的图像编辑方法也可以包括：输出催促使所述照相机移动到所述拍摄范围的中心部分与所述第1图像的中心部分重叠的所述实际空间内的位置的通知。根据本方式，能够促使用户使照相机移动到照相机的拍摄范围的中心部分与第1引导图像的中心部分重叠的实际空间内的位置。
76.更优选的方式的图像编辑方法也可以包括：判定重叠区域的大小是否为阈值以上；以及在重叠区域的大小小于阈值的情况下，输出前述的通知。重叠区域是指在重叠图像中照相机的拍摄范围的中心部分与第1引导图像的中心部分重叠的区域。根据本方式，在重叠区域的大小小于阈值的情况下，能够促使用户使照相机移动到照相机的拍摄范围的中心部分与第1引导图像的中心部分重叠的实际空间内的位置。
77.更优选的方式的图像编辑方法也可以包括：在重叠区域的大小为阈值以上的情况下使照相机拍摄投射区域。根据本方式，在重叠区域的大小为阈值以上的情况下，能够使照相机自动地拍摄投射区域，减轻用户的麻烦。
78.在更优选的方式的图像编辑方法中，取得拍摄图像也可以是通过对未显示第1引导图像的投射区域进行拍摄来取得拍摄图像。根据本方式，能够基于未显示第1引导图像的投射区域的拍摄图像来编辑投射图像。
79.本公开的图像编辑系统的一个方式包含照相机和控制照相机的处理装置。处理装置执行取得处理和输出处理。在取得处理中，处理装置取得照相机对包含成为来自投影仪的图像的投射目的地的投射对象物且通过投影仪显示第1引导图像的投射区域的拍摄图像。投射区域是配置投影仪和投射对象物的实际空间内的区域。拍摄该拍摄图像的照相机的位置是照相机的拍摄范围的中心部分与第1引导图像的中心部分重叠的实际空间内的位置。在输出处理中，处理装置将表示通过对在取得处理中取得的拍摄图像进行编辑而得到的投射图像的投射图像数据发送到投影仪。根据本方式的图像编辑系统，即使是不具有专业知识的用户，也能够轻松地进行投影映射。
80.本公开的程序的一个方式使计算机执行取得处理以及输出处理。按照该程序进行工作的计算机在取得处理中，取得照相机对包含成为来自投影仪的图像的投射目的地的投射对象物且通过投影仪显示第1引导图像的投射区域的拍摄图像。投射区域是配置投影仪和投射对象物的实际空间内的区域。拍摄该拍摄图像的照相机的位置是照相机的拍摄范围的中心部分与第1引导图像的中心部分重叠的实际空间内的位置。按照该程序进行工作的计算机在输出处理中，将表示通过对在取得处理中取得的拍摄图像进行编辑而得到的投射图像的投射图像数据发送到投影仪。根据本方式的程序，即使是不具有专业知识的用户，也能够轻松地进行投影映射。

技术特征：
1.一种图像编辑方法，其包括：利用照相机从实际空间内的如下位置对所述实际空间内的投射区域进行拍摄来取得拍摄图像，其中，所述实际空间内的投射区域是包含成为来自投影仪的图像的投射目的地的投射对象物并且通过所述投影仪显示第1图像的区域，所述位置是所述照相机的拍摄范围的中心部分与所述第1图像的中心部分重叠的位置；以及将通过编辑所述拍摄图像而得到的第2图像发送到投影仪。2.根据权利要求1所述的图像编辑方法，其中，所述图像编辑方法还包括：将重叠图像显示于显示装置，所述重叠图像是将利用所述照相机对显示有所述第1图像的所述投射区域进行拍摄而得到的图像与表示所述拍摄范围的中心部分的第3图像重叠而成的，所述位置是所述第3图像的中心部分与所述重叠图像中的所述第1图像的中心部分重叠的位置。3.根据权利要求1或2所述的图像编辑方法，其中，所述图像编辑方法还包括：在取得了所述拍摄图像的情况下，显示用户界面图像，所述用户界面图像用于调出对所述拍摄图像进行编辑的编辑功能，所述第2图像是利用所述编辑功能对所述拍摄图像进行编辑而得到的。4.根据权利要求1或2所述的图像编辑方法，其中，所述图像编辑方法还包括：输出催促使所述照相机移动到所述位置的通知。5.根据权利要求4所述的图像编辑方法，其中，所述图像编辑方法还包括：判定在所述重叠图像中所述第1图像的中心部分与所述拍摄范围的中心部分重叠的区域的大小是否小于阈值，输出所述通知是在所述区域的大小小于所述阈值的情况下，输出所述通知。6.根据权利要求5所述的图像编辑方法，其中，在所述区域的大小为所述阈值以上的情况下，使所述照相机拍摄所述投射区域。7.根据权利要求1或2所述的图像编辑方法，其中，取得所述拍摄图像是使所述照相机对未显示所述第1图像的所述投射区域进行拍摄来取得所述拍摄图像。8.一种图像编辑系统，其包括：照相机；以及处理装置，其控制所述照相机，所述处理装置执行以下处理：利用照相机从实际空间内的如下位置对所述实际空间内的投射区域进行拍摄来取得拍摄图像，其中，所述实际空间内的投射区域是包含成为来自投影仪的图像的投射目的地的投射对象物并且通过所述投影仪显示第1图像的区域，所述位置是所述照相机的拍摄范围的中心部分与所述第1图像的中心部分重叠的位置；以及将通过编辑所述拍摄图像而得到的第2图像发送到投影仪。9.一种存储介质，其存储有程序，该程序使计算机执行以下处理：利用照相机从实际空间内的如下位置对所述实际空间内的投射区域进行拍摄来取得拍摄图像，其中，所述实际空间内的投射区域是包含成为来自投影仪的图像的投射目的地
的投射对象物并且通过所述投影仪显示第1图像的区域，所述位置是所述照相机的拍摄范围的中心部分与所述第1图像的中心部分重叠的位置；以及将通过编辑所述拍摄图像而得到的第2图像发送到投影仪。

技术总结
提供图像编辑方法、图像编辑系统和存储介质，使得不具有专业知识的用户能够轻松地进行投影映射。在配置有投影仪(10)和投射对象物(SC)的实际空间中由照相机(30)拍摄包含投射对象物(SC)并且通过投影仪(10)显示第1引导图像的投射区域时的拍摄范围的中心部分与第1引导图像的中心部分重叠的位置，信息处理装置(20)使照相机(30)拍摄投射区域，由此取得拍摄图像。信息处理装置(20)通过使用户编辑该拍摄图像来生成投射图像，将表示所生成的投射图像的投射图像数据发送到投影仪(10)。的投射图像数据发送到投影仪(10)。的投射图像数据发送到投影仪(10)。


技术研发人员：北林一良 宫田爱惠 西本徹太
受保护的技术使用者：精工爱普生株式会社
技术研发日：2023.02.15
技术公布日：2023/8/21