内容提供系统、内容提供方法以及内容提供程序与流程

1.本发明的一个方面涉及内容提供系统、内容提供方法和内容提供程序。


背景技术：

2.在专利文献1中，公开了如下机制：使用虚拟空间(虚拟的3维虚拟空间)的内容的视听者能够在虚拟空间内新追加自身的虚拟形象对象(avatar object)，在以后再现该内容的其他视听者终端显示所追加的虚拟形象对象。
3.现有技术文献
4.专利文献
5.专利文献1：日本专利第6707111号公报


技术实现要素：

6.发明所要解决的技术问题
7.根据上述机制，在视听过去被其他视听者视听过的内容时，能够视听包含该其他视听者的虚拟形象的内容，因此能够得到正在与其他视听者一起视听内容的连带感。然而，在上述机制中，从提高对内容进行视听的用户的便利性的观点来看，存在进一步改善的余地。
8.本发明的一个方面的目的在于提供一种能够有效地提高对内容进行视听的用户的便利性的内容提供系统、内容提供方法以及内容提供程序。
9.用于解决技术问题的手段
10.根据本发明的一个方面的内容提供系统包括至少一个处理器。至少一个处理器进行如下处理：将与视听表示虚拟空间的规定的内容的第一用户对应的第一虚拟形象配置在虚拟空间内，生成动作日志信息，动作日志信息记录有动作信息和特定动作信息，动作信息表示在第一用户视听内容的期间由第一用户操作的第一虚拟形象的动作，特定动作信息表示第一虚拟形象进行预先决定的特定动作的时刻以及该特定动作的内容，当在第一用户视听内容之后第二用户视听内容时，再现内容，并且基于动作日志信息中包含的动作信息再现第一虚拟形象的动作，通过参照动作日志信息中包含的特定动作信息，在再现中的第一虚拟形象进行特定动作的时刻，将表示特定动作的内容的显示对象与第一虚拟形象相关联地配置。
11.在上述内容提供系统中，对于在过去对内容进行视听的第一用户之后视听该内容的第二用户，再现第一用户在视听中所操作的第一虚拟形象的动作。由此，第二用户能够在内容视听中感受到与其他用户(第一用户)的连带感。并且，将表示第一虚拟形象在内容视听中进行的特定动作的内容的显示对象在进行该特定动作的时刻与第一虚拟形象相关联地配置。由此，能够将第一虚拟形象进行的特定动作的内容作为关于在内容视听中应采取的行动的参考信息，在适当的时刻视觉性地提示给第二用户。其结果，能够有效地提高视听内容的用户(第二用户)的便利性。
12.发明效果
13.根据本发明的一个方面，能够提供能够有效地提高对内容进行视听的用户的便利性的内容提供系统、内容提供方法和内容提供程序。
附图说明
14.图1是表示实施方式的内容提供系统的应用的一例的图。
15.图2是表示与图1的内容提供系统关联的硬件结构的一例的图。
16.图3是表示与图1的内容提供系统的虚拟形象记录处理关联的功能结构的一例的图。
17.图4是表示图1的内容提供系统的虚拟形象记录处理的动作的一例的时序图。
18.图5是示出提供给第一用户的内容图像的示例的图。
19.图6是示意虚拟形象的特定动作的一例的图。
20.图7是示意虚拟形象的特定动作的一例的图。
21.图8是表示与图1的内容提供系统的虚拟形象再现处理关联的功能结构的一例的图。
22.图9是表示图1的内容提供系统的虚拟形象再现处理的动作的一例的时序图。
23.图10是示出显示在内容图像上的显示对象的一例的图。
24.图11是表示内容图像中显示的第一虚拟形象和第三虚拟形象的显示例的图。
具体实施方式
25.以下，参照附图详细说明本发明中的实施方式。另外，在附图的说明中，对相同或同等的要素标注相同的标记并省略重复的说明。
26.(系统的概况)
27.实施方式所涉及的内容提供系统是向用户发布内容的计算机系统。内容由计算机或计算机系统提供，是人能够识别的信息。表示内容的电子数据被称为内容数据。内容的表现形式没有限定。内容例如可以通过图像(例如照片、影像等)、文档、声音、音乐、或它们中的任意2个以上的要素的组合来表现。内容能够用于各种方式的信息传递或交流。内容例如可以用于娱乐、新闻、教育、医疗、游戏、聊天、商业交易、演讲、研讨会、研修等各种场景或目的。发布是指经由通信网络或广播网络向用户发送信息的处理。
28.内容提供系统通过向用户终端发送内容数据来向用户(视听者)提供内容。在一个例子中，内容由发布者提供。发布者是想要向视听者传递信息的人，是内容的发送者。用户(视听者)是想要得到该信息的人，是内容的利用者。
29.在本实施方式中，内容至少使用表现虚拟空间的图像来表现。即，内容数据中至少包含表示内容的内容图像。内容图像是人能够通过视觉来识别某些信息的像。内容图像可以是动态图像(影像)，也可以是静态图像。
30.在一例中，内容图像表现虚拟对象所存在的虚拟空间。虚拟对象是不存在于现实世界中，而仅在计算机系统上表现的物体。虚拟对象使用与实拍图像独立的图像素材，通过2维或3维的计算机图形(cg)来表现。虚拟对象的表现方法没有限定。例如，虚拟对象可以使用动画素材来表现，也可以基于实拍图像来表现为接近真身。虚拟空间是通过显示在计算
机上的图像来表现的虚拟的2维或3维的空间。内容图像例如是表示从设定在虚拟空间内的虚拟摄像机看到的风景的图像。虚拟摄像机是以与观看内容图像的用户的视线对应的方式设定在虚拟空间内的虚拟性的视点(虚拟视点)。内容图像或虚拟空间还可以包含现实对象，该现实对象是现实世界中实际存在的物体。
31.作为虚拟对象的一例，有作为用户的分身的虚拟形象。虚拟形象不是被拍摄的人真身，而是使用与原图像独立的图像素材，通过2维或3维的计算机图形(cg)来表现。虚拟形象的表现方法没有限定。例如，虚拟形象可以使用动画素材来表现，也可以基于实拍图像来表现为接近本体。上述虚拟摄像机的位置和朝向可以设定为与虚拟形象的视点和视线一致。在这种情况下，向用户提供第一人视点的内容图像。由此，用户能够视觉辨认与来自于配置于虚拟空间内的虚拟形象的视点(虚拟摄像机)的视界对应的内容图像。用户通过观看内容图像，能够体验增强现实(ar：augmented reality)、虚拟现实(vr：virtual reality)、或者混合现实(mr：mixed reality)。
32.内容提供系统也可以用于在实时发布后的给定的期间内能够视听内容的时移。或者，内容提供系统也可以用于能够在任意的时刻视听内容的按需发布。内容提供系统发布使用过去生成并保存的内容数据来表现的内容。
33.在本发明中，将数据或信息从第一计算机向第二计算机“发送”这一表述意味着用于数据或信息最终到达第二计算机的发送。即，上述表达包括在该发送中其他计算机或通信装置对数据或信息进行中继的情况。
34.内容的目的和使用场景不受限制。例如，内容也可以是教育用内容，在该情况下，内容数据是教育用内容数据。教育用内容例如是教师为了向学生进行授课而使用的内容。教师是指教授学业、技艺等的人，学生是指接受该教授的人。教师是发布者的一例，学生是视听者的一例。教师可以是具有教师资格的人，也可以是不具有教师资格的人。授课是指教师向学生教授学业、技艺等。对于教师以及学生各自都没有年龄以及所属的限定，因此，教育用内容的目的以及利用场景也不被限定。例如，教育用内容可以在保育园、幼儿园、小学、中学、高等学校、大学、大学院、专业学校、预备学校、在线学校等各种学校中使用，也可以在学校以外的场所或场面中使用。与此相关，教育用内容能够以幼儿教育、义务教育、高等教育、生涯学习等各种目的来使用。在一个例子中，教育用内容包括与老师或者学生对应的虚拟形象，这意味着该虚拟形象在教育用内容的至少一部分的场景中出场。
35.[内容提供系统的整体结构]
[0036]
图1是表示实施方式的内容提供系统1的应用的一例的图。在本实施方式中，内容提供系统1具备服务器10、用户终端20(用户终端20a、20b、20c)、内容数据库30以及动作日志信息数据库40。
[0037]
服务器10是将内容数据发布给用户终端20的计算机。服务器10经由通信网络n与至少一个用户终端20连接。一个用户终端20可以由多个用户共享，也可以按每个用户准备一台用户终端20。在本实施方式中，服务器10至少与3台用户终端20a、20b、20c连接。服务器10还连接到内容数据库30和动作日志信息数据库40。通信网络n的结构没有限定。例如，通信网络n可以构成为包含因特网，也可以构成为包含内部网。
[0038]
用户终端20是由内容的视听者(即，利用内容的用户)使用的计算机。在本实施方式中，用户对应于利用教育用内容的学生。用户终端20具有访问内容提供系统1(服务器10)
并接收和显示内容数据的功能。用户终端20的种类以及结构没有限定。例如，用户终端20可以构成为包括高功能便携电话机(智能手机)、平板终端、可穿戴终端(例如，头戴式显示器(hmd)、智能眼镜等)、膝上型个人计算机、便携电话机等便携终端。或者，用户终端20可以包括台式个人计算机等固定型终端而构成。用户终端20也可以由上述例示的2种以上的终端的组合构成。
[0039]
用户通过操作用户终端20登录到内容提供系统1，能够利用(视听)内容。作为一个例子，用户能够经由自身的虚拟形象，在由内容表现的虚拟空间内进行各种体验。在本实施方式中，以内容提供系统1的用户已经登录为前提。
[0040]
内容数据库30是存储所生成的内容数据的非易失性的存储介质或存储装置。内容数据库30可以说是现有的内容的库。内容数据通过服务器10或其他计算机等任意的计算机存储在内容数据库30中。
[0041]
内容数据在与唯一地识别内容的内容id相关联的基础上存储在内容数据库30中。在一例中，内容数据包括虚拟空间数据、模型数据和脚本。
[0042]
虚拟空间数据是表示构成内容的虚拟空间的电子数据。例如，虚拟空间数据能够包括表示构成背景的各个虚拟对象的配置、虚拟摄像机的位置、或者虚拟光源的位置等的信息。
[0043]
模型数据是用于规定构成内容的虚拟对象的规格的电子数据。虚拟对象的规格是指用于控制虚拟对象的约定或方法。例如，虚拟对象的规格包含虚拟对象的结构(例如形状以及尺寸)、动作以及声音中的至少一个。虚拟形象的模型数据的数据结构没有限定，可以任意地设计。例如，模型数据可以包括与构成虚拟形象的多个关节和多个骨头有关的信息、表示虚拟形象的外观设计的图形数据、虚拟形象的属性、以及作为虚拟形象的标识符的虚拟形象id。作为与关节以及骨头有关的信息的例子，可举出各个关节的3维坐标和相邻的关节的组合(即骨头)。但是，该信息的结构并不限定于此，可以任意地设计。虚拟形象的属性是指为了赋予虚拟形象特征而设定的任意信息，例如可以包括公称尺寸、声质或性格等。
[0044]
所谓脚本，是指规定虚拟空间内的伴随时间的经过的各个虚拟对象、虚拟摄像机、或虚拟光源的动作的电子数据。脚本可以是用于决定内容的故事的信息。虚拟对象的动作不限于能够通过视觉识别的动作，也可以包括通过听觉识别的声音的产生。脚本包含表示关于进行动作的各个虚拟对象，在哪个时刻如何进行动作的运动数据。
[0045]
内容数据可以包括关于现实对象的信息。例如，内容数据也可以包含反映了现实对象的实拍图像。在内容数据包含现实对象的情况下，脚本可以进一步定义在哪个时刻将该现实对象映现在哪里。
[0046]
动作日志信息数据库40是存储动作日志信息的非易失性的存储介质或存储装置，该动作日志信息记录有过去视听过内容的用户在内容视听中操作的虚拟形象的动作内容。稍后将描述动作日志信息的细节。
[0047]
各个数据库的设置场所没有限定。例如，内容数据库30和动作日志信息数据库40中的至少一方可以设置在与内容提供系统1不同的计算机系统内，也可以是内容提供系统1的构成要素。
[0048]
[内容提供系统的硬件结构]
[0049]
图2是示出与内容提供系统1关联的硬件结构的一例的图。图2表示作为服务器10
发挥功能的服务器计算机100和作为用户终端20发挥功能的终端计算机200。
[0050]
作为一例，服务器计算机100具备处理器101、主存储部102、辅助存储部103以及通信部104作为硬件构成要素。
[0051]
处理器101是执行操作系统以及应用程序的运算装置。作为处理器的例子，可举出cpu(central processing unit：中央处理单元)及gpu(graphics processing unit：图形处理单元)，但处理器101的种类并不限定于这些。例如，处理器101也可以是传感器以及专用电路的组合。专用电路可以是fpga(field-programmable gate array：现场可编程门阵列)那样的可编程电路，也可以是其他种类的电路。
[0052]
主存储部102是存储用于实现服务器10的程序、从处理器101输出的运算结果等的装置。主存储部102例如由rom(read only memory：只读存储器)或ram(random access memory：随机存取存储器)等构成。
[0053]
辅助存储部103一般是能够存储比主存储部102更大量的数据的装置。辅助存储部103例如由硬盘、闪存等非易失性存储介质构成。辅助存储部103存储用于使服务器计算机100作为服务器10发挥功能的服务器程序p1和各种数据。例如，辅助存储部103可以存储与虚拟形象等虚拟对象以及虚拟空间中的至少一方相关的数据。内容提供程序可以被实现为服务器程序p1。
[0054]
通信部104是经由通信网络n与其他计算机之间执行数据通信的装置。通信部104例如由网卡或无线通信模块构成。
[0055]
服务器10的各功能要素通过使处理器101或主存储部102读入服务器程序p1，并使处理器101执行该服务器程序p1来实现。服务器程序p1包含用于实现服务器10的各功能要素的代码。处理器101按照服务器程序p1使通信部104动作，执行主存储部102或辅助存储部103中的数据的读出和写入。通过这样的处理，实现服务器10的各功能要素。
[0056]
服务器10可以由一个或多个计算机构成。在使用多个计算机的情况下，经由通信网络将该多个计算机相互连接，由此在逻辑上构成一个服务器10。
[0057]
作为一例，终端计算机200具备处理器201、主存储部202、辅助存储部203、通信部204、输入接口205以及输出接口206作为硬件构成要素。
[0058]
处理器201是执行操作系统以及应用程序的运算装置。处理器201例如可以是cpu或gpu，但处理器201的种类不限于此。
[0059]
主存储部202是存储用于实现用户终端20的程序、从处理器201输出的运算结果等的装置。主存储部202例如由rom或ram等构成。
[0060]
辅助存储部203一般是能够存储比主存储部202更大量的数据的装置。辅助存储部203例如由硬盘、闪存等非易失性存储介质构成。辅助存储部203存储用于使终端计算机200作为用户终端20发挥功能的客户端程序p2和各种数据。例如，辅助存储部203可以存储与虚拟形象等虚拟对象以及虚拟空间中的至少一方相关的数据。内容提供程序可以被实现为客户端程序p2。
[0061]
通信部204是经由通信网络n与其他计算机之间执行数据通信的装置。通信部204例如由网卡或无线通信模块构成。
[0062]
输入接口205是基于用户的操作或动作来接受数据的装置。例如，输入接口205由控制器、键盘、操作按钮、指示设备、麦克风、传感器以及摄像机中的至少一个构成。键盘和
操作按钮可以显示在触摸面板上。对应于输入接口205的类型不受限制，输入到输入接口205的数据也不受限制。例如，输入接口205可以接受由键盘、操作按钮或指示设备输入或选择的数据。或者，输入接口205也可以接受由麦克风输入的声音数据。或者，输入接口205也可以接受由摄像机拍摄到的图像数据(例如，影像数据或静态图像数据)。或者，输入接口205也可以将表示通过使用了传感器或者摄像机的运动捕捉功能而检测到的用户的非语言活动(例如，视线、用户的头部的运动、用户的头部以外的身体的一部分(例如手等)的运动(所谓的手势)、表情等)的数据作为运动数据来接受。
[0063]
输出接口206是输出由终端计算机200处理后的数据的装置。例如，输出接口206由监视器、触摸面板、hmd以及扬声器中的至少一方构成。监视器、触摸面板、hmd等显示装置将处理后的数据显示在画面上。在本实施方式中，内容图像被输出显示于hmd。扬声器输出由处理后的声音数据表示的声音。
[0064]
用户终端20的各功能要素通过使处理器201或主存储部202读入客户端程序p2并执行该客户端程序p2来实现。客户端程序p2包含用于实现用户终端20的各功能要素的代码。处理器201按照客户端程序p2，使通信部204、输入接口205或输出接口206动作，进行主存储部202或辅助存储部203中的数据的读出及写入。通过该处理，实现用户终端20的各功能要素。
[0065]
服务器程序p1以及客户端程序p2中的至少一方也可以在固定地记录于cd-rom、dvd-rom、半导体存储器等有形的记录介质中的基础上来提供。或者，这些程序中的至少一方也可以作为叠加于载波的数据信号而经由通信网络来提供。这些程序可以分别提供，也可以一起提供。
[0066]
[内容提供系统的功能细节]
[0067]
内容提供系统1主要构成为能够执行虚拟形象记录处理和虚拟形象再现处理。
[0068]
虚拟形象记录处理是在第一用户对内容进行视听的期间，记录由该第一用户操作的第一虚拟形象的动作的处理。
[0069]
虚拟形象再现处理是如下处理：在进行了针对至少一个第一用户的虚拟形象记录处理之后第二用户在对内容进行视听时，在提供给该第二用户的内容图像中再现内容，并且再现与通过虚拟形象记录处理而记录的至少一个第一用户对应的第一虚拟形象的动作。
[0070]
以下，依次对虚拟形象记录处理和虚拟形象再现处理进行说明。此外，在本实施方式中，虚拟形象是人型的对象(参照图10以及图11)，但虚拟形象的形态并不限定于特定的形态。
[0071]
[与虚拟形象记录处理关联的功能结构]
[0072]
图3是表示内容提供系统1的与虚拟形象记录处理关联的功能结构的一例的图。在此，以记录与利用用户终端20a的第一用户对应的第一虚拟形象的动作的情况为例进行说明。
[0073]
服务器10作为与虚拟形象记录处理关联的功能要素而具备接收部11、内容发送部12以及日志生成部13。接收部11接收从用户终端20发送的数据信号。内容发送部12响应于来自用户的请求而将内容数据发送到用户终端20。日志生成部13基于从用户终端20取得的虚拟形象的动作信息，生成虚拟形象的动作日志信息，并保存于动作日志信息数据库40。
[0074]
用户终端20a作为与虚拟形象记录处理关联的功能要素而具备请求部21、接收部
22、显示控制部23以及动作信息发送部24。请求部21向服务器10请求与内容相关的各种控制。接收部22接收内容数据。显示控制部23对接收到的内容数据进行处理，将内容显示在用户终端20a的显示装置上。动作信息发送部24向服务器10发送表示由第一用户操作的第一虚拟形象的动作的动作信息。
[0075]
[与虚拟形象记录处理关联的系统的动作]
[0076]
参照图4，对与虚拟形象记录处理相关联的内容提供系统1的动作进行说明，并且对本实施方式所涉及的内容提供方法的一部分进行说明。图4是表示内容提供系统1的与虚拟形象记录处理关联的动作的一例的时序图。
[0077]
在步骤s101中，用户终端20a的请求部21向服务器10发送内容请求。内容请求是用于向服务器10请求内容的再现(即，开始内容的视听)的数据信号。该内容请求由服务器10的接收部11接收。
[0078]
在步骤s102中，响应于来自用户终端20a的内容请求，服务器10的内容发送部12从内容数据库30读取内容数据，并且将内容数据发送到用户终端20a。该内容数据由用户终端20a的接收部22接收。
[0079]
在步骤s103中，用户终端20a的显示控制部23再现内容。在本实施方式中，由内容提供系统1发布的内容是表示授课的场景的教育用内容。作为一例，内容包含表示教师的授课风景的影像的讲义数据。讲义数据例如是3维的(有深度的)影像数据。作为一例，由内容表现的虚拟空间包括学校的教室那样的背景，并且包括在虚拟空间内的规定位置显示讲义数据(影像)的区域。在本实施方式中，内容的再现是指在虚拟空间内再现上述讲义数据。
[0080]
在步骤s104，显示控制部23在虚拟空间内配置与第一用户对应的第一虚拟形象。例如，显示控制部23在模仿教室的虚拟空间中，在讲义数据的显示区域的前方的位置(即，能够视觉辨认讲义数据的位置)配置第一虚拟形象。
[0081]
在步骤s105，显示控制部23基于配置于虚拟空间内的第一虚拟形象的视点(即，设定于虚拟空间内的第一用户的虚拟视点)，生成用于向第一用户提示的内容图像(内容影像)。此外，在本实施方式中，用户终端20a(显示控制部23)执行基于内容数据和第一用户的虚拟视点来生成第一用户用的内容图像的处理(绘制)，但也可以由服务器10执行绘制。
[0082]
图5是示出提供给第一用户的内容图像im1的一例的图。在图5的例子中，内容图像im1包含显示讲义数据(影像)的区域51的一部分(即，包含在从第一用户的虚拟视点出发的视野中的范围)。另外，在内容图像im1中，显示有由第一用户操作的第一虚拟形象a1的一部分(手的部分)、以及能够经由第一虚拟形象a1操作的工具对象52(作为一个例子，模仿了书的对象)。
[0083]
在步骤s106，第一用户通过操作用户终端20a，从而操作第一虚拟形象a1。第一用户操作第一虚拟形象a1的方法不限于特定的方法。例如，第一用户可以通过操作用户终端20a的控制器(输入接口205的一例)，从而操作第一虚拟形象a1。或者，例如在用户终端20a具有安装于第一用户的手上的加速度传感器、陀螺仪传感器等传感器(输入接口205的一例)的情况下等，第一用户可以通过手势(即，由上述传感器检测的用户的手的运动)来操作第一虚拟形象a1。
[0084]
作为能够对虚拟形象进行的操作的例子，可列举使虚拟形象的手的部分在虚拟空间内移动的操作、经由虚拟形象的手的部分对虚拟空间内的规定的对象执行某种处理的操
作等。此外，能够对虚拟形象进行操作的部分不限于虚拟形象的手的部分。例如，在用户身体的多个部位设置有传感器且能够感测各部位的运动的情况下，能够对虚拟形象进行操作的部分也可以是根据用户身体的运动而运动的虚拟形象的多个部位(即，与设置有传感器的用户身体的各部位对应的部位)。
[0085]
在步骤s107，用户终端20a的动作信息发送部24向服务器10发送表示在步骤s106操作的第一虚拟形象a1的动作的动作信息。动作信息与内容(讲义数据)的再现位置(例如，将讲义数据的开始时刻设为基准“0：00”的情况下的再现时刻)建立关联。例如，第一虚拟形象a1的动作信息是记录了以规定时间间隔将从内容的再现开始时到再现结束时为止进行划分而成的各时刻的第一虚拟形象a1的状态(例如，构成第一虚拟形象a1的各部的位置坐标等)的信息。即，第一虚拟形象a1的动作信息是用于再现从内容的再现开始时到再现结束时为止的第一虚拟形象a1的运动的信息。
[0086]
在步骤s108，服务器10的日志生成部13基于从用户终端20a(动作信息发送部24)接收的第一虚拟形象a1的动作信息，生成第一虚拟形象a1的动作日志信息。动作日志信息除了包含第一虚拟形象a1的动作信息，还包含表示第一虚拟形象a1进行预定的特定动作的时刻以及该特定动作的内容的特定动作信息。例如，日志生成部13从第一虚拟形象a1的动作信息中提取特定动作，并针对所提取的每个特定动作生成特定动作信息。然后，日志生成部13生成包含第一虚拟形象a1的动作信息和所提取的每个特定动作的特定动作信息的动作日志信息。
[0087]
作为一例，特定动作包括如下的动作：从预先登记为用于授课的学习的项目的一个以上的项目对象中选择规定的项目对象并且在虚拟空间中生成所选择的项目对象。参照图5至图7，对这样的特定动作的具体例进行说明。
[0088]
如图5所示，首先，第一用户一边确认内容图像im1，一边将第一虚拟形象a1的手对准工具对象52的位置，执行选择工具对象52的操作。由此，如图6所示，显示作为在授课的学习中使用的项目而预先登记的一个以上(在该例子中为8个)项目对象53的列表。在图6的例子中，猛犸象、菊石、皮卡虫等过去的生物的模型被登记为项目对象53。第一用户例如将第一虚拟形象a1的手的位置对准想要选择的项目对象53，并执行选择该项目对象53的操作。由此，如图7所示，在第一虚拟形象a1的眼前的位置生成所选择的项目对象53(在该示例中为猛犸象的模型)。第一用户例如能够经由第一虚拟形象a1使项目对象53自由地运动，能够从各种角度观察项目对象53。此外，项目对象53的种类不限于上述例子。可以使用根据授课的内容的各种类型的项目对象53。例如，在内容(讲义数据)表示理科(生物)的授课的场景的情况下，也可以将烧杯、烧瓶、显微镜等实验道具登记为项目对象53。另外，在内容表示数学的授课的场景的情况下，也可以将尺子、量角器、罗盘等登记为项目对象53。
[0089]
在本实施方式中，在从第一虚拟形象a1的动作信息中提取出如上所述的特定动作(即，选择工具对象52并选择规定的项目对象53的动作)的情况下，日志生成部13生成将进行该特定动作的时刻(例如，进行该特定动作时的内容的再现位置)与该特定动作的内容(在本实施方式中，表示所选择的项目对象53的信息)相关联起来的特定动作信息。
[0090]
在步骤s109中，日志生成部13将在步骤s107中生成的动作日志信息保存在动作日志信息数据库40中。
[0091]
通过以上的处理，完成保存关于第一用户在内容视听中操作的第一虚拟形象的动
作日志信息的处理(即，虚拟形象记录处理)。另外，能够对在任意的时刻对内容进行视听的多个第一用户的每一个第一用户执行这样的虚拟形象记录处理。由此，将关于多个第一虚拟形象的动作日志信息保存于动作日志信息数据库40。
[0092]
[与虚拟形象再现处理关联的功能结构]
[0093]
图8是示出与内容提供系统1的虚拟形象再现处理相关的功能结构的一例的图。在此，以在通过上述的虚拟形象记录处理保存了一个以上的第一虚拟形象的动作日志信息之后(即，一个以上的第一用户对内容进行视听之后)，利用用户终端20b的第二用户对内容进行视听的情况为例进行说明。
[0094]
服务器10作为与虚拟形象再现处理相关的功能要素，除了上述的接收部11和内容发送部12之外，还具备虚拟形象信息发送部14。虚拟形象信息发送部14向用户终端20发送过去对内容进行视听的一个以上的第一用户的动作日志信息。另外，在存在与第二用户同时对内容进行视听的第三用户的情况下，虚拟形象信息发送部14也向用户终端20发送与该第三用户对应的第三虚拟形象的动作信息。在本实施方式中，设为利用用户终端20c的第三用户与第二用户同时对内容进行视听。此时，虚拟形象信息发送部14将从用户终端20c接收的第三虚拟形象的动作信息发送至用户终端20b。另外，实际上，对于第三用户(用户终端20c)，也与对于第二用户(用户终端20b)的处理同样地，发送第一用户的动作日志信息和第二用户的虚拟形象(第二虚拟形象)的动作信息，但是，在此着眼于对于第二用户(用户终端20b)的处理而进行以下的说明。
[0095]
用户终端20b具备上述的请求部21、接收部22以及显示控制部23，作为与虚拟形象再现处理相关的功能要素。请求部21和接收部22具有与虚拟形象记录处理相同的功能。显示控制部23除了在虚拟形象记录处理中说明的处理之外，还执行虚拟形象再现处理所特有的处理。
[0096]
[与虚拟形象再现处理关联的系统的动作]
[0097]
参照图9，说明与虚拟形象再现处理关联的内容提供系统1的动作，并且说明本实施方式的内容提供方法的一部分。图9是示出与内容提供系统1的虚拟形象再现处理关联的动作的一例的时序图。
[0098]
在步骤s201中，用户终端20b的请求部21向服务器10发送内容请求。内容请求是用于向服务器10请求内容的再现(即，开始内容的视听)的数据信号。该内容请求由服务器10的接收部11接收。
[0099]
在步骤s202中，响应于来自用户终端20b的内容请求，服务器10的内容发送部12从内容数据库30读出内容数据，并且将该内容数据发送到用户终端20b。由用户终端20b的接收部22接收该内容数据。
[0100]
在步骤s203中，服务器10的虚拟形象信息发送部14选择再现对象的虚拟形象。例如，考虑存在多个过去视听了与第二用户想要视听的内容相同的内容的第一用户，在动作日志信息数据库40中保存有与多个第一虚拟形象相关的动作日志信息的情况。在该情况下，假设在向第二用户提供的内容(虚拟空间)内再现(显示)全部的第一虚拟形象，则在向第二用户提供的内容图像中显示许多个第一虚拟形象，该内容图像中显示的信息有可能变得复杂。因此，虚拟形象信息发送部14从在动作日志信息数据库40中保存有动作日志信息的多个第一虚拟形象中，选择预先确定的数量(例如，3人)的第一虚拟形象作为再现对象。
[0101]
例如，虚拟形象信息发送部14可以使生成动作日志信息的时间点(即，视听了内容的时间点)晚的第一虚拟形象优先，选择预定数量的第一虚拟形象。或者，虚拟形象信息发送部14可以使动作日志信息中包含的特定动作信息的记录数(即，在内容视听中进行特定动作的次数)多的第一虚拟形象优先，选择预定数量的第一虚拟形象。
[0102]
在步骤s204中，虚拟形象信息发送部14向用户终端20b发送在步骤s203中选择的规定数量的第一虚拟形象的动作日志信息。
[0103]
在存在与第二用户同时视听相同内容的第三用户的情况下，执行步骤s205和s206的处理。即，在步骤s205中，服务器10(作为一例，虚拟形象信息发送部14)从用户终端20c取得与第三用户对应的第三虚拟形象的动作信息。在步骤s206中，服务器10(作为一例，虚拟形象信息发送部14)向用户终端20b发送第三虚拟形象的动作信息。
[0104]
在步骤s207中，用户终端20b的显示控制部23再现内容。步骤s207的处理与步骤s103的处理相同。
[0105]
在步骤s208，显示控制部23基于在步骤s204接收的各第一虚拟形象的动作日志信息中包含的动作信息，在虚拟空间内再现各第一虚拟形象的动作。即，显示控制部23在虚拟空间内配置各第一虚拟形象，使各第一虚拟形象基于各自对应的动作日志信息中包含的动作信息而运动。在此，配置各第一虚拟形象的位置可以是实际上过去配置各第一虚拟形象的位置，但有可能在各第一虚拟形象彼此之间、或者第一虚拟形象与第二虚拟形象之间发生干涉(重叠配置于相同的场所的状态)。因此，显示控制部23可以将各第一虚拟形象配置于与过去配置各第一虚拟形象的位置不同的位置，使得虚拟形象彼此不发生干涉(例如，各虚拟形象彼此分离一定间隔以上)。
[0106]
在步骤s209中，显示控制部23通过参照在步骤s204中接收的各第一虚拟形象的动作日志信息中包含的特定动作信息，从而在再现中的各第一虚拟形象进行特定动作的时刻，将表示该特定动作的内容的显示对象与各第一虚拟形象相关联地配置。例如，考虑在某个第一用户在过去对内容进行视听时，在内容再现位置“30:00”(从再现开始时刻起30分钟后的时刻)，操作第一虚拟形象而进行特定动作的情况。在该情况下，在第二用户对内容进行视听时，在成为相同的内容再现位置(在该例子中为“30：00”)的时间点，显示控制部23将表示该第一虚拟形象的该特定动作的内容的显示对象与该第一虚拟形象相关联地配置。
[0107]
在存在与第二用户同时视听相同内容的第三用户的情况下(即，在步骤s206中接收到第三虚拟形象的动作信息的情况下)，在步骤s210中，显示控制部23在虚拟空间内配置该第三虚拟形象，并且基于该第三虚拟形象的动作信息使该第三虚拟形象运动。另外，第三虚拟形象的动作信息从用户终端20c经由服务器10以规定时间间隔定期地发送至用户终端20b。
[0108]
在步骤s211，显示控制部23基于与配置于虚拟空间内的第二用户对应的第二虚拟形象的视点(即，设定于虚拟空间内的第二用户的虚拟视点)，生成用于向第二用户提示的内容图像(内容影像)。另外，在本实施方式中，用户终端20b(显示控制部23)执行基于内容数据和第二用户的虚拟视点生成第二用户用的内容图像的处理(绘制)，但也可以由服务器10执行绘制。
[0109]
在步骤s212中，显示控制部23可以在第二用户对内容进行视听的期间，基于来自第二用户的指示操作，切换第一虚拟形象的显示和不显示。显示控制部23例如在通过经由
用户终端20b的控制器的用户操作而受理了将第一虚拟形象切换为不显示的指示的情况下，可以进行切换使得在内容图像中不显示再现中的第一虚拟形象。另外，显示控制部23在受理了使暂时不显示的第一虚拟形象再次显示的指示的情况下，可以进行切换使得该第一虚拟形象显示于内容图像。另外，在多个第一虚拟形象被选择为再现对象的情况下，第一虚拟形象的显示/不显示的切换可以针对每个第一虚拟形象来进行操作，也可以针对全部的第一虚拟形象一并进行操作。
[0110]
图10是表示在向第二用户提供的内容图像im2中显示的显示对象54的一例的图。在该例中，将第一虚拟形象a1选择表示皮卡虫的模型的项目对象53而在虚拟空间内生成的表示特定动作的内容的显示对象54与该第一虚拟形象a1相关联地配置。作为一例，显示对象54配置于第一虚拟形象a1的附近(在该例中，为第一虚拟形象a1的头部的前方的空间)。如图10所示，显示对象54可以包括表示所选择的项目对象53的文本信息541和表示所选择的项目对象53的图示图像542。另外，也可以使用照片等实拍图像来代替图示图像542。如果仅基于第一虚拟形象a1的动作信息而再现第一虚拟形象a1(即，仅再现第一虚拟形象a1的手的运动)，则无法掌握第一虚拟形象a1在内容视听中具体采取了何种行动。即，无法掌握通过经由第一虚拟形象a1的工具对象52(参照图5)的操作而选择了哪个项目对象53。另一方面，如上所述，在第一虚拟形象a1进行了特定动作(在本实施方式中为选择规定的项目对象53的操作)的时刻，将表示该特定动作的内容的显示对象54与第一虚拟形象a1相关联地配置，由此第二用户能够在适当的时刻在视觉地掌握第一用户(第一虚拟形象a1)进行的特定动作的内容。
[0111]
图11是表示内容图像im2中显示的第一虚拟形象a1和第三虚拟形象a3的显示例的图。如图11所示，显示控制部23可以将与第二用户同时对内容进行视听的第三用户对应的第三虚拟形象a3以不同于与过去对内容进行视听的第一用户对应的第一虚拟形象a1(基于动作日志信息正在再现的虚拟形象)的显示方式进行显示。在图11的示例中，显示控制部23在第三虚拟形象a3的上方的空间配置有倒三角形状的标记对象m。根据这样的标记对象m的有无，第二用户能够确实地掌握配置于虚拟空间内的各虚拟形象是正在再现的第一虚拟形象a1，还是与实时地进行内容的第三用户对应的第三虚拟形象a3。另外，用于将第三虚拟形象a3与第一虚拟形象a1区别的显示形态不限于图11所示的示例。例如，显示控制部23可以以与第一虚拟形象a1不同的颜色(例如，明亮的颜色)显示第三虚拟形象a3，也可以半透明地显示第一虚拟形象a1。
[0112]
[效果]
[0113]
如上所述，本发明的一个方面的内容提供系统包括至少一个处理器。至少一个处理器进行以下处理：在虚拟空间内配置与对表示虚拟空间的规定的内容进行视听的第一用户对应的第一虚拟形象，生成动作日志信息，所述动作日志信息记录有表示在第一用户对内容进行视听的期间由第一用户操作的第一虚拟形象的动作的动作信息、和表示第一虚拟形象进行了预先决定的特定动作的时刻和该特定动作的内容的特定动作信息，在第一用户对内容进行视听之后第二用户对内容进行视听时，再现内容，并且基于动作日志信息中包含的动作信息再现第一虚拟形象的动作，通过参照动作日志信息中包含的特定动作信息，在再现中的第一虚拟形象进行特定动作的时刻，将表示特定动作的内容的显示对象与第一虚拟形象相关联地配置。
[0114]
本发明的一个方面涉及的内容提供方法包括以下步骤：在虚拟空间内配置与对表示虚拟空间的规定的内容进行视听的第一用户对应的第一虚拟形象；生成动作日志信息，所述动作日志信息记录有表示在第一用户对内容进行视听的期间由第一用户操作的第一虚拟形象的动作的动作信息、和表示第一虚拟形象进行了预先决定的特定动作的时刻和该特定动作的内容的特定动作信息；在第一用户对内容进行视听之后第二用户对内容进行视听时，再现内容，并且基于动作日志信息中包含的动作信息再现第一虚拟形象的动作；通过参照动作日志信息中包含的特定动作信息，在再现中的第一虚拟形象进行特定动作的时刻，将表示特定动作的内容的显示对象与第一虚拟形象相关联地配置。
[0115]
本发明的一个方面涉及的内容提供程序使计算机执行以下步骤：在虚拟空间内配置与对表示虚拟空间的规定的内容进行视听的第一用户对应的第一虚拟形象；生成动作日志信息，所述动作日志信息记录有表示在第一用户对内容进行视听的期间由第一用户操作的第一虚拟形象的动作的动作信息、和表示第一虚拟形象进行了预先决定的特定动作的时刻和该特定动作的内容的特定动作信息；在第一用户对内容进行视听之后第二用户对内容进行视听时，再现内容，并且基于动作日志信息中包含的动作信息再现第一虚拟形象的动作；通过参照动作日志信息中包含的特定动作信息，在再现中的第一虚拟形象进行特定动作的时刻，将表示特定动作的内容的显示对象与第一虚拟形象相关联地配置。
[0116]
在这样的方面，起到以下那样的效果。即，对于在过去对内容进行视听的第一用户之后视听该内容的第二用户，再现第一用户在视听中操作的第一虚拟形象a1的动作。由此，第二用户能够在内容视听中感受到与其他用户(第一用户)的连带感。并且，表示第一虚拟形象a1在内容视听中进行的特定动作的内容的显示对象54在进行该特定动作的时刻被与第一虚拟形象a1相关联地配置。由此，能够将第一虚拟形象a1进行的特定动作的内容作为关于在内容视听中应采取的行动的参考信息，在适当的时刻视觉性地提示给第二用户。其结果，能够有效地提高视听内容的用户(第二用户)的便利性。
[0117]
在另一个方面的内容发布系统中，内容可以是表示授课的场景的教育用内容，特定动作可以是用于从预先登记为用于授课的学习的项目的一个以上的项目对象中选择规定的项目对象并且在虚拟空间中生成所选择的项目对象的动作。根据上述结构，对于第二用户，能够根据虚拟空间内的授课的进展，参考其他用户(第一用户)的行动(即，第一虚拟形象a1的特定动作)，在虚拟空间内生成适当的项目对象53。其结果，能够有效地提高利用虚拟空间的学习的效率。
[0118]
在另一个方面的内容发布系统中，显示对象可以包括表示项目对象的图示图像。根据上述结构，能够通过图示图像542视觉性地容易地掌握第一虚拟形象a1所取出的项目对象53的内容。
[0119]
在又一方面涉及的内容发布系统中，至少一个处理器在第二用户对内容进行视听时，在存在正在与第二用户同时对内容进行视听的第三用户的情况下，可以以与第一虚拟形象不同的显示方式显示与第三用户对应的第三虚拟形象。根据上述结构，能够识别过去对内容进行视听的第一用户的第一虚拟形象a1和与第二用户同时实时地对内容进行视听的第三用户的第三虚拟形象a3。其结果，第二用户能够容易地取得与实时地视听内容的第三用户的交流。
[0120]
在其他方面所涉及的内容发布系统中，至少一个处理器可以在第二用户对内容进
行视听的期间，基于来自第二用户的指示操作，切换第一虚拟形象的显示和不显示。如果虚拟空间中显示的第一虚拟形象a1数量过多，则向第二用户提供的内容图像im2中显示的信息有可能变得复杂。根据上述结构，在这样的情况下，第二用户能够自由地将第一虚拟形象切换为不显示。
[0121]
在其他方面涉及的内容发布系统中，至少一个处理器在第二用户对内容进行视听时，生成了与多个第一用户对应的多个第一虚拟形象的动作日志信息的情况下，可以将预先确定的数量的第一虚拟形象选择为再现对象。根据上述结构，通过将虚拟空间中显示的第一虚拟形象a1数量抑制到一定数量(预先规定的数量)以下，从而能够抑制向第二用户提供的内容图像im2中显示的信息变得复杂。
[0122]
在其他方面涉及的内容发布系统中，至少一个处理器可以使生成动作日志信息的时间点晚的第一虚拟形象优先，来选择预定数量的第一虚拟形象。认为与最初视听内容的用户相比，一边参考过去视听过内容的用户(虚拟形象)的动作一边视听内容的用户在内容视听中进行适当的虚拟形象操作的可能性更高。根据上述结构，通过在向第二用户提供的内容图像im2中尽可能优先显示最近对内容进行视听的第一用户的第一虚拟形象a1，从而能够提高向第二用户提供的参考信息(第一虚拟形象a1的特定动作)的质量。
[0123]
在其他方面涉及的内容发布系统中，至少一个处理器可以使动作日志信息中包含的特定动作信息的记录数多的第一虚拟形象优先，来选择预定数量的第一虚拟形象。与特定动作信息的记录数多的第一虚拟形象对应的第一用户是在内容视听中积极地致力于学习的用户的可能性高。通过将这样的用户的第一虚拟形象a1优先选择为再现对象，从而能够增加向第二用户提供的参考信息(第一虚拟形象a1的特定动作)的量。
[0124]
[变形例]
[0125]
以上，基于实施方式对本发明进行了详细说明。但是，本发明并不限定于上述实施方式。本发明能够在不脱离其主旨的范围内进行各种变形。
[0126]
例如，上述的服务器10的功能的一部分也可以由用户终端20执行。相反，上述的用户终端20的功能的一部分也可以由服务器10执行。例如，在上述实施方式中，主要由用户终端20的显示控制部23进行内容的再现、虚拟形象的再现以及内容图像的生成，但这些处理也可以由服务器10执行。在该情况下，用户终端20仅执行从服务器10接收由服务器10处理以及生成的内容图像并将接收到的内容图像显示在显示器上的显示处理即可。
[0127]
在本发明中，“至少一个处理器执行第一处理，执行第二处理，
…
执行第n处理”这样的表述、或者与其对应的表述是包括从第一处理到第n处理为止的n个处理的执行主体(即处理器)在中途变更的情况的概念。即，该表述是包括n个处理全部由相同的处理器执行的情况和在n个处理中处理器以任意方针变更的情况这两者的概念。
[0128]
由至少一个处理器执行的方法的处理顺序并不限定于上述实施方式中的例子。例如，可以省略上述步骤(处理)的一部分，也可以以其他顺序执行各步骤。另外，可以组合上述步骤中的任意2个以上的步骤，也可以修改或删除步骤的一部分。或者，也可以在上述的各步骤的基础上执行其他的步骤。
[0129]
标记说明
[0130]1…
内容提供系统、10
…
服务器、11
…
接收部、12
…
内容发送部、13
…
日志生成部、14
…
虚拟形象信息发送部、20、20a、20b、20c
…
用户终端、21
…
请求部、22
…
接收部、23
…
显
示控制部、24
…
动作信息发送部、30
…
内容数据库、40
…
动作日志信息数据库、53
…
项目对象、54
…
显示对象、542
…
图示图像、101
…
处理器、a1
…
第一虚拟形象、a3
…
第三虚拟形象、im1、im2
…
内容图像、p1
…
服务器程序、p2
…
客户端程序。

技术特征：
1.一种内容提供系统，其具备至少一个处理器，所述至少一个处理器进行如下处理：将与视听表示虚拟空间的规定的内容的第一用户对应的第一虚拟形象配置在所述虚拟空间内，生成动作日志信息，所述动作日志信息记录有动作信息和特定动作信息，所述动作信息表示在所述第一用户视听所述内容的期间由所述第一用户操作的所述第一虚拟形象的动作，所述特定动作信息表示所述第一虚拟形象进行预先决定的特定动作的时刻以及该特定动作的内容，当在所述第一用户视听所述内容之后第二用户视听所述内容时，再现所述内容，并且基于所述动作日志信息中包含的所述动作信息再现所述第一虚拟形象的动作，通过参照所述动作日志信息中包含的所述特定动作信息，在再现中的所述第一虚拟形象进行所述特定动作的时刻，将表示所述特定动作的内容的显示对象与所述第一虚拟形象相关联地配置。2.根据权利要求1所述的内容提供系统，其中，所述内容是表示授课的场景的教育用内容，所述特定动作是用于从预先登记为所述授课的学习用的项目的一个以上的项目对象中选择规定的项目对象并且在所述虚拟空间中生成所选择的所述项目对象的动作。3.根据权利要求2所述的内容提供系统，其中，所述显示对象包括表示所述项目对象的图像。4.根据权利要求1至3中任一项所述的内容提供系统，其中，当在所述第二用户视听所述内容时存在正在与所述第二用户同时视听所述内容的第三用户的情况下，所述至少一个处理器将与所述第三用户对应的第三虚拟形象以与所述第一虚拟形象不同的显示方式进行显示。5.根据权利要求1至4中任一项所述的内容提供系统，其中，在所述第二用户视听所述内容的期间，所述至少一个处理器基于来自所述第二用户的指示操作，切换所述第一虚拟形象的显示和不显示。6.根据权利要求1至5中任一项所述的内容提供系统，其中，在所述第二用户视听所述内容时，当生成有与多个所述第一用户对应的多个所述第一虚拟形象的所述动作日志信息的情况下，所述至少一个处理器将预先确定的数量的所述第一虚拟形象选择为再现对象。7.根据权利要求6所述的内容提供系统，其中，所述至少一个处理器使生成所述动作日志信息的时间点晚的所述第一虚拟形象优先，来选择所述预先确定的数量的所述第一虚拟形象。8.根据权利要求6所述的内容提供系统，其中，所述至少一个处理器使所述动作日志信息中包含的所述特定动作信息的记录数多的所述第一虚拟形象优先，来选择所述预先确定的数量的所述第一虚拟形象。9.一种内容提供方法，包括以下步骤：将与视听表示虚拟空间的规定的内容的第一用户对应的第一虚拟形象配置在所述虚拟空间内，生成动作日志信息，所述动作日志信息记录有动作信息和特定动作信息，所述动作信息表示在所述第一用户视听所述内容的期间由所述第一用户操作的所述第一虚拟形象的
动作，所述特定动作信息表示所述第一虚拟形象进行预先决定的特定动作的时刻以及该特定动作的内容，当在所述第一用户视听所述内容之后第二用户视听所述内容时，再现所述内容，并且基于所述动作日志信息中包含的所述动作信息再现所述第一虚拟形象的动作，通过参照所述动作日志信息中包含的所述特定动作信息，在再现中的所述第一虚拟形象进行所述特定动作的时刻，将表示所述特定动作的内容的显示对象与所述第一虚拟形象相关联地配置。10.一种内容提供程序，其使计算机执行以下步骤：将与视听表示虚拟空间的规定的内容的第一用户对应的第一虚拟形象配置在所述虚拟空间内，生成动作日志信息，所述动作日志信息记录有动作信息和特定动作信息，所述动作信息表示在所述第一用户视听所述内容的期间由所述第一用户操作的所述第一虚拟形象的动作，所述特定动作信息表示所述第一虚拟形象进行预先决定的特定动作的时刻以及该特定动作的内容，当在所述第一用户视听所述内容之后第二用户视听所述内容时，再现所述内容，并且基于所述动作日志信息中包含的所述动作信息再现所述第一虚拟形象的动作，通过参照所述动作日志信息中包含的所述特定动作信息，在再现中的所述第一虚拟形象进行所述特定动作的时刻，将表示所述特定动作的内容的显示对象与所述第一虚拟形象相关联地配置。

技术总结
一个实施方式所涉及的内容提供系统具备至少一个处理器。处理器生成动作日志信息，动作日志信息记录有表示第一用户在对内容进行视听的期间所操作的第一虚拟形象的动作的动作信息、和表示第一虚拟形象进行特定动作的时刻和该特定动作的内容的特定动作信息，当在第一用户对内容进行视听之后第二用户对内容进行视听时，处理器再现内容，并且基于动作日志信息中包含的动作信息而再现第一虚拟形象的动作，通过参照动作日志信息中包含的特定动作信息，从而在再现中的第一虚拟形象进行特定动作的时刻，将表示特定动作的内容的显示对象与第一虚拟形象相关联地配置。第一虚拟形象相关联地配置。第一虚拟形象相关联地配置。


技术研发人员：岩城进之介 甲野纯正 国井理惠子
受保护的技术使用者：多玩国株式会社
技术研发日：2022.05.27
技术公布日：2023/8/24