[0001] 本实用新型涉及信息处理装置。

[0002] 随着近年的内容提供方法的多样化和社会媒介等的信息发送方法的普及，例如如播放的电视节目那样本来为单方的内容的视听体验正趋向视听者对内容执行某些行为的双向的视听体验。例如，在专利文献1中，记载了如下技术，即、通过对播放中的节目的视听者提示向外部的提交网站的提交评论来提供双向的视听体验。

[0003] 专利文献1：日本特开2013-12955号公报

[0043] 以下参照附图，对本实用新型内容的优选的实施方式详细地进行说明。另外，在本说明书以及附图中，对实质上具有相同功能构成的构成要素赋予相同的符号，从而省略重复说明。

[0044] 另外，说明按照以下的顺序进行。

[0045] 1.第1实施方式

[0046] 1-1.系统的概要

[0047] 1-2.功能构成

[0048] 1-3.画面显示例

[0049] 2.第2实施方式

[0050] 3.第3实施方式

[0051] 4.硬件构成

[0052] 5.补充

[0053] (1.第1实施方式)

[0054] (1-1.系统的概要)

[0055] 图1是用于对本实用新型内容的第1实施方式所涉及的系统的概要进行说明的图。参照图1，本实施方式所涉及的系统10包含服务器100和客户端200。服务器100和客户端200均通过后述的信息处理装置的硬件构成来实现，通过有线或无线的各种网络而彼此连接。另外，服务器100不一定必须通过单一的信息处理装置来实现，也可以通过利用网络而彼此连接的多个信息处理装置的协动来实现。

[0056] 首先，服务器100对客户端200提示能够视听的内容(S101)。客户端200的用户从所提示的内容中选择想要视听的内容，并向服务器100发送请求(S103)。接收到请求的服务器100例如向动画传送服务器等的内容提供器50转送请求(S105)，获取客户端200的用户所请求的内容(S107)。

[0057] 服务器100将从内容提供器50获取的内容提供给客户端200(S109)的同时，也一起提供标签信息(S111)。标签信息是例如服务器100基于视听了相同内容的其他用户的行为而生成的信息，至少与内容的再生位置建立关联。这里所说的用户的行为可以是例如在内容的再生中提交评论、或者执行Web检索、或视听照片、影像等其他内容。在本实施方式中，与内容一起提示基于这样的用户的行为而生成的标签信息。客户端200的用户通过选择标签信息，能够容易地访问例如与内容关联的信息，或能够得知其他用户对内容的接受情况。

[0058] 在由客户端200的用户选择了任意一个标签信息的情况下(S113)，服务器100例如使用包含在所选择的标签信息中的URL(Uniform Resource Locator：统一资源定位符)来访问WWW(World Wide Web：万维网)60(S115)，并取得Web页的快照(S117)。取得的快照被发送至客户端200(S119)。此外，在标签信息中包含其他用户的评论、其他内容(Video：视频)的情况下，同样地服务器100将这些信息提供给客户端200(S121)。

[0059] 此外，客户端200的用户能够对内容输入评论(S123)。服务器100基于从客户端200接收到的新的评论，进一步生成标签信息。另外，由客户端200的用户进行的对内容的其他行为，例如针对内容的内容而执行的Web检索的结果或其他内容的视听等的信息也能够与评论同样地被发送至服务器100。服务器100基于这些信息生成新的标签信息并与内容追加地建立关联。

[0060] 另外，服务器100也可以与内容本身的提供不同地，对客户端200提供其他用户的评论或内容的推荐、排名等信息(S125～S129)。根据这种信息，例如客户端200的用户能够容易地选择视听的内容。

[0061] 图2是表示图1所示的系统中的信息的流程的例子的图。参照图2，在本实施方式所涉及的系统10中，大致分为能够发生内容选择(S201～S213)、推荐(S215～S221)、以及辅助信息(S223～S231)的流程。

[0062] 首先，若在客户端200中用户起动用于内容视听的应用(S201)，则显示主页画面(S203)。在主页画面中，显示管理者列表(S205)以及/或者组列表(S207)。在本实施方式中，管理者是负责整理经由系统10而提供的内容的工作的用户。管理者例如从多数内容中根据自己的喜好收集内容。若用户从管理者列表(S205)中选择任意的管理者，则显示该管理者所收集的内容的列表(S209)。一般的用户通过追随喜好接近的管理者，而易于访问喜好一致的内容。

[0063] 另一方面，在本实施方式中，组并不是上述的管理者与追随者这样的从属关系，而是各用户在对等的关系下形成的组。在系统10中，例如能够收集属于组的多个用户进行了视听、或作出了正面评价的内容。组可以是例如友人彼此等用户按意志设定的社会性的组，也可以是根据内容的视听历史或后述的标签信息的收集等而推断为喜好相似的用户被自动分类的组。若用户从组列表(S207)中选择任意一个组，则显示与该组建立关联而收集的内容的列表(S209)。用户经由组列表，能够容易访问例如友人进行了视听的内容、或喜好相似的其他用户进行了视听的内容等。

[0064] 若用户从内容的列表(S209)中选择任意一个内容，则显示该内容的再生画面(S211)。通过选择显示于再生画面的主页按钮(S213)，用户能够返回至主页画面(S203)。另外，例如当以前在内容的视听途中结束了应用的情况下、或最初预先设定了视听的内容的情况下等，也可以接着应用的启动(S201)而自动地显示内容的再生画面(S211)。

[0065] 在内容的再生画面(S211)中，除再生中的内容之外，还能够显示与推荐相关的信息。在图示的例子中，在再生画面中显示来自社会媒介的推荐信息(S215)。此外，在再生画面中，还能够显示视听了相同内容的友人的信息(S217)。另外，用户还能够使用显示于再生画面的按钮等，对内容输入正面评价(S219“Nice(漂亮)！”)。在输入了正面评价的情况下，能够执行针对该内容的推荐(S221)。例如可以对和用户属于同组的其他用户执行推荐，在用户是管理者的情况下，也可以对其追随者执行推荐。这时，也可以基于视听了相同内容的友人的信息(S217)，将已视听了该内容的用户从推荐的对象中排除。

[0066] 此外，在内容的再生画面(S211)中，除再生中的内容之外，还能够显示标签信息(S223)。在图示的例子中，根据由用户进行的对社会媒介等的评论的提交(S225)以及Web等的检索(S227)而生成了标签信息。关于这种标签信息的生成，之后再详细说明。标签信息、通过检索得到的URL列表(S229)等也可以作为辅助信息(S231)而与内容建立关联并显示于再生画面(S211)。

[0067] (1-2.功能构成)

[0068] 图3是表示本实用新型内容的第1实施方式所涉及的各装置的概略功能构成的框图。以下，参照图3，对各装置的功能构成进行说明。另外，为了本实施方式的说明而将图示的功能构成简略化，另外各装置也可以包含未图示的功能构成。由于未图示的功能构成能够是作为各装置的一般的功能构成而已知的构成，故省略详细的说明。

[0069] (服务器)

[0070] 服务器100包含：通信部110、再生控制部120、标签DB130、标签信息显示控制部140、行为检测部150、标签生成部160、标签建立关联部170、以及通信服务提供部180。

[0071] 通信部110例如由通信装置实现，其经由有线或者无线的各种网络而与客户端200进行通信。此外，通信部110也经由网络而与上述的内容提供器50、WWW60等进行通信，获取内容数据等。通信部110将接收到的内容数据提供给再生控制部120，根据再生控制部
120的控制将内容数据发送至客户端200。此外，通信部110根据标签信息显示控制部140的控制，将用于显示标签信息的数据发送给客户端200。另外，通信部110与客户端200的用户对内容执行的各种行为关联地截取客户端200的通信部210所发送接收的信息，并提供给行为检测部150。此外，通信部110在与客户端200之间发送接收与由通信服务提供部
180提供的服务相关的信息。

[0072] 再生控制部120例如通过CPU等处理器根据存放于存储器的程序而动作由此来实现，其控制通信部110获取的内容数据的再生。例如，在由客户端200的用户不进行其他操作的情况下，再生控制部120能够将从内容提供器50获取的内容从最开始按照顺序再生。这里，例如在通过后述的标签信息显示控制部140将针对内容而生成的标签信息显示于内容的再生画面，并且客户端200的用户选择了所显示的标签信息的这样的情况下，再生控制部120也可以将内容从与该标签信息对应的再生位置再生。此外，在由后述的通信服务提供部180提供了与标签信息关联的通信服务的情况下，再生控制部120也可以在包含与该标签信息对应的再生位置的范围使内容反复再生。此外，再生控制部120也可以使用于选择内容的主页画面显示。

[0073] 标签DB130例如由储存装置来实现，其存放针对内容而生成的标签信息。标签信息例如由后述的标签生成部160生成，在通过标签建立关联部170至少与内容的再生位置建立了关联的基础上，存放于标签DB130。此外，标签信息也可以包含作为初始设定而准备的信息。标签信息除例如能够包含文本之外，也可以包含向Web页或其他内容等的链接、缩略图等。例如，在通过时间标识定义内容的再生位置的情况下，能够将标签信息记录为“与时间标识1h23m45s678建立了关联的标签信息”。另外，也可以将与标签信息建立关联的再生位置定义为范围。此外，在内容是影像内容的情况下，标签信息也可以与影像内容的画面内位置建立关联。该情况下，能够将标签信息记录为例如“与(X、Y、T)＝(0.123、0.456、1h23m45s678)建立了关联的标签信息”。在该例中，X表示画面内的横位置，Y表示画面内的纵位置，T表示时间标识。另外，也可以考虑例如每个客户端20的再生画面的大小的不同，以正规化的值记录X以及Y这种画面内位置。与标签信息建立关联的画面内位置也能够定义为范围或者区域。

[0074] 标签信息显示控制部140例如通过CPU等处理器根据存放于存储器的程序进行动作由此来实现，其将从标签DB130读出的标签信息显示于内容的再生画面。例如，标签信息显示控制部140也可以按照每个建立了关联的再生位置排列标签信息并显示于再生画面。这时，标签信息显示控制部140也可以将与彼此接近的再生位置建立了关联的标签信息分组化进行显示。此外，在标签信息也与画面内位置建立关联的情况下，标签信息显示控制部
140也可以分别显示与相同或接近的再生位置建立关联但与不同的画面内位置建立了关联的标签信息。此外，标签信息显示控制部140能够使标签信息作为可选择的图标显示于再生画面。图标例如能够包含与标签信息建立了关联的再生位置的内容的截屏图像、或表示标签信息所包含的信息的种类的图标等。在客户端200的用户选择了标签信息的图标的情况下，标签信息显示控制部140也可以使将被分组化的标签信息与该标签信息一起个别显示的画面另外显示于再生画面。此外，如上述那样，这时也可以通过再生控制部120跳到所选择的标签信息的再生位置来将内容再生。另外，之后再叙述由标签信息显示控制部140进行的标签信息的显示的具体例。

[0075] 行为检测部150例如通过CPU等处理器根据存放于存储器的程序进行动作由此来实现，其检测内容再生中的用户的行为。更具体而言，行为检测部150经由通信部110，截取在与再生内容的客户端200之间发送接收的信息，并基于该信息，检测在客户端200在内容的再生中用户所执行的行为。例如，由行为检测部150检测的行为可能包含由用户进行的评论的提交。评论例如可以通过在由服务器100提供的服务上进行提交，也可以向其他社会媒介提交。此外，由行为检测部150检测的行为也可以包含用户对再生中的内容以外的信息的访问。这里访问的信息例如可以是Web页，还可以是其他内容。这些信息能够通过例如用户执行关键词检索来进行访问。另外，行为检测部150也可以将由后述的通信服务提供部180提供的通信服务中的用户的发言作为行为进行检测。

[0076] 标签生成部160例如通过CPU等处理器根据存放于存储器的程序进行动作由此来实现，基于与由行为检测部150检测到的行为相关的信息来生成新的标签信息。按照上述，所生成的标签信息除了能够包含例如文本之外，还能够包含向Web页或其他内容等的链接、缩略图等。标签生成部160能够通过解析与检测到的用户的行为相关的各种日志来生成所涉及的标签信息。例如，当用户通过客户端200在内容的再生中提交了评论，或在通信服务中进行了发言的情况下，行为检测部150能够获取所提交的评论或者发言的信息，标签生成部160能够生成包含评论来作为文本的标签信息。此外，例如，当用户通过客户端200在内容的再生中执行了Web检索的情况下，行为检测部150能够获取检索查询、检索结果的信息，标签生成部160能够生成包含检索查询所包含的关键词的文本和检索结果的Web页的链接、快照的标签信息。另外，例如当用户通过客户端200在内容的再生中再生其他内容的情况下，行为检测部150能够获取再生的其他内容的地址或者其他内容本身的信息，标签生成部160能够生成包含向其他内容的链接或者其他内容本身的标签信息。另外，例如也可以通过提交评论时的用户操作而明示地添加链接或其他内容。

[0077] 标签建立关联部170例如通过CPU等处理器根据存放于存储器的程序进行动作由此来实现，其将由标签生成部160生成的标签信息与对应于成为标签信息源的行为的内容的再生位置建立关联。通过标签建立关联部170而与内容建立了关联的标签信息例如可以被存放于标签DB130，还可以被提供给标签信息显示控制部140并通过客户端200实时地显示。例如，与标签信息建立关联的再生位置能够是提交了评论时、执行了Web检索时、开始了其他内容的再生时的内容(原来再生的内容)的再生位置。或者，若能够确定用户开始了评论的输入时、开始了用于Web检索的关键词的输入时、起动了用于其他内容的再生的应用时等，则也可以将标签信息与对应于此的再生位置建立关联。另外，在针对多个标签信息确定的再生位置彼此接近的情况下，标签建立关联部170也可以将这些标签信息与共用的再生位置建立关联。此外，如上述那样在本实施方式中，标签信息也能够与影像内容的画面内位置建立关联。标签建立关联部170例如将标签信息与用户在行为中明示地指定的画面内位置建立关联。这里，也可以将画面内位置指定为范围或者区域。或者，例如用户在客户端200使用HMD(Head Mounted Display：头戴式显示器)等来试听内容，在能够利用视线检测等来检测内容的再生画面中的用户的注视区域的情况下，标签建立关联部170也可以基于检测到的注视区域来决定与标签信息建立关联的画面内位置。

[0078] 通信服务提供部180例如通过CPU等处理器根据存放于存储器的程序进行动作由此来实现，其向多个客户端200的用户提供通信服务。所提供的通信服务能够是例如如在用户间交换发言的聊天那样的服务。例如，通信服务提供部180能够向多个用户提供通信服务，该多个用户是执行了成为与相同的内容的接近的再生位置(以及/或者接近的画面内位置)建立关联的标签信息源的行为的用户。更具体而言，通信服务提供部180例如开设这些用户参加的聊天室。进入聊天室的用户例如能够在后述的再生画面内的其他画面中交换发言。发言中例如可以添加向Web页、其他内容等的链接。这种在聊天室中的用户的发言、添加到发言的链接等信息也能够由行为检测部150作为内容再生中的行为来检测。此外，用户在利用聊天室期间，再生控制部120也可以在包含对象的再生位置的范围使内容反复再生。

[0079] (客户端)

[0080] 客户端200包含：通信部210、显示控制部220、显示部230、声音控制部240、声音输出部250、以及操作部260。客户端200例如能够是各种PC(Personal Computer：个人计算机)、平板终端、智能手机、游戏机、媒体播放器等用户能够试听内容的各种终端装置。

[0081] 通信部210例如由通信装置来实现，其经由有线或者无线的各种网络而与服务器100通信。通信部210从服务器100接收内容数据，并提供给显示控制部220以及声音控制部240。此外，通信部210从服务器100接收用于显示与内容相关的标签信息的数据，并提供给显示控制部220。另外，通信部210根据在内容的再生中用户对操作部260进行的操作输入来发送接收数据。例如，通信部210根据对操作部260进行的检索的操作输入(检索关键词的输入以及检索执行的指示)来发送检索查询，并接收检索结果的Web页、其他内容等信息。此外，例如通信部210根据对操作部260进行的评论提交的操作输入(评论的文本输入以及执行提交的指示)来向服务器100或者社会媒介的服务器等发送评论。通过这种方式，在内容的再生中通信部210所发送接收的数据经由服务器100的通信部110而与其他服务器等进行数据交换。按照上述，服务器100的通信部110通过截取这时发送接收的数据，将与用户对内容执行的各种行为相关的信息提供给行为检测部150。

[0082] 显示控制部220例如通过CPU等理器根据存放于存储器的程序进行动作由此来实现，对例如通过LCD或者有机EL显示器等各种显示装置实现的显示部230中的图像的显示进行控制。显示控制部220从通信部210获取内容数据、用于显示与内容相关的标签信息的数据、以及根据用户对操作部260进行的操作输入而接收的数据。基于这些数据，显示控制部220使显示部230显示内容的再生画面。再生画面例如能够包含内容图像、显示在内容图像的周边的标签信息的图标。此外，显示控制部220也可以使用户用于执行对内容的各种行为的画面显示在再生画面中、或者与再生画面分开显示。显示控制部220例如使用户用于输入评论的评论输入栏、用于输入检索关键词的关键词输入栏、以及/或者用于指定成为行为对象的画面内位置的操作要素等。此外，显示控制部220也可以基于从服务器100获取的数据来使显示部230显示主页画面。另外，针对显示控制部220使显示部230显示的画面的例子，之后在进一步详细说明。

[0083] 声音控制部240例如通过CPU等处理器根据存放于存储器的程序进行动作由此来实现，例如对由扬声器等实现的声音输出部250中的声音的输出进行控制。声音控制部240基于从通信部210获取的内容数据，使内容声音从声音输出部250输出。内容声音是与显示在显示部230中的内容图像联动的声音。此外，声音控制部240也可以从通信部210获取根据用户对操作部260进行的操作输入而接收到的数据，并基于该数据使声音从声音输出部250输出。另外，在本实施方式中以内容是影像内容的情况为例进行说明，但是在其他实施方式中，再生的内容或通过再生中的用户的行为而获取的内容也可以是音乐内容等不包含图像的内容。这种内容主要是可经由声音控制部240以及声音输出部250而输出。

[0084] 操作部260例如通过如触摸面板、鼠标、或键盘那样的各种输入装置来实现，其获取由用户进行的操作输入。基于所获取的操作输入，经由例如通信部210而向包含服务器100在内的各种服务器发送信息。由此能够控制例如选择再生的内容、开始以及结束内容再生等。此外，也能够将在内容再生中由操作部260获取的检索的操作输入(检索关键词的输入以及执行检索的指示)、评论提交的操作输入(评论的文本输入以及执行提交的指示)等经由通信部210而发送至各种服务器。此外，也可以将操作部260所获取的操作输入提供给显示控制部220或者声音控制部240，用于控制显示于显示部230的图像或者控制从声音输出部250输出的声音。

[0085] (1-3.画面显示例)

[0086] (主页画面)

[0087] 图4以及图5是表示本实用新型内容的第1实施方式中的主页画面的显示例的图。主页画面例如在用户通过客户端200起动了用于内容视听的应用时，能够通过显示控制部220的控制而显示于显示部230。

[0088] 参照图4，在主页画面1000显示有内容图标1001。内容图标1001例如是内容的缩略图或者快照等图像，在管理者区域1003、或者组区域1005中区分而配置。在管理者区域1003，显示由上述的管理者收集到的内容的内容图标1001。在组区域1005，显示针对上述的用户的组而收集到的内容的内容图标1001。这些区域能够作为上述的管理者列表或组列表发挥作用。在图示的例子中，管理者区域1003以及组区域1005分别用圆形或者椭圆形来显示。各个管理者区域1003以及组区域1005能够在例如用户跟随着管理者的情况下、或用户被分成组的情况下显示得较大。此外，各区域也可以在用户试听针对管理者或组而收集到的内容的频度较高的情况下、管理者的人气度较高的情况下、用户和组的喜好接近的情况下等显示得较大。

[0089] 在收集到的内容较多的情况下，配置于各区域的内容图标1001也可以是针对各管理者或者组而收集到的内容中根据人气度、视听次数等提取的代表性的内容图标。例如在较多地检测到对内容的评论等的来自其他用户的行为的情况下，也可以将内容图标1001伴随着发亮等效果1007来显示，使用户容易地看到“受欢迎”的内容。若用户选择任意一个区域，则能够显示与该管理者或者组对应的内容的列表。此外，若用户选择内容图标1001，则也可以直接开始试听该内容。

[0090] 如图5所示，若用户将管理者区域1003或者组区域1005放大，则放大显示配置在该区域中的内容图标1001。或者，当配置在区域中的内容是收集到的内容的一部分的情况下，由于放大了区域，从而也可以新显示针对配置在该区域中的其他内容的内容图标1001。在放大了某个区域的情况下，能够缩小其他区域，或者移动到主页画面1000的周边部。在图示的例子中，由于放大了针对管理者A的管理者区域1003a，因此缩小了针对管理者B的管理者区域1003b、以及针对组1、2的组区域1005a、1005b，并移动到主页画面1000的周边部。

[0091] (再生画面)

[0092] 图6以及图7是表示本实用新型内容的第1实施方式中的再生画面的显示例的图。再生画面例如在用户通过客户端200起动用于内容视听的应用，并经由上述的主页画面1000等而选择了视听的内容时，能够通过显示控制部220的控制而显示于显示部230。

[0093] 参照图6，在再生画面2000中，显示：内容图像2001、标签一览显示2003、标签详细显示2005、评论输入栏2007、再生控件2009、主页按钮2011、以及推荐信息2013。

[0094] 内容图像2001是服务器100根据再生控制部120的控制，基于发送至客户端200的数据而显示的内容的图像。在图示的例子中，内容是影像内容，但是也可以如上述那样内容是音乐内容等不包含图像的内容。该情况下，作为内容图像2001，可以显示例如与音乐内容对应且从服务器100提供的影像图像、或者通过服务器100或客户端200生成的视觉效果图像，再生画面2000也可以不包含内容图像2001。

[0095] (标签一览显示)

[0096] 标签一览显示2003显示与再生中的内容、即在图示的例子中作为内容图像2001显示的内容建立了关联的标签信息的一览。在本实施方式中，用于显示标签信息的一览的数据由服务器100的标签信息显示控制部140提供。如上述那样，标签信息显示控制部140除了提供基于已生成的标签信息的数据之外，还能够提供基于标签建立关联部170与新的内容建立了关联的标签信息的数据。因此，当基于在再生画面2000中试听内容的用户或者其他用户的行为，标签建立关联部170将内容与新的标签信息建立了关联的情况下，能够根据从标签信息显示控制部140提供的新的数据，将标签一览显示2003动态地更新为包含新的标签信息的显示。更具体而言，例如也可以追加后述的种类图标2025，或者逐渐增加组内标签数2027的数字。

[0097] 在图示的例子中，在标签一览显示2003中，作为表示标签信息的图标，显示与各标签信息建立了关联的再生位置的内容的截屏图像2021。截屏图像2021能够与表示对应的再生位置的时间标识2023一起显示。此外，在截屏图像2021，也可以附加标签信息的种类图标2025。在图示的例子中，标签信息能够包含文本(种类图标2025t)、向Web页的链接(种类图标2025w)、以及/或者向其他内容的链接(种类图标2025v)等。根据种类图标2025的显示，用户能够容易地识别各标签信息包含哪种信息。

[0098] 此外，在图示的例子中，在标签一览显示2003中，当表示标签信息的图标与彼此接近的再生位置建立关联的情况下被分组化而显示。这种情况下，也可以对截屏图像2021附加组内标签数2027的显示。例如，当在时间标识2023为“0：24”的截屏图像2021a中显示“18”来作为组内标签数2027的情况下，可知与该再生位置的附近建立了关联的标签信息有18件。这样在将标签信息分组化的情况下，也能够将多个种类图标2025附加于截屏图像2021。例如，在上述的截屏图像2021a中，由于显示有种类图标2025t、2025w、2025v，因此可知在18件的标签信息中包含文本、向Web页的链接、以及向其他内容的链接。

[0099] (标签详细显示)

[0100] 在选择了显示为标签一览显示2003的标签信息的图标的情况下，标签详细显示2005将被分组化的标签信息与该标签信息一起单独显示。在本实施方式中，用于显示标签详细显示2005的数据也能够与标签一览显示2003同样地由服务器100的标签信息显示控制部140提供。如上述那样，标签信息显示控制部140除了提供基于现有的标签信息的数据之外，还能够提供基于通过标签建立关联部170而与新的内容建立了关联的标签信息的数据。因此，当标签生成部160基于在再生画面2000中试听内容的用户、或者其他用户的行为而生成了新的标签信息的情况下，标签详细显示2005能够被更新为包含新的标签信息的显示。更具体而言，例如能够在内容的再生中追加新的标签信息进行显示。

[0101] 这里，在图6所示的例子中，由于用户未选择作为标签一览显示2003而显示的标签信息的图标，因此标签详细显示2005为空栏。该情况下，也可以代替标签详细显示2005而显示广告等。另一方面，在图7所示的例子中，由于用户选择了作为标签一览显示2003而显示的截屏图像2021a，所以显示有与截屏图像2021a对应的组所包含的标签信息来作为标签详细显示2005。如上述那样，此时，作为内容图像2001而显示的内容的再生位置能够跳转至所选择的标签信息的再生位置(在图7的例中是时间标识“0：24”)。

[0102] 在图7的例子中，在标签详细显示2005中，显示有分别包含文本、Web页、以及其他内容的3件标签信息显示2029t、2029w、2029v。为了识别这些标签信息的种类，也可以显示与标签一览显示2003中所显示的种类图标2025相同的种类图标2031。

[0103] 在包含Web页的标签信息显示2029w中，能够显示Web页的快照2033。在快照2033中设定有向Web页的链接，用户也可以通过选择快照2033的图像而能够访问Web页。
此外，在包含其他内容的标签信息显示2029v中，能够显示其他内容的缩略图2035。在缩略图2035中也可以设定有用于使其他内容再生的链接，用户能够通过选择缩略图2035而访问其他内容。该情况下，其他内容例如能够在与再生画面2000不同的画面中再生。在其他实施方式中，例如为了增加能够显示的标签信息显示2029的数量，也可以在标签详细显示
2005的开始时不显示快照2033、缩略图2035，在选择了标签信息显示2029的情况下，显示快照2033、缩略图2035来作为详细信息。

[0104] 按照上述，在与截屏图像2021a对应的组中包含18件标签信息，在图示的例子的标签详细显示2005无法被一次显示。这种情况下，在标签详细显示2005中也可以显示滚动条2037，能够使在上下方向排列的标签信息显示2029滚动进行阅览。排列标签信息显示2029的顺序例如可以是时间序列，也可以是由向Web页、内容的链接的访问数量等而决定的人气度顺序。此外，在将新的标签信息与内容建立了关联的情况下，也可以将新的标签信息追加至标签详细显示2005的最上方或者最下方。

[0105] 此外，与后述的变形例的情况不同，在图7的例子中，在跳转到所选择的标签信息的再生位置之后，保持不变地继续进行内容的再生。于是，为了表示显示着的标签信息是针对哪种场景的标签信息，在标签详细显示2005中也可以包含截屏图像2039(若在图7的例子中则为与截屏图像2021a相同的图像)。另外，也可以与截屏图像2039一起显示跳转按钮2041。若用户选择跳转按钮2041，则作为内容图像2001而显示的内容的再生位置跳转至与截屏图像2039对应的再生位置，即、与作为标签详细显示2005而显示的标签信息对应的再生位置。

[0106] (与用户的行为相关的显示要素)

[0107] 评论输入栏2007包含文本输入栏2007a和提交按钮2007b，受理用户对再生中的内容的评论提交。使用评论输入栏2007而提交的评论例如可以作为在由服务器100提供的服务上的评论而处理，也可以作为通过其他社会媒介的评论而处理。无论哪种情况都是标签生成部160基于提交的评论而生成新的标签信息，标签建立关联部170可将生成的标签信息与内容建立关联。这时，标签建立关联部170也可以检测通过选择提交按钮2007b而执行了提交评论时的、或者选择文本输入栏2007a开始了文本输入时的内容的再生位置，将生成的标签信息与该再生位置建立关联。当在与通过用户评论提交而新生成的标签信息建立了关联的再生位置的附近，其他标签信息已经被建立关联的情况下，在用户提交评论后，也可以将与该再生位置的附近建立了关联的标签信息的组自动地显示于标签详细显示2005。

[0108] 图8是表示本实用新型内容的第1实施方式中的再生画面与其他画面的协作的例子的图。如图8所示，与评论的提交同样，例如使用了Web浏览器画面2100a的Web检索的结果、使用了Web浏览器画面2100b的其他内容(影像内容)的再生也能够成为标签生成部160通过服务器100而生成的标签信息的源。为了进行这种处理，例如可以通过与再生画面2000共用的服务来提供Web浏览器画面2100，也可以向通常的Web浏览器画面2100追加用于与由服务器100提供的服务的协作的插件。在通过这种方式提供的Web浏览器画面2100中输入的信息能够通过客户端200的通信部210，经由服务器100而发送至其他服务器等。

[0109] (画面内位置的指定)

[0110] 图9是表示在本实用新型内容的第1实施方式的再生画面中指定画面内位置的情况下的显示例的图。参照图9，在再生画面2000中，用户使用指针2043指定了内容图像2001的画面内位置之后，在评论输入栏2007中输入对内容的评论。这种情况下，服务器100的行为检测部150能够检测用户的评论提交来作为包含画面内位置的指定的行为。另外，标签建立关联部170除了与内容的再生位置之外，也将标签信息与画面内位置建立关联。
另外，对画面内位置也与再生位置同样，也可以将建立关联的画面内位置定义为范围或者区域，或将与接近的画面内位置建立了关联的标签信息分组化。

[0111] 这里，例如在标签一览显示2003、标签详细显示2005中，能够将和画面内位置建立了关联的标签信息与在接近的再生位置和不同的画面内位置建立了关联的标签信息、或未和画面内位置建立关联的标签信息区别显示。更具体而言，如图9所示，在标签一览显示2003中，即使时间标识2023相同(在图9的例子中为“0：12”)，也分别显示与建立对应的画面内位置不同的标签信息分别对应的截屏图像2021b、2021c。截屏图像2021b表示与画面整体建立对应的标签信息，截屏图像2021c表示与画面内的一部分，具体而言是与显示出鸟的区域建立对应的标签信息。表示与画面的一部分建立对应的标签信息的截屏图像
2021c可以是从内容的截屏图像剪切了对应的画面内位置或者其附近的图像而得到的。在上述的情况下，在标签详细显示2005中，也能够与标签一览显示2003对应地，分别显示接近的再生位置且接近的画面内位置的标签信息。

[0112] (其他显示要素)

[0113] 再次参照图6，再生控件2009是用于控制再生画面2000中内容再生的开始、停止、再生位置的移动等的GUI(Graphical User Interface：图形用户界面)部件。主页按钮2011是用于中断或结束内容的视听而向上述的主页画面1000迁移的按钮。推荐信息2013显示来自例如用户追随的管理者、或来自属于与用户同组的其他用户的内容的推荐。例如，通过选择作为推荐信息2013而显示的内容的缩略图2045，也可以将作为内容图像2001而显示的内容切换成作为缩略图2045而显示的内容，能够开始该内容的视听。

[0114] (变形例)

[0115] 图10是表示在本实用新型内容的第1实施方式的再生画面中提供通信服务的情况下的显示例的图。参照图10，在再生画面3000中，显示内容图像2001、标签一览显示2003、聊天画面3001、评论输入栏2007、再生控件2009、主页按钮2011、以及推荐信息2013。
另外，针对聊天画面3001以外，由于是与上述的再生画面2000相同的构成要素，故省略详细的说明。

[0116] 在本实施方式中，利用服务器100的通信服务提供部180的功能，例如在用户使用评论输入栏2007在内容再生中提交评论，并基于该评论将内容的再生位置与新的标签信息建立了关联的情况下，能够利用与其附近的再生位置输入了评论的其他用户之间开设的聊天室邀请用户。聊天画面3001显示该聊天室中的各用户的发言日志。用户与被邀请到聊天室前同样地能够使用评论输入栏2007，来提交聊天室中的发言。聊天画面3001例如也可以通过使到此为止显示的标签详细显示2005的显示变化来进行显示。或者，也可以在再生画面3000中从最开始显示聊天画面3001到用户使用评论输入栏2007输入评论之前显示空栏。

[0117] 在上述的例子中，可以将用户最开始使用评论输入栏2007提交的评论作为聊天室中的该用户的最开始的发言而显示于聊天画面3001。此外，用于将用户邀请到聊天室的触发并不局限于评论的提交，也可以是例如图8所示的那样Web检索、其他内容的再生等。该情况下，也可以将Web检索的结果、向其他内容的链接作为用户的最开始的发言而显示于聊天画面3001。或者，也可以向执行了评论等行为的用户提示聊天画面3001的预览，仅限于在阅览了预览的用户希望的情况下，用户进入聊天室，并显示聊天画面3001。

[0118] 按照上述，显示于聊天画面3001的各用户的发言也能够由服务器100的行为检测部150作为行为来检测，并成为由标签生成部160进行的生成标签信息的源。另外，用户在聊天室中的发言例如能够包含Web页、向其他内容的链接等与通常的内容视听中的用户行为相同的信息。

[0119] 在用户进入聊天室，且聊天画面3001显示于再生画面3000期间，能够通过服务器100的再生控制部120的控制，在包含成为对象的再生位置的范围反复进行作为内容图像
2001而显示的内容的再生。标签建立关联部170也可以将基于各用户的发言生成的标签信息与在反复范围中的哪个位置输入了发言无关地，按照每个聊天室而与共用的再生位置(在图9的例子中是“0：24”)建立关联。在欲继续播放内容的视听的情况下，用户能够通过选择退室按钮3003而从聊天室退出，并返回至通常的内容的视听。

[0120] 根据以上所说明的本实用新型内容的第1实施方式，通过检测内容再生中的用户的行为，并基于与检测到的行为相关的信息而生成标签信息，不使用户感受另外输入标签信息的繁琐，就能够将大量的信息作为与内容相关的标签信息而收集。此外，通过将生成的标签信息与对应于行为的内容的再生位置以及/或者画面内位置建立关联，可明确标签信息是针对内容中的何处的信息，即使是如上述那样根据用户的行为无目地收集到的标签信息，也能够容易地据此读取具有意义的信息。

[0121] (2.第2实施方式)

[0122] 接着，参照图11～图15，对本实用新型内容的第2实施方式进行说明。在本实施方式中，针对内容而生成的标签信息不一定与内容的再生位置建立关联。在本实施方式中，标签信息与内容内的一个或者多个位置建立关联。另外，由于针对除此以外的点与第1实施方式相同，故通过赋予共用的符号而省略重复的说明。

[0123] (2-1.功能构成)

[0124] 图11是表示本实用新型内容的第2实施方式所涉及的各装置的概略功能构成的框图。参照图11，本实施方式所涉及的系统20包含服务器300和客户端400。服务器300与客户端400均通过后述的信息处理装置的硬件构成来实现，并通过有线或者无线的各种网络而彼此连接。另外，服务器300并不一定由单一的信息处理装置来实现，也可以由通过网络而彼此连接的多个信息处理装置的协动来实现。此外，为了本实施方式的说明而简略化图示的功能构成，各装置还可以进一步包含未图示的功能构成。由于未图示的功能构成作为各装置的一般的功能构成能够是已知的构成，故省略详细的说明。

[0125] (服务器)

[0126] 服务器300包含：通信部110、再生控制部120、标签DB330、标签信息显示控制部340、行为检测部150、标签生成部160、标签建立关联部370、以及通信服务提供部180。以下，特别对其中的作为与上述的第1实施方式不同的构成要素的标签DB330、标签信息显示控制部340、以及标签建立关联部370进行说明。

[0127] (标签DB)

[0128] 标签DB330例如由储存装置来实现，其存放针对内容而生成的标签信息。标签信息例如由标签生成部160生成，其在通过标签建立关联部370而与内容内的一个或者多个位置建立了关联的基础上，被存放于标签DB330。此外，标签信息也可以包含作为初始设定而准备的信息。本实施方式中的标签信息在例如能够包含文本、或向Web页、其他内容的链接或者缩略图等这一点，与上述的第1实施方式中存放于标签DB130的标签信息是相同的。但是，作为与第1实施方式的不同，在本实施方式中，标签信息直接或间接地与内容内的一个或者多个位置建立关联即可，并不一定要与内容的再生位置建立关联。

[0129] 这里，重新对本说明书中的“内容内的一个或者多个位置”以及“内容的再生位置”这种用语进行说明。本说明书中的“内容”能够是例如如影像、乐曲那样随时间进展的内容。该情况下，例如能够使用时间标识(T)等来定义内容的再生位置。例如，针对某个内容，将标签信息与一个或者多个时间标识建立关联可以是将标签信息与内容内的一个或者多个位置建立关联。

[0130] 此外，本说明书中的“内容”也能够是例如如影像那样显示于画面的内容。该情况下，例如能够使用横位置(X)、纵位置(Y)等来定义内容的画面内位置。例如，针对某个内容，将标签信息与一个或者多个画面内位置建立关联可以是将标签信息与内容内的一个或者多个位置建立关联。

[0131] 另外，在将内容显示于画面的情况下，标签信息可以与和被拍摄体相关的信息建立关联。被拍摄体例如是显示在画面内的某个区域(被拍摄体的显示区域)的人物或者物等，被视听者作为具有某些意义的图像部分而识别。例如在如影像那样的随时间进展并且显示于画面的内容中，能够在一系列的时间标识(多个再生位置)中，一边使显示区域变化(也存在未变化的情况)一边显示被拍摄体。因此，例如在标签信息与表示某个被拍摄体的信息建立了关联的情况下，也可以说该标签信息通过在内容内存在该被拍摄体的显示区域的一系列的时间标识(多个再生位置)，间接地与各个时间标识中的被拍摄体的显示区域(多个画面内位置)建立关联。

[0132] 这样，在本实施方式中，能够将标签信息相对于表示对内容所包含的信息的至少一部分(至少一部分的再生位置以及/或者至少一部分的画面内位置)而给予的某些意义(例如被拍摄体)的信息建立关联。该情况下，也可以说标签信息与在内容内表示给予该意义的部分的一个或者多个位置间接地建立关联。在本说明书中，也可以将表示这种意义的信息称为标签信息的类别。因此，在本实施方式中，存放于标签DB330的标签信息与内容内的一个或者多个位置建立关联，更具体而言，可以说标签信息与例如再生位置、画面内位置、或者类别中的一个或者多个建立关联。

[0133] (标签信息显示控制部)

[0134] 标签信息显示控制部340例如通过CPU等处理器根据存放于存储器的程序进行动作由此来实现，其使从标签DB330读出的标签信息显示于内容的再生画面。内容的再生画面中的标签信息的显示例如能够与上述的第1实施方式相同，但是按照上述在本实施方式中，标签信息例如也能够与类别建立关联，因此例如标签信息显示控制部340也可以将与共用的类别建立了关联的标签信息分组化进行显示。

[0135] 此外，标签信息显示控制部340在标签信息的生成或者登记之前，使表示与新生成的标签信息建立关联的类别的标签类别信息显示于内容的再生画面。标签类别信息能够在例如根据用户的行为而指定了内容的画面内位置的情况下，预先使与根据包含该行为的一系列行为而生成的标签信息建立关联的信息(例如与被拍摄体相关的信息)显示。例如，标签信息显示控制部340显示位于该画面内位置的附近的区域所显示的被拍摄体的信息来作为标签类别信息。在该被拍摄体已经与标签信息建立关联的情况下，标签信息显示控制部340也可以使这些标签信息作为标签类别信息来显示。另外，对由标签信息显示控制部340进行的标签类别信息的显示的具体例之后再叙述。

[0136] (标签建立关联部)

[0137] 标签建立关联部370例如通过CPU等处理器根据存放于存储器的程序进行动作由此来实现，其将由标签生成部160生成的标签信息与和成为标签信息源的行为对应的内容内的一个或者多个位置直接地或间接地建立关联。通过标签建立关联部370而与内容建立了关联的标签信息例如可以存放于标签DB330，此外也可以提供给标签信息显示控制部340，在客户端400中实时地进行显示。这里，将标签信息与再生位置、画面内位置建立关联的标签建立关联部370的处理例如能够与上述的第1实施方式中的标签建立关联部170相同。

[0138] 另外，标签建立关联部370通过将标签信息与类别建立关联，也可间接地与内容内的一个或者多个位置建立关联。标签建立关联部370也可以对例如用户在行为中明示地指定的画面内位置的附近所显示的被拍摄体进行检测，并将检测到的被拍摄体与标签信息建立关联。这里，在标签信息显示控制部340将检测到的被拍摄体等信息作为标签类别信息而显示于内容的再生画面的情况下，标签建立关联部370也可以基于用户根据标签类别信息进一步执行的行为，决定与标签信息建立关联的信息。例如，在用户参照了标签类别信息之后保持原样地执行了评论提交等行为的情况下，标签建立关联部370将作为标签类别信息而显示的信息与标签信息建立关联。此外，标签建立关联部370例如在用户执行了包含对标签类别信息的修正的行为的情况下，在根据该行为进行了修正之后将作为标签类别信息而显示的信息与标签信息建立关联。

[0139] (2-2.画面显示例)

[0140] (再生画面)

[0141] 图12以及图13是表示本实用新型内容的第2实施方式中的再生画面的显示例的图。本实施方式中的再生画面4000例如在用户通过客户端200起动用于内容视听的应用，并经由与第1实施方式中的说明相同的主页画面1000等而选择了视听的内容时，能够通过显示控制部220的控制而显示于显示部230。

[0142] 参照图12以及图13，在再生画面4000中，显示有内容图像2001、标签一览显示2003、标签类别信息4005、评论输入栏2007、再生控件2009、主页按钮2011、推荐信息2013、以及指针4015。以下，特别对其中作为与上述的第1实施方式不同的结构要素的标签类别信息4005以及指针4015进行说明。

[0143] 标签类别信息4005例如在用户使用指针4015执行了指定内容图像2001内的位置(画面内位置)的行为的情况下，继续预先提示与可基于用户的行为而生成的标签信息建立关联的类别的信息。例如，如图12所示，在用户使用指针4015指定了内容图像2001内的某个位置P的情况下，标签信息显示控制部340也可以检测在位于位置P的附近(也可以包含位置P)区域所显示的被拍摄体，并使与检索的结果发现的被拍摄体相关的信息作为标签类别信息4005来显示。这时，在与该被拍摄体已经建立关联的标签信息被存放于标签DB330的情况下，标签信息显示控制部340也可以使这些标签信息在标签类别信息4005中作为标签信息显示4029来显示。

[0144] 在上述的例子中，在未发现位置P的附近所显示的被拍摄体的情况下，标签信息显示控制部340也可以将以位置P为基准的规定大小的区域(例如以位置P为中心的矩形区域)确定为代替被拍摄体的显示区域的区域，并使表示该区域的信息作为标签类别信息4005来显示。此时，在将与该区域已建立关联的标签信息存放于标签DB330的情况下，标签信息显示控制部340也可以使这些标签信息在标签类别信息4005中作为标签信息显示
4029来显示。这样，不一定与被拍摄体建立关联的标签信息的生成例如虽然通过图像识别处理等未检测到被拍摄体的存在，但是能够在对用户来说显示有具有某种意义的内容的情况下、或者用户对内容图像2001的背景(街道或风景等)提交评论(基于该评论生成标签信息)的情况下等是有用的。

[0145] 此外，标签类别信息4005例如在用户使用指针4015执行了指定内容图像2001的区域的行为的情况下(如上述那样，能够将内容的画面内位置定义为范围或区域)，也可以继续提示与能够基于用户的行为而生成的标签信息建立关联的信息。例如，如图13所示，在用户使用指针4015指定了内容图像2001内的区域Q的情况下，标签信息显示控制部340检索包含在区域Q中的(也可以与区域Q部分重复)区域所显示的被拍摄体，并使与检索的结果发现的被拍摄体相关的信息作为标签类别信息4005来显示。这时，在将已经与该被拍摄体建立关联的标签信息存放于标签DB330的情况下，标签信息显示控制部340也可以使这些标签信息在标签类别信息4005作为标签信息显示4029来显示。另一方面，在未发现包含在区域Q中的区域所显示的被拍摄体的情况下，与上述的图12的例子相同，标签信息显示控制部340也可以将以区域Q为基准的规定大小的区域(也可以是区域Q本身)确定为代替被拍摄体的显示区域的区域，并使表示该区域的信息作为标签类别信息4005来显示。

[0146] (标签类别信息显示)

[0147] 图14是表示本实用新型内容的第2实施方式中的标签类别信息显示的例子的图。如参照图12以及图13说明的那样，在本实施方式中，在再生画面4000中，显示对与基于用户的行为而生成的标签信息建立关联的信息进行提示的标签类别信息4005。在上述的说明中，针对根据用户的行为而指定的内容图像2001内的位置或者区域，检索其附近显示的被拍摄体，并将与检索的结果发现的被拍摄体相关的信息作为标签类别信息4005来显示。

[0148] 然而，实际上，例如通过图像识别处理等检测到的被拍摄体并不一定被识别为特定的人物或者物。因此，也存在虽然被识别为被拍摄体、人物、或者物，但是未确定该识别物是什么或者是谁的情况。以下，对和这种情况对应的标签类别信息4005的显示例进行说明。

[0149] 首先，在包含某些被拍摄体的内容图像2001a中，设根据用户的行为指定了位置P(S301)。这时，从客户端400的通信部210向服务器300除发送内容的时间标识(T)、位置P的横位置以及纵位置(X、Y)的信息之外，还能够发送表示位置P的附近的图像的信息(S303)。表示位置P的附近的图像的信息例如可以是在以位置P为基准的规定大小的区域切取了内容图像2001的图像数据，也可以是基于从该图像数据提取的特征量的数据。

[0150] 接收到上述的信息的服务器300的标签信息显示控制部340检索位置P的附近的区域所显示的被拍摄体(S305)。更具体而言，例如标签信息显示控制部340也可以基于内容的时间标识(T)、位置P的横位置以及纵位置(X、Y)的信息，来检索已经与标签信息建立关联的位置P的附近的被拍摄体。此外，在已经执行了内容整体的被拍摄体检测的这种情况下，标签信息显示控制部340也可以参照被拍摄体检测的结果。

[0151] 另一方面，在已经与标签信息建立关联的位置P的附近的被拍摄体不存在，并且被拍摄体检测也还没有执行的情况下，标签信息显示控制部340基于从客户端400接收到的表示位置P的附近的图像的信息来执行被拍摄体的检索。例如，标签信息显示控制部340使用切取了内容2001的图像数据，或者基于从图像数据提取的特征量的数据来执行图像识别处理，由此检测被拍摄体。

[0152] 在通过上述那样的处理发现了被拍摄体并且识别出被拍摄体的情况下，标签信息显示控制部340使表示该被拍摄体的信息作为标签类别信息4005显示在客户端400中。另一方面，在虽然发现了被拍摄体，但未确定该被拍摄体是什么或者是谁的情况下，标签信息显示控制部340使表示未识别被拍摄体这一情况的信息作为标签类别信息4005a显示在客户端400中(S307)。

[0153] 在图示的例子中，虽然识别出被拍摄体是人物，但是未确定该人物是谁，因此标签类别信息4005a与表示被拍摄体是未识别的人物的信息“Who is this？”这样的标题4017a一起被显示。标题4017a能够以可由用户改写的方式显示。用户在得知该被拍摄体是谁的情况下，能够对标题4017a进行改写并输入人物名，之后提交评论(S309)。

[0154] 基于上述的评论提交，在服务器300上生成标签信息，并将生成的标签信息与被拍摄体建立关联(S311)。这时，标签建立关联部370能够将和标签信息建立了关联的被拍摄体与通过用户输入的被拍摄体名、和以前从客户端400接收到的表示位置P的附近的图像的信息建立关联并进行登记。由此，之后在内容内指定了包含类似的图像的画面内位置的情况下，标签信息显示控制部340能够将与上述登记的被拍摄体相关的信息作为标签类别信息4005来显示。

[0155] 如上述那样，在基于用户的输入来设定被拍摄体名的情况下，可能存在通过用户输入不同的被拍摄体名的情况。此外，例如也存在基于一个用户的输入设定被拍摄体名被判断为可靠性较低的情况。在这种情况下，标签信息显示控制部340使表示所登记的被拍摄体名的可靠性不足够高的信息作为标签类别信息4005b显示在客户端400中(S313)。

[0156] 在图示的例子中，标签类别信息4005b能够包含通过对目前登记的被拍摄体名附加“？”等来表示可靠性不高的标题4017b。该情况下，标题4017b能够以可通过用户(例如，与以前登记了被拍摄体名的用户不同的用户)改写的方式来显示。用户在知道该被拍摄体是与目前登记的被拍摄体名不同的人物的情况下，能够对标题4017b进行改写并输入人物名，之后提交评论(S315)。作为其他例子，也可以显示多个被拍摄体名的候补来作为标题4017b，用户能够从候补中选择认为正确的被拍摄体名，然后提交评论。

[0157] 标签建立关联部370(或者标签信息显示控制部340)基于评论提交来生成标签信息，将该标签信息与被拍摄体建立关联，并且基于例如如上述那样的被拍摄体名的修正输入的蓄积等，判定登记的被拍摄体名的可信度以及有无代替方案等，并根据需要修正被拍摄体名(S317)。通过这种处理，即使判明了在一定程度上正确的被拍摄体名称，标签信息显示控制部340也使表示登记的被拍摄体名的可靠性在一定程度上较高的信息作为标签类别信息4005c显示在客户端400中(S319)。

[0158] 在图示的例子中，标签类别信息4005c能够包含未对目前登记的被拍摄体名附加“？”等而显示的标题4017c。标题4017c能够以不由用户简单改写的方式显示。但是，针对标题4017c，也可以设置用户提出质疑的单元。例如，标签类别信息4005c也可以包含质疑按钮4019，在用户认为通过标题4017c而显示的被拍摄体名不对的情况下，能够按下质疑按钮4019并输入认为正确的被拍摄体名，之后提交评论(S321)。该情况下，使用质疑按钮4019来输入的被拍摄体名例如通过标签建立关联部370(或者标签信息显示控制部340)被蓄积，在蓄积了一定程度的相同的修正提案的情况下变更被拍摄体名，或者如显示标签类别信息4005b的情况那样将被拍摄体名返回至未确定的状态。

[0159] (2-3.处理流程)

[0160] 图15是表示本实用新型内容的第2实施方式中的标签类别信息显示的显示过程的例子的流程图。

[0161] 首先，在服务器300中，行为检测部150获取通过客户端400试听内容中的用户指定内容图像2001内的位置P的行为(S401)。这里，对于由行为检测部150获取的信息，例如除了内容的时间标识(T)、位置P的横位置以及纵位置(X、Y)的信息之外，也能够包含表示位置P的附近的图像的信息。标签信息显示控制部340使用上述的信息，检索存放在标签DB330中的标签信息(S403)。更具体而言，标签信息显示控制部340针对时间标识(T)和横位置以及纵位置(X、Y)，分别检索与在规定的范围内位于附近的被拍摄体的显示区域或者图像内的区域建立了关联的标签信息。

[0162] 作为检索的结果，在发现了符合的标签信息的情况下(S405的是)，标签信息显示控制部340基于发现的标签信息来生成标签信息显示4029(S407)。此外，标签信息显示控制部340基于与发现的标签信息建立了关联的被拍摄体的名称来生成标题4017(S409)。标签信息显示控制部340使客户端400中显示的再生画面4000显示包含标签信息显示4029以及标题4017的标签类别信息4005(S411)。

[0163] 另一方面，作为检索的结果，在未发现符合的标签信息的情况下(S405的否)，标签信息显示控制部340基于由行为检测部150获取的、表示位置P的附近的图像的信息来执行图像识别处理(S413)。这里，作为图像识别处理的结果，在被拍摄体被识别为人物的情况下(S415的是)，标签信息显示控制部340从标签DB330检索与被识别的人物建立了关联的标签信息(S417)。作为与上述的S403中的检索的不同，在S417中，由于将与标签信息建立关联的被拍摄体(人物)作为条件来执行检索，因此标签信息彼此的时间标识(T)和横位置以及纵位置(X、Y)并不一定共用。经由例如这种处理，在本实施方式中，标签信息能够以被拍摄体作为媒介，与内容的多个再生位置以及多个画面内位置建立关联。

[0164] 作为S417的检索的结果，在发现了符合的标签信息的情况下(S419的是)，标签信息显示控制部340基于发现的标签信息来生成标签信息显示4029(S407)。此外，标签信息显示控制部340基于与发现的标签信息建立了关联的被拍摄体(人物)的名称来生成标题4017(S409)。标签信息显示控制部340使客户端400中显示的再生画面4000显示包含标签信息显示4029以及标题4017的标签类别信息4005(S411)。

[0165] 另一方面，作为S417的检索的结果，在未发现符合的标签信息的情况下(S419的否)，标签信息显示控制部340基于被拍摄体(人物)的名称来生成标题4017(S409)。另外，标签信息显示控制部340在被拍摄体(人物)的名称不清楚的情况下，如图14所示的例子那样生成“Whois this？”等标题4017。标签信息显示控制部340使客户端400中显示的再生画面4000显示包含标题4017的标签类别信息4005(S411)。该情况下，在该内容中，继续基于用户的行为(评论提交)而新生成的标签信息能够作为与该被拍摄体(人物)建立关联的最开始的标签信息来处理。

[0166] 作为图像识别处理的结果，在被拍摄体被识别为不是人物(S415的否)，而是人物以外的物的情况下(S421的是)，标签信息显示控制部340从标签DB330检索与被识别的物建立了关联的标签信息(S417)。S417以后的处理与上述的被拍摄体是人物的情况相同(在被拍摄体(物)的名称不清楚的情况下，例如能够生成“What is this？”等标题4017)。

[0167] 另一方面，作为图像识别处理的结果，在也未识别为被拍摄体是物的情况下(S421的否)，标签信息显示控制部340将以位置P为基准的规定大小的区域确定为与标签信息建立关联的区域，并使包含与该区域相关的信息的标签类别信息4005显示(S423)。该情况下，也可能存在只是通过图像识别处理未检测到，但实际上在该区域显示有被拍摄体的情况，因此标签信息显示控制部140也可以显示“What is this？”等字符串来作为标签类别信息4005的标题4017。

[0168] 根据以上说明的本实用新型内容的第2实施方式，基于内容再生中的用户的行为而生成的标签信息不是简单地与内容的再生位置以及/或者画面内位置建立关联，而是例如通过与如内容的被拍摄体这样的类别的信息建立关联，而间接地与内容的多个再生位置以及多个画面内位置建立关联。由此，能够将标签信息与内容内用户感到某些意义的一系列部分建立关联，并能够容易地从标签信息读取具有意义的信息。

[0169] 另外，在上述的例子中，被拍摄体等类别被设定在内容内，但是也可以跨过内容来设定类别。例如，与在某个内容和其他内容中共用的被拍摄体建立了关联的标签信息也可以是彼此能够参照的。该情况下，例如，在显示标签信息显示4029时，若针对某些被拍摄体在内容中已经建立了关联的标签信息不存在，则也可以显示其他内容的标签信息。

[0170] (3.第3实施方式)

[0171] 接着，参照图16，对本实用新型内容的第3实施方式进行说明。在本实施方式中，在上述的第1或者第2实施方式中通过服务器实现的行为检测部、标签生成部以及标签建立关联部的功能由客户端实现。另外，关于详细的各功能，由于与第1或者第2实施方式相同，故通过赋予对应的符号而省略重复的说明。另外，在以下的说明中基于第1实施方式的构成进行说明，但是针对第2实施方式的构成，也能够进行相同的变形。

[0172] 图16是表示本实用新型内容的第2实施方式所涉及的各装置的概略功能构成的框图。参照图16，本实施方式所涉及的系统30包含服务器500和客户端600。服务器500和客户端600均由后述的信息处理装置的硬件构成来实现，并通过有线或者无线的各种网络而彼此连接。另外，服务器500并不一定通过单一的信息处理装置来实现，也可以通过利用网络而彼此连接的多个信息处理装置的协动来实现。此外，为了进行本实施方式的说明而简略化图示的功能构成，各装置也可以进一步包含未图示的功能构成。由于未图示的功能构成是作为各装置的一般功能构成而已知的结构，因此省略详细的说明。

[0173] 服务器500包含：通信部110、标签DB130、以及通信服务提供部180。在本实施方式中，服务器500例如实现以下功能，即、根据来自客户端600的请求，将从动画传送服务器等内容提供器50获取的内容与从标签DB130读出的标签信息一起提供给客户端600的功能；和将与内容相关地从客户端600提供的新的标签信息存放于标签DB130的功能。即，服务器500实现将各客户端600中生成的标签信息取得并汇集的作用。此外，服务器500也可以利用通信服务提供部180的功能，向提供了与相同内容的接近的再生位置(以及/或者接近的画面内位置)建立关联的标签信息的多个用户提供通信服务。

[0174] 客户端600除了包含通信部210、显示控制部220、显示部230、声音控制部240、声音输出部250、以及操作部260之外，还包含：再生控制部120、标签信息显示控制部140、行为检测部150、标签生成部160、以及标签建立关联部170。客户端600与服务器500独立地实现：内容再生中的用户的行为的检测、基于与行为相关的信息的标签信息的生成、以及标签信息对内容建立关联。根据这样的本实施方式的构成，即使在例如客户端600在内容的再生中无法与服务器500稳定地通信的情况下，也能够执行基于用户的行为的标签信息的生成以及建立关联。

[0175] 更具体而言，再生控制部120控制通信部110所获取的内容数据的再生。在本实施方式中，由于再生控制部120被设置于客户端600，因此再生控制部120能够控制显示控制部220以及声音控制部240。标签信息显示控制部140使在服务器500中从标签DB130读出的、从通信部110向客户端600的通信部210发送的标签信息显示于对应的内容的再生画面。在本实施方式中，由于标签信息显示控制部140被设置于客户端600，因此标签信息显示控制部140能够控制显示控制部220。行为检测部150基于操作部260获取的操作输入，来截取从通信部210向服务器500等发送的信息、以及通过通信部210从服务器500等接收的信息，并基于该信息来检测用户的行为。另外，如图中的虚线所示，行为检测部150也可以从操作部260直接地获取用户的操作输入的信息。标签建立关联部170将通过标签生成部160生成并与内容建立了关联的标签信息从通信部210发送至服务器500。在服务器500中，接收的标签信息被存放在标签DB130中。

[0176] 如以上说明的那样，在本实用新型内容的第3实施方式中，通过与第1或者第2实施方式不同的形式，将与第1或者第2实施方式相同的功能分散至服务器和客户端来实现。这样，在本实用新型内容的实施方式中，能够自由设定通过服务器与客户端的哪一方来实现各功能。因此，对于本实用新型内容，除了上述说明的实施方式以外，另外还能够是以不同的形式分散服务器与客户端来实现各功能的各种实施方式。

[0177] (4.硬件构成)

[0178] 接着，参照图17，对本实用新型内容的实施方式所涉及的信息处理装置的硬件构成进行说明。图17是用于说明信息处理装置的硬件构成的框图。图示的信息处理装置900例如能够实现上述实施方式中的服务器、客户端等。

[0179] 信息处理装置900包含：CPU(Central Processing unit：中央处理器)901、ROM(Read Only Memory：只读存储器)903、以及RAM(Random Access Memory：随机存取存储器)905。此外，信息处理装置900也可以包含：主机总线907、桥909、外部总线911、接口913、输入装置915、输出装置917、储存装置919、驱动器921、连接端口923、以及通信装置
925。信息处理装置900代替CPU901，或者与CPU901一起，也可以具有称为DSP(Digital Signal Processor：数字信号处理器)或者ASIC(Application Specific Integrated Circuit：专用集成电路)这样的处理电路。

[0180] CPU901作为运算处理装置以及控制装置发挥作用，其根据记录在ROM903、RAM905、储存装置919、或者可移动记录介质927中的各种程序，来控制信息处理装置900内的动作全部或者其一部分。ROM903存储CPU901使用的程序、运算参数等。RAM905暂时存储在CPU901的执行中使用的程序、其执行时的参数等。CPU901、ROM903、以及RAM905通过由CPU总线等内部总线构成的主机总线907而相互连接。另外，主机总线907经由桥909而与PCI(Peripheral Component Interconnect/Interface：外部设备互联/接口)总线等外部总线911连接。

[0181] 输入装置915例如是鼠标、键盘、触摸面板、按钮、或者开关等由用户操作的装置。输入装置915例如可以是利用了红外线或其他电波的遥控装置，也可以是与信息处理装置
900的操作对应的手机等外部连接设备929。输入装置915包含基于用户输入的信息而生成输入信号并输出至CPU901的输入控制电路。用户通过操作该输入装置915，来对信息处理装置900输入各种数据，或者指示处理动作。

[0182] 输出装置91以能够将获取的信息视觉地或者听觉地通知给用户的装置构成。输出装置917能够是例如LCD(Liquid Crystal Display：液晶显示器)，或者有机EL(Electro-Luminescence：点发光)显示器等显示装置、扬声器或者耳机等声音输出装置等。输出装置917将信息处理装置900的处理结果作为文本或者图像等影像来输出，或者作为声音或者声响等声音来输出。

[0183] 储存装置919是作为信息处理装置900的存储部的一例而构成的数据存放用的装置。储存装置919例如由HDD(Hard Disk Drive:硬盘驱动器)等磁存储部设备、半导体存储设备、光存储设备、或者光磁存储设备等构成。该储存装置919存放CPU901执行的程序或各种数据、以及从外部获取的各种数据等。

[0184] 驱动器921是用于磁盘、光盘、光磁盘、或者半导体存储器等可移动记录介质927的读写装置，其内置或外接于信息处理装置900。驱动器921读出记录在安装的可移动记录介质927中的信息，并输出至RAM905。此外，驱动器921向安装的可移动记录介质927写入记录。

[0185] 连接端口923是用于将设备与信息处理装置900直接连接的端口。连接端口923例如能够是USB(Universal Serial Bus：通用串行总线)端口、IEEE1394端口、SCSI(Small Computer System Interface：小型计算机系统界面)端口等。此外，连接端口923也可以是RS-232C端口、光纤音频端子、HDMI(注册商标)(High-Definition Multimedia Interface：高清多媒体接口)端口等。通过将连接端口923与外部连接设备929连接，能够在信息处理装置900与外部连接设备929之间交换各种数据。

[0186] 通信装置925例如是由用于与通信网络931连接的通信设备等构成的通信接口。通信装置925例如能够是有线或者无线LAN(Local Area Network：局域网)、Bluetooth(注册商标)、或者WUSB(Wireless USB：无线通用串行总线)用的通信卡等。此外，通信装置
925也可以是光通信用的路由器、ADSL(Asymmetric Digital Subscriber Line：不对称数字用户线)用的路由器、或者、各种通信用的调制解调器等。通信装置925例如在与因特网或其他通信设备之间，使用TCP/IP等规定的协议来发送接收信号等。此外，与通信装置925连接的通信网络931是通过有线或者无线而连接的网络，例如是因特网、家庭内LAN、红外线通信、无线电波通信或者卫星通信等。

[0187] 以上，示出了信息处理装置900的硬件构成的一例。上述的各构成要素可以使用通用的构件来构成，也可以由针对各构成要素的功能而特殊化的硬件构成。所涉及的构成能够根据实施的当前技术水平来适当地变更。

[0188] (5.补充)

[0189] 本实用新型内容的实施方式例如能够包含如上述说明那样的信息处理装置、系统、通过信息处理装置或者系统执行的信息处理方法、用于使信息处理装置发挥作用的程序、以及记录程序的非暂时的有形介质。

[0190] 以上，参照附图对本实用新型内容的优选实施方式详细地进行了说明，但是本实用新型内容的技术范围并不局限于所涉及的例子。只要是具有本实用新型内容的技术领域中的普通知识的人员，显然能够在权利要求记载的技术思想范畴内，想到各种变更例或者修正例，应知道对此当然也属于本实用新型内容技术范围。

[0191] 另外，以下那样的构成也属于本实用新型内容的技术范围。

[0192] (1)一种信息处理装置，其具备：

[0193] 行为检测部，其检测内容再生中的用户的行为；

[0194] 标签生成部，其基于与所述行为相关的信息来生成标签信息；以及[0195] 标签建立关联部，其将所述标签信息与对应于所述行为的所述内容内的一个或者多个位置建立关联。

[0196] (2)根据所述(1)中记载的信息处理装置，

[0197] 所述行为检测部检测由所述用户进行的评论的提交，

[0198] 所述标签生成部基于所述评论中包含的文本来生成所述标签信息。

[0199] (3)根据所述(2)中记载的信息处理装置，

[0200] 所述行为检测部检测由所述用户向社会媒介进行的评论的提交。

[0201] (4)根据所述(1)中记载的信息处理装置，

[0202] 所述行为检测部检测所述用户对所述内容以外的信息的访问，

[0203] 所述标签生成部基于所述访问的信息来生成所述标签信息。

[0204] (5)根据所述(4)中记载的信息处理装置，

[0205] 所述标签生成部生成包含向所述访问的信息的链接的所述标签信息。

[0206] (6)根据所述(1)～(5)的任意一项中记载的信息处理装置，

[0207] 还具备通信服务提供部，该通信服务提供部向执行了分别与多个标签信息对应的行为的多个用户提供通信服务，所述多个标签信息与共用的所述内容内的位置建立关联。

[0208] (7)根据所述(6)中记载的信息处理装置，

[0209] 所述标签建立关联部将所述多个标签信息与随时间进展的所述内容内的一个或者多个再生位置建立关联，

[0210] 所述信息处理装置还具备再生控制部，该再生控制部在所述用户利用所述通信服务期间，在包含所述一个或者多个再生位置的范围使所述内容反复再生。

[0211] (8)根据所述(6)或者(7)中记载的信息处理装置，

[0212] 所述行为检测部检测所述通信服务中的用户的发言，

[0213] 所述标签生成部基于所述发言中包含的文本进一步生成所述标签信息。

[0214] (9)根据所述(1)～(8)的任意一项中记载的信息处理装置，

[0215] 所述内容是影像内容，

[0216] 所述标签建立关联部将所述标签信息与所述影像内容的画面内位置建立关联。

[0217] (10)根据所述(9)中记载的信息处理装置，

[0218] 所述行为检测部检测包含所述画面内位置的指定的所述行为。

[0219] (11)根据所述(9)中记载的信息处理装置，

[0220] 所述标签建立关联部将所述标签信息与和对应于所述画面内位置的区域相关的信息建立关联。

[0221] (12)根据所述(11)中记载的信息处理装置，

[0222] 所述区域包含被拍摄体的显示区域，

[0223] 所述标签建立关联部将所述标签信息与和所述被拍摄体相关的信息建立关联。

[0224] (13)根据所述(12)中记载的信息处理装置，

[0225] 还具备标签信息显示控制部，该标签信息显示控制部使与和所述标签信息建立关联的所述被拍摄体相关的信息预先显示在所述内容的再生画面中，

[0226] 所述标签建立关联部基于用户根据由所述标签信息显示控制部预先显示的信息而进一步执行的行为，来决定与所述标签信息建立关联的信息。

[0227] (14)根据所述(13)中记载的信息处理装置，

[0228] 所述标签信息显示控制部基于与其他标签信息建立了关联的被拍摄体的信息，来决定与和所述标签信息建立关联的所述被拍摄体相关的信息，所述其他标签信息与和对应于所述行为的所述内容内的一个或者多个位置接近的位置建立了关联。

[0229] (15)根据所述(13)中记载的信息处理装置，

[0230] 所述标签信息显示控制部基于从所述区域的图像提取的信息，来决定与和所述标签信息建立关联的所述被拍摄体相关的信息。

[0231] (16)根据所述(13)～(15)的任意一项中记载的信息处理装置，

[0232] 所述标签建立关联部基于用户根据由所述标签信息显示控制部预先显示的信息而进一步执行的行为，来修正与和所述标签信息建立关联的所述被拍摄体相关的信息。

[0233] (17)根据所述(1)～(16)的任意一项中记载的信息处理装置，

[0234] 所述标签建立关联部将所述标签信息与随时间进展的影像内容内的一个或者多个再生位置建立关联，

[0235] 所述信息处理装置还具备标签信息显示控制部，该标签信息显示控制部通过在所述一个或者多个再生位置的所述影像内容的截屏图像，使所述标签信息显示在所述影像内容的再生画面中。

[0236] (18)根据所述(17)中记载的信息处理装置，

[0237] 所述标签信息显示控制部还通过表示所述标签信息中包含的信息的种类的图标，使所述标签信息显示在所述再生画面中。

[0238] (19)根据所述(17)或者(18)中记载的信息处理装置，

[0239] 还具备再生控制部，在选择了显示在所述再生画面中的标签信息的情况下，该再生控制部使所述影像内容的再生跳转至与所述选择的标签信息对应的再生位置。