容的通常提示(步骤S12)。
[0106]接着，接收装置I以应用的取得为契机开始通信内容的取得(步骤S13)。
[0107]接收装置I判定通信内容的提示的准备是否完成(步骤S14)。在判定为通信内容的提示的准备完成之前(S14:否)，进行步骤S14的处理。并且，在判定为通信内容的提示的准备完成的情况下(S14:是)，进行步骤S15的处理。另外，通信内容的取得的准备是否完成的判定中，例如在缓冲器22中储存有规定量的通信内容的内容数据的情况下判定为通信内容的取得的准备完成。
[0108]接收装置I在控制部51中将解码后的广播内容的PTS与通信内容的PTS比较，计算通信内容相对于广播内容的延迟时间(步骤SI5)。
[0109]控制部51基于在步骤S15中计算出的延迟时间生成用于使广播内容与通信内容的输出定时相匹配的控制信息，向缓冲器13内的同步用缓冲器72及缓冲器22内的同步用缓冲器72输出。缓冲器13内的同步用缓冲器72按照控制信息基于在步骤S15中计算出的延迟时间使缓冲器输出延迟，缓冲器22内的同步用缓冲器72按照控制信息进行缓冲器输出。由此，接收装置I将广播内容的提示从通常提示切换为延迟提示而开始延迟提示，同时，开始通信内容的提示。进而，控制部51将同步提示报告用的消息(例如“为了取得广播内容与通信内容之间的同步而将广播内容重复提示”之意的消息)的提示向内容生成部31指示，内容生成部31基于该指示开始向提示部5提示同步提示报告用的消息(步骤S16)。
[0110]控制部51基于在步骤S15中计算出的延迟时间，判定广播内容的重复提示是否已结束(步骤S17)。在判定为广播内容的重复提示结束之前(S17:否)，进行步骤S17的处理。并且，在判定为广播内容的重复提示结束的情况下(S17:是)，控制部51向内容生成部31指示同步提示报告用的消息的提示的结束，内容生成部31基于该指示，结束同步报告用的消息向提示部5的提示(步骤S18)。
[0111](实施方式I的补充)
[0112]以下，对实施方式I的补充进行记载。
[0113](I)在实施方式I中说明的广播内容和通信内容的同步提示方法是一例，并不限定于此。
[0114]例如也可以是图6所示的同步提示方法。其中，图6(a)?图6(e)的时间信号分别是与图4(a)?图4(e)的时间信号相同的种类。
[0115]在图4的同步提示方法中，在状态的转变期间、即在从开始通信内容的取得起到通信内容的提示的准备完成的期间，将广播内容进行通常提示。
[0116]相对于此，在图6的同步提示方法中，在状态的转变期间、即从开始通信内容的取得起到通信内容的提示的准备完成的期间，将广播内容的提示中断而使提示部5的画面熄灭(black out)。与此同时，接收装置I为了对于视听者的同步提示报告而向提示部5提示例如表示处于用于取得广播内容与通信内容的同步的待机中的消息。
[0117]此外，通过改变缓冲器的时钟定时的控制方法或提示定时，能够实现各种同步提示方法，例如有图7所示的同步提示方法。其中，图7(a)?图7(e)的时间信号分别是与图4(a)?图4(e)的时间信号相同的种类。
[0118]在图7的同步提示方法中，接收装置I以通信内容的取得为契机，开始广播内容的缓慢再现，一边将通信内容的提示的准备的完成与广播内容的再现时间比较，一边转变为进行广播内容的延迟提示和通信内容的提示的状态。与此同时，接收装置I为了对于视听者的同步提示报告用而向提示部5提示例如表示处于用于取得广播内容与通信内容的同步的广播内容的缓慢再现中的消息。另外，缓慢再现可以通过扩大缓冲器的输出的时间间隔来实现。广播内容通过缓慢再现一点一点地进行延迟调整，在延迟调整完成而广播内容的提示时刻与通信内容的提示时刻一致的时刻，使广播内容与通信内容同步地提示。在此情况下，通信的提示准备完成时刻与同步提示定时不一致。
[0119]再现的定时及时钟控制由控制部51控制。此外，控制部51根据同步提示方法，将适当的提示或提示定时向内容生成部31输出。
[0120]在图7的同步提示方法中，当使广播内容与通信内容同步而提示时，能够使这些提示变得更顺畅。
[0121](2)在实施方式I的同步提示方法中，以通信内容的准备的完成为契机，将广播内容的提示从通常提示切换为延迟提示。但是，并不限定于此，例如也可以预先使广播内容延迟提示，使用图8的流程图说明这一例。其中，在图8的流程图的开始时间点，接收装置I处于电源OFF状态(广播OFF/通信OFF的状态)。
[0122]接收装置I通过使广播内容提示成为0N，从电源OFF状态(广播OFF/通信OFF的状态)向广播ON/通信OFF的状态转变(步骤S51) ο接收装置I开始广播内容的取得，开始广播内容的通常提示(步骤S52)。
[0123]接收装置I在广播内容的通常提示中，作为第一应用而启动使广播内容延迟提示的应用(以下称作“延迟提示应用”)(步骤S53)。作为广播的延迟提示定时，例如可以举出视听者指定的定时、以及广播业者或其他业者通过通信或广播的AIT指定的定时、或者通过基于AIT取得的应用指定的定时等。
[0124]在将延迟提示应用启动后，接收装置I在控制部51中取得通信内容，将解码后的广播内容的PTS与通信内容的PTS比较，计算通信内容相对于广播内容的延迟时间(步骤S54)。
[0125]控制部51基于在步骤S54中计算出的延迟时间控制缓冲器13内的同步用缓冲器72的输出延迟，由此，接收装置I将广播内容的提示从通常提示切换为延迟提示而开始延迟提示。进而，控制部51向内容生成部31指示同步提示报告用的消息(例如，“为了取得广播内容与通信内容之间的同步而将广播内容重复提示”之意的消息)的提示，内容生成部31基于该指示，开始向提示部5提示同步提示报告用的消息(步骤S55)。
[0126]控制部51基于在步骤S54中计算出的延迟时间判定广播内容的重复提示是否已结束(步骤S56)。在判定为广播内容的重复提示结束之前(S56:否)，进行步骤S56的处理。并且，在判定为广播内容的重复提示结束的情况下(S56:是)，控制部51向内容生成部31指示同步提示报告用的消息的提示的结束，内容生成部31基于该指示，结束同步提示报告用的消息向提示部5的提示(步骤S57)。
[0127]在广播ON/通信OFF的状态且广播内容的延迟提示中，接收装置I将第二应用启动，由此开始通信内容的取得(步骤S58)。
[0128]接收装置I判定通信内容的提示的准备是否已完成(步骤S59)。在判定为通信内容的提示的准备完成之前(S59:否)，进行步骤S59的处理。并且，在判定为通信内容的提示的准备完成的情况下(S59:是)，接收装置I开始通信内容的提示(步骤S60)。
[0129]在有延迟提示的可能性的程序的情况下，通过在广播接收的开始时、选台时或CM(广告)的定时等视听者的别扭感较小的定时预先使广播内容延迟提示，能够进行广播内容和通信内容的顺畅的同步提示。
[0130]另外，例如根据使广播内容的延迟提示公开的定时(例如广播接收的开始时或选台时)，也可以不提示同步提示报告用的消息。
[0131 ] (3)在实施方式I中说明的同步提示方法中的对于视听者的有关广播内容与通信内容的同步提示的报告(同步提示报告)的内容及期间是一例，并不限定于此。
[0132]以下，关于同步提示报告，包括实施方式I中记载的内容而进行说明。
[0133]作为同步提示报告的内容，例如有有关广播内容与通信内容的同步提示的消息的提示、以及不连续影像的动画的提示等。
[0134]具体而言，例如如下述那样提示。
[0135].显示向视听者示出所设定的同步提示方法的消息或图标等。
[0136].显示向视听者示出要发生不连续的影像显示或发生了不连续的影像显示的消息或图标等。
[0137]..显示向视听者示出影像被重复提示的消息或图标等。
[0138].为了消除不连续的显示，在影像之间放入动画的功能。
[0139]另外，除了消息或图标等的显示以外，还有反射式显示或声音输出等。此外，也可以使用外部的设备来提示。
[0140]作为同步提示报告的定时或期间，例如也有进行广播内容的重复提示的期间、从开始通信内容的取得起到广播内容的重复提示结束的期间、应用的启动定时、通信内容的准备完成的定时等与接收装置I的事件相应的定时或期间等。此外，还有视听者的接口操作的定时等。另外，也可以仅在视听者许可同步提示报告的期间中进行同步提示报告。
[0141]控制部51例如按照由应用指定的同步提示方法、预先设定的规则或接收装置的设定等，决定同步提示报告的内容、定时或期间，向内容生成部31指示。内容生成部31在按照控制部51的指示决定的定时或期间中执行所决定的内容的同步提示报告。另外，关于接收装置的设定，视听者既可以能够进行，也可以不能进行。
[0142]此外，也可以是在广播或通信中埋入指示同步提示报告的内容、定时或期间的控制信号等，广播业者或与广播业者相关联的业者或其他业者能够根据内容来指示同步提示报告的内容、定时或期间那样的形态。
[0143](4)在实施方式I中，假设通信内容的取得定时与应用的取得定时相同而进行了说明，但并不限定于此，也可以是不同的定时。另外，通信内容的取得的定时例如遵循应用的指示。
[0144](5)在实施方式I中，假设接收装置I的状态转变是在图3中表示一例的状态转变而进行了说明，但并不限定于此，例如也可以是以下这样的形态。
[0145]接收装置I在从广播内容的通常提示且不与内容联动的独立通信应用的启动中的状态(广播ON/通信独立应用ON/联动应用OFF的状态)向与广播联动的应用启动的状态(广播ON/通信独立应用ON/联动应用ON的状态)的状态转变中，也需要使广播内容延迟。在此情况下，也能够采用与在实施方式I及实施方式I的补充中说明的同步提示方法、同步提示方法中的同步提示报告实质上相同的内容。
[0146](6)在实施方式I及实施方式I的补充的(2)中，为了计算广播内容与通信内容的延迟时间，使用在解码后输出的PTS进行计算。但是，并不限定于此，也可以使用DTS计算，也可以使用PTS和DTS这两个信息来计算。此外，也可以使用解码前的PTS、DTS计算。此外，也可以使用PCR或基于PCR生成的时钟(STC)、PTS、DTS来计算。在基准时钟是NTP的情况下，也可以使用NTP计算，在广播内容和通信内容使用不同的基准时钟的情况下，也可以使用表示各自的基准时钟的对应关系的时间线辅助信息来计算。
[0147]此外，缓冲器的控制定时也可以考虑PTS、DTS的计算的场所及缓冲器的位置来计算。作为PTS、DTS的计算的场所及缓冲器的位置不同的例子，可以使用以下这样的结构。
[0148]实施方式I在解码部14中提取PTS、DTS，但从PES包向ES的变换及PTS、DTS的提取也可以不是在解码部14中处理，而是在缓冲器13的PES缓冲器71中处理。在此情况下，优选的是在缓冲器13中PES缓冲器71与同步用缓冲器72的位置相反。PES缓冲器71将提取出的PTS及DTS向控制部51输出。PES缓冲器71在从控制部51指示的定时将影像或声音等的各部分的内容数据向解码部14及通信收发部41的一方或双方输出。同样，从PES包向ES的变换及PTS、DTS的提取也可以不是在解码部23中处理，而是在缓冲器22的PES缓冲器71中处理。在此情况下，优选的是在缓冲器22中PES缓冲器71与同步用缓冲器72的位置相反。PES缓冲器71将提取出的PTS及DTS向控制部51输出。PES缓冲器71在从控制部51指示的定时将影像或声音等的各部分的内容数据向解码部23及通信收发部41的一方或双方输出。另外，以上的结构与在后述实施方式2中说明的结构是同样的，图2中的PES缓冲器71相当于图14及图18中的分离缓冲器114。
[0149](7)在实施方式I中，说明了在从控制部51指示的定时将影像或声音等的各部分的内容数据以PES包单位向通信收发部41输出，通信收发部41将内容数据及从控制部51受理的数据向内容提示装置发送，但更具体地讲，在通信收发部41中，将影像或声音等的各部分的访问单元、PES包、及从控制部51输入的控制信息及时钟信息使用特定的复用方式进行再复用后，向协同终端发送。复用方式中有MP4、MPEG2 — TS、MPEG—DASH、MMT等。
[0150](8)在实施方式I中，假设通信内容相对于广播内容以一定的时间延迟，但也可以考虑广播内容相对于通信内容延迟的情况。在此情况下，广播内容的提示为通常提示的I个样式(pattern)，通信内容的提示为通常提示和延迟提示这两个样式。另外，除了这一点以夕卜，能够采用与在实施方式I及实施方式I的补充中说明的同步提示方法、同步提示方法中的同步提示报告实质上相同的内容。
[0151]在实施方式I中，假设通信内容相对于广播内容以一定的时间延迟，但例如因通信传送路径中的传送抖动的影响而通信内容相对于广播内容的延迟时间不为一定的情况下，适当地控制缓冲器，进行广播内容与通信内容的同步提示。
[0152](9)在实施方式I中，关于从广播ON/通信OFF的状态向广播ON/通信ON的状态的转变进行了说明，但也有从广播ON/通信ON的状态向广播ON/通信OFF的状态的转变。
[0153]在从该广播ON/通信ON的状态向广播ON/通信OFF的状态的转变中，在将广播内容的提示从延迟提示切换为通常提示的情况下，会发生广播内容的不连续的提示或广播内容的提示的一部分的缺失。
[0154]因此，接收装置I也可以对视听者进行以广播内容的不连续的提示的发生或广播内容的提不的一部分的缺失的发生等为内容的同步提不报告。
[0155]另外，控制部51决定同步提示报告的内容、定时或期间，向内容生成部31指示。并且，内容生成部31在指示的定时或期间执行被指示的内容的报告。
[0156](10)在实施方式I中，使用图1对将广播内容和通信内容同步而提示的情况进行了说明，但并不限定于此，例如也可以是以下这样的形态。
[0157]在将I个内容利用两个不同的传送路径发送的情况下，可以将接收装置的结构做成例如将从两个传送路径接收的内容同步而用I个解码部解码的图9所示的结构。其中，在图9中，对于进行与图1的构成单元实质上相同的处理的构成单元赋予相同的标号。
[0158]在图9所示的接收装置IA中，解码部14A以缓冲器13及缓冲器22的输出为输入，将来自各自的输入数据解码，向内容生成部31A输出。内容生成部31A以解码部14A的输出为输入，使用输入数据按照控制部51的指示生成服务的提示内容。
[0159]在使用广播发送主影像、使用通信发送扩展信息的情况下，可以将接收装置的结构做成例如将主影像用一个解码部解码、将主影像和扩展影像用其他解码部解码的图10所示的结构。其中，在图10中，对于进行与图1的构成单元实质上相同的处理的构成单元赋予相同的标号。
[0160]在图10所示的接收装置IB中，解码部14B以缓冲器13的输出为输入，将输入数据解码，向内容生成部31B输出。内容生成部31B以解码部14B的输出为输入，使用输入数据按照控制部51的指示生成非扩展影像等提示内容，向提示部5输出。
[0161]解码部23B以缓冲器13及缓冲器22的输出为输入，将输入数据解码，向内容生成部32B输出。内容生成部32B以解码部14B的输出和解码部23B的输出为输入，使用来自各自的输入数据按照控制部51的指示生成扩展影像等提示内容，向提示部5B输出。
[0162]在图9及图10的哪种情况下，都能够采用与在实施方式I及实施方式I的补充中说明的同步提示方法、同步提示方法中的同步提示报告实质上相同的内容。
[0163](11)即使在广播与通信之间在接收上产生了时间差，根据内容也有不需要在广播与通信之间取得同步的情况，还有在广播与通信之间不进行同步控制的选择分支。在此情况下，控制部51也可以决定在广播与通信之间进行还是不进行同步控制。
[0164]同步的必要性既可以由接收装置决定，也可以按每个内容规定延迟容许度并由广播业者或与广播业者相关联的业者或其他业者使用广播或通信向接收装置传送。关于延迟容许度，有通过AIT等发送的方法、在能够用AIT确定的应用内发送的方法、广播信号的控制信息(SI)等。
[0165](12)在实施方式I中使用图1及图2说明的接收装置I中的缓冲器结构是一例，只要是具有与实施方式I同样的功能的缓冲器就可以，并不限定于该结构。
[0166]例如，缓冲器优选的是配置在能够使存储器尺寸最小的位置。此外，在实施方式I中，假设按每个功能具备缓冲器，如PES缓冲器、同步用缓冲器、重排序缓冲器等，但并不限定于此，也可以在一个缓冲器中具备多个功能。此外，缓冲器对于各个功能分配的存储器分配既可以是动态的，也可以是共用存储器而实现多个功能。
[0167]另外，关于使用图9及图10说明的接收装置1A、1B也可以说是同样的。
[0168](13)在实施方式I中，关于广播与通信的同步控制进行了说明，但协同的系统并不限于广播与通信的协同，也可以是广播与广播的协同，也可以是通信与通信的协同，也可以是基于3个以上的传送路径的信号的协同。
[0169](14)在实施方式I中，使用由MPEG2 — TS系统规定的包结构进行了说明，但复用方式没有被特别限定。作为复用方式，例如有MP4、或广泛用于流媒体中的RTP、MMT等。
[0170](15)在广播通信协同服务中，还提出了接收装置与例如智能电话、平板电脑等作为通信终端的内容提示装置协同的服务。
[0171]在此情况下，需要由接收装置I提示的内容与由内容提示装置提示的内容的同步控制。
[0172]作为这样的服务的一例，可以举出由接收装置提示广播内容、由内容提示装置提示通信内容的形态。
[0173]但是，接收装置与内容提示装置协同的服务并不限定于此。例如有:(A)将通信内容用接收装置提示、将广播内容用内容提示装置提示的服务；(B)将广播内容和通信内容的一部分用接收装置提示、将通信内容的一部分用内容提示装置提示的服务；(C)将广播内容的一部分用接收装置提示、将广播内容的一部分和通信内容用内容提示装置提示的服务；(D)将通信内容的一部分用接收装置提示、将通信内容的一部分和广播内容用内容提示装置提示的服务；(E)将广播内容的一部分和通信内容用接收装置提示、将广播内容用内容提示装置提示的服务;及(F)将广播内容的一部分和通信内容的一部分用接收装置提示、将广播内容的一部分和通信内容的一部分用内容提示装置提示的服务等。
[0174]为了在接收装置与内容提示装置之间实现广播与通信的同步控制，需要将关于同步的AIT等控制信息、PTS或DTS或广播与通信之间的延迟时间、和同步提示方法、同步提示报告根据需要向对方通知。
[0175]在由接收装置接收广播、由作为协同终端的平板电脑终端接收通信、相互同步的情况下，需要将协同终端的PTS向接收装置通知。
[0176]此外，在将由接收装置接收到的广播内容或通信内容向协同终端发送的情况下，通过发送由接收装置进行同步控制后的数据，能够减轻协同终端的硬件及软件的负担。此时，接收装置也可以计算在接收装置与内容提示装置之间的通信中发生的延迟时间，考虑通信内容的接收时刻相对于广播内容的接收时刻的延迟时间和在接收装置与内容提示装置之间的通信中发生的延迟时间这两者，来控制从缓冲器13内的PES缓冲器71及缓冲器22内的PES缓冲器71的PES包的输出定时。
[0177]在哪种情况下，控制部51都决定同步提示方法、同步提示报告的内容及定时或期间，向内容生成部指示，同时将所决定的内容经由通信收发部41向协同终端通知。
[0178](16)根据应用的种类及内容，存在很多使通信与广播同步而提示的使用情形及同步提不方法。
[O ?79 ]控制部51具有能够提供多个同步提不方法的功能、以及能够控制与同步提不方法相应的有关同步提示的提示方法的功能，根据应用或内容向视听者提示可选择的多个同步提示方法。
[0180]视听者从可选择的多个同步提示方法中，通过使用输入接口进行的操作来选择。并且，将选择内容向控制部51输入而设定。另外，关于设定的一系列的动作由控制部51、操作输入部42、内容生成部31、提示部5联动来进行。
[0181]在图11中表示设定菜单的一例。
[0182]在图11的例子中，作为广播通信协同的菜单，可以进行动画设定和同步提示方法设定。
[0183]在动画设定中，能够进行例如在同步提示的画面转变中将两个不连续的影像连结时的动画的设定。
[0184]在同步提示方法设定中，能够进行关于同步提示方法的设定。在图12中表示同步提示方法的设定画面的一例。在同步提示方法设定中，例如除了接收机担当模式、广播站担当模式、手动模式、OFF(不进行同步提示)以外，视听者还能够从可向视听者提示的同步提示方法(类型1、类型2)中选择。
[0185]在视听者选择了广播站担当模式的情况下，控制部51仅在AIT中设定有同步提示方法的情况下执行记述在AIT中的同步提示方法。
[0186]在视听者选择了接收机担当模式的情况下，控制部51从可向视听者提示的同步提示方法或记述在AIT中的同步提示方法中选择，执行所选择的同步提示方法。另外，同步提示方法的选择也可以动态地进行。
[0187]另外，同步提示方法除了由AIT指定以外，还有在能够用AIT确定的应用内指定的方法、使用广播信号的控制信息(SI等)指定的方法。
[0188]在视听者选择了手动模式的情况下，出现图13中表示一例的手动设定画面。在图13的手动设定画面的例子中，视听者能够在一 10秒?+10秒中的一MAX秒?+MAX秒之间设定延迟时间。延迟时间的MAX值由控制