据外媒报道,苹果公司(Apple)向美国专利商标局(US Patent & Trademark Office)申请了一项新的专利:下一代歌曲识别应用程序“Shazam”。该专利表示,该下一代应用程序将可应用于更多设备上,如耳机、iPhone、混合现实HMD、iPad、智能隐形眼镜、车辆挡风玻璃上的抬头显示器等。
图片来源:patentlyapple.com
更重要的是,该专利描述了一项全新的功能,即通过确定动作(例如摇头)来确定用户对音频内容是否感兴趣,并触发应用程序,已识别用户喜欢且头部会随节拍晃动的曲调。
基于第一传感器和第二传感器数据,该方法可识别音频中的一个或多个元素与身体运动的一个或多个方面之间基于时间的关系。
例如,该方案或可确定用户是否在根据在环境中播放音乐的节拍摇头。这种头部摆动可以被认为是对音乐感兴趣的被动指示。
在另一个示例中,用户运动可基于类型(例如对应于兴奋的行为)被识别为兴趣指示,和/或被识别为在重要事件发生不久后的运动。例如,这可以确定正在播放的特定歌曲,并且基于与歌曲节拍相匹配的用户运动来确定用户是否对歌曲感兴趣。
基于识别对内容的兴趣可以主动执行各种动作。作为示例,设备可以呈现内容的标识(例如显示歌曲的名称、艺术家等),呈现与内容中的词(例如歌词)相对应的文本,和/或提供选项,以重放内容、离开物理环境后持续体验内容、购买内容、下载内容和/或将内容添加到播放列表。
在另一个示例中,内容的特征(例如音乐类型、节奏范围、乐器类型、情绪、类别等)被识别并用于为用户识别附加内容。
在确定用户对音频内容感兴趣时,设备资源可以被有效地使用,包括基于设备上的不同触发器在不同的电源状态中移动。例如,音频分析可以选择性地进行执行,基于检测身体运动,如摇头、跺脚、跳跃、挥舞、面部反应或指示用户兴趣的其他运动。
苹果的专利图3为图1示例性电子设备根据公开的实施方式所获得运动数据;图4是一个方法流程图,用于通过确定运动与检测到的音频内容具有基于时间的关系,从而识别是否对音频内容感兴趣。
图片来源:patentlyapple.com
苹果的专利图2为混合现实耳机的视图,其中用户能够看到增强内容(#265),即具有信息气泡,以及获得基于检测身体运动和物理环境中的音频而挑选的信息和特征。
图片来源:patentlyapple.com
根据一些实例,图2中上方的电子设备#105生成并向一个或多个用户呈现扩展现实(XR)环境。扩展现实环境是指人们通过电子设备感知和/或与之交互的完全或部分模拟环境。