与 HLS 无缝过渡媒体

与 HLS 无缝过渡媒体

探索如何创建在剧集、歌曲、场景和单个资源之间无缝过渡的流媒体内容。通过无缝 HLS 播放，您可以即时拼接多条内容，以创建自定义训练，设计交互内容，讲述令人信服的故事等等。我们将展示如何提供可靠的流媒体音乐、事件记录和预录视频连续性，并在您的 app 中提供引人入胜的观看体验。

资源
- HTTP Live Streaming - Overview
- - 高清视频
  - 标清视频
相关视频

WWDC21
- 探索 AVFoundation 中的 HLS 变体
下载

♪播放重低音音乐♪ ♪ 赛门戈德雷：大家好这个影片是关于如何通过HTTP实时串流协议无间隙地衔接媒体我是赛门是Apple串流媒体团队的成员之一你会使用AVQueuePlayer吗？你想让你的客户在你的应用程序中体验无缝地播放HTTP实时串流项目这种新风格的播放方式吗？你想将媒体如同创作者所希望的连贯地呈现吗？我们是否能够通过提供一个体验使客户能更长久地享用我们的媒体并借此来支持我们的客户呢？如果答案是肯定的那么这部影片会带给你很多收获你会学习如何能够无间隙地衔接 HTTP实时串流项目这是今天的内容我们会深入描述一些通过这个新功能你所能提供的绝佳媒体体验我会详细说明编写媒体时的必要事项我会以一些播放列表为例子并点出其中最好的几个然后我们会以一个范例做总结在AVQueuePlayer中衔接各个由HTTP实时串流协议支持的 AVPlayer项目的好处相当明显直到现在媒体的衔接点还有些不顺畅不管是音频的失灵或是短暂的画面停格甚至是不明的缓冲现象无间隙项目衔接会维系你在应用程序中所提供的客户和程序内容之间的连接也许你记得这样的用语：“别转台” 你可以构建一个分集影片的处理方法让一部影片的结尾可以无缝衔接至下一部影片的开头无间隙衔接让你可以重现歌曲无缝连接的专辑式体验任何人都很享受这种体验这么做的时候原本可能是现场演出的内容或原先的创作内容会更准确的被再现我们可以提供一个连续的无间断的体验我们可以复制线性规划的处理方式但我们也可以带给观赏者一个动态的甚至是互动式的体验让他们所观看的任务或画面能直接且流畅地过渡至下一个任务或画面以一系列的健身影片或其他教学性质的媒体为例无间隙衔接从程序设计方面来说使我们可以将一个视听片段中的段落进行拼接且同时保持它的流畅性你可以增加训练次数或在训练中添加缓和运动我们可以达成以上这些并保有于HTTP上传输串流媒体时所有自适应比特率媒体的优点当然我们也有运用这项功能 Apple Music的新功能通过HTTP实时串流协议传输内容并使得歌曲间能无间隙地衔接我们很高兴能带给我们的客户这样的体验而我们也希望能将它提供给你的客户现在让我们仔细来看要将这样的项目衔接也呈现在你的HTTP实时串流内容中时创作时需要纳入的必要事项通过在HLS指令清单中输入变量这个变量会在一连串项目之间提供音频格式上的连续性你会使媒体能够无间隙地衔接你的内容所提供的变量要符合以下这些音频媒体的特性： FairPlay串流、音频编解码器的使用后者会由串流标签的转码属性指定以及通道数这会由媒体标签的通道属性指定请注意如果要进行转译的音频有不同的取样频率和位元深度这可能会抑制无间隙衔接的运作关于提供相符格式及维持连续性及维持连续性的建议也适用于这些特性也就是说要达到无间隙衔接请记得为要连贯入列的项目提供变量一致的音频媒体最后在编辑媒体时请遵循CMAF编辑指引 CMAF指的是 “common media application format.” 在这个MPEG特定格式中有一个特定的建议也就是运用编辑列表显示出提前的以及多余的帧数现在让我们通过仔细察看两个候选项目的主变量播放列表来看一个简单的例子在这个HTTP实时串流协议清单中我已经输入了四个视听变量：一对720p变量和一对1080p变量每一对中其中一个含有高效率音频编码HE_AAC, 另一个则含有低复杂度音频编码AAC_LC 在这个例子中假设播放状态支持含有HE_AAC编码的720p影片播放即将结束时 AVQueuePlayer至少在一开始会在接续的项目中选择编码相似的变量即使现在的网络环境支持较高的音质情况也是如此在处理无间隙衔接时无间隙衔接比高音质来的重要播放持续进行时会进行自适应比特率的启发式评估如果状态维持播放器会无缝地转换至较高的音质太棒了现在假设我们没有在第二个项目中输入HE_AAC 在这个情况下 AVQueuePlayer就无法维持音频的连续性也无法进行无间隙衔接但是它能够为播放状态选择第一个最适当的变量假设我们已经将内容编辑为可支持无间隙衔接在这个情况下我们必须记得如何使用AVQueuePlayer 这里有一个简短的代码片段我们创建两个AVPlayer项目并在播放之前将它们按次序入列请注意这两个项目是来自两个不同的链结创建完AVQueuePlayer 我们可以运用 “在…之后插入”方法告知播放列你想要的顺序接着就只剩下“播放”了
我想跟你分享一个进阶技巧它允许使用单一的涵盖数据从这个涵盖数据你可以实例化多个AVPlayer项目我们可以针对每个AVPlayer项目在入列AVQueuePlayer之前定义不同的入点与出点运用AVPlayer项目的seekToTime方法我们可以定义入点接着我们可以运用 forwardPlaybackEndTime定义出点这个是关于这个概念的图示项目一、二及三都来自相同的AV涵盖数据由三个相同的段落组成他们的不同之处在于我运用seekToTime设定了不同入点以及运用forwardPlaybackEndTime 定义了不同的出点现在我可以将这三个相同的项目入列进我的AVQueuePlayer中而我将会得到一个定制化的动态序列现在让我们通过实际演示来观看以及聆听无间隙衔接的效果这个范例中我们会互动式地拼接三段健身串流影片我会保留显示各项目中的AVKit控件这样你就能看见这些是完全不同的串流资源我会先无缝地播放一次这三段影片接着我们会互动式地编辑整个片段在你的软件中你可以试想在设计程序时也提供或甚至执行这样的重整功能好我们现在来做暖身 ♪有活力的电子音乐♪ ♪ 准备好了吗？来进行坡地模式吧 ♪活泼的嘻哈音乐♪ ♪ 好了结束了现在来做缓和运动 ♪平静的电子音乐♪ ♪ 我光是用看的就汗流浃背了我想要直接跳至 “好了结束了”的部分并跳过坡地模式的环节旧金山这里已经够多山坡了为了达到我的目的让我们来编辑这个训练组合的次序我会将坡地训练移到最上方这会使我在暖身后直接且无间隙地过渡至缓和运动的部分接着我会点选现在位于第二位的暖身运动作为第一个运动项目开始播放好我们现在来做暖身 ♪有活力的电子音乐♪ ♪ 好了结束了现在来做缓和运动 ♪平静的电子音乐♪ ♪
让我们来统整一下在这个影片中学到的重点我们学到了若要通过 HTTP实时串流协定达成无间隙衔接我们必须在各项目中提供有相符音频格式的变量接着我们知道了要指示AVQueuePlayer 执行无间隙衔接是多么容易只要将项目按次序地入列这里有个与此相关的影片影片中会介绍为探索变量而设计的新应用程序接口这个影片或许对你有帮助如果你的软件或服务无法保证项目会符合音频格式我希望你喜欢这部影片祝你在接下来的WWDC体验愉快谢谢 ♪

6:12 - create two items, enqueue in order and play gaplessly

// create two items, enqueue in order, 
// and play gaplessly

let item1 = AVPlayerItem(url: url1)
let item2 = AVPlayerItem(url: url2)

let player = AVQueuePlayer()
	
player.insert(item1, after: nil)
player.insert(item2, after: item1)

player.play()

正在查找特定内容？在上方输入一个主题，就能直接跳转到相应的精彩内容。

提交你查询的内容时出现错误。请检查互联网连接，然后再试一次。

资源

相关视频

WWDC21