利用虚拟和物理游戏手柄

利用虚拟和物理游戏手柄

是时候提高您的输入游戏了：敬请了解适用于 iPhone、iPad、Mac 和 Apple TV 的虚拟和物理游戏手柄的最新改进。认识将触摸输入转换为游戏手柄输入的屏幕虚拟手柄，并了解如何向您的 app 添加手柄共享功能。此外，我们还将展示如何支持 DualSense 手柄中的自适应触发技术，介绍手柄支持的最佳实践并指导您在提交到 App Store 之前针对可访问和可自定义输入完成一些常见的实施前检查。关于从游戏手柄保存精彩片段的更多信息，请查看 WWDC21 的“探索 ReplayKit 中的滚动剪辑”。

资源
相关视频

WWDC23
- 将游戏移植到 Mac，第 1 部分：制定游戏移植计划
WWDC22
- 即插即用：向你的 Unity 游戏项目添加 Apple 框架
WWDC21
- 使用 ReplayKit 探索滚动剪辑
WWDC20
- 为 iPad 引入键盘和鼠标游戏
- 游戏控制器的进展
下载

♪ ♪ 嗨我叫纳特我在Apple的游戏科技部门工作谢谢你们今年回来一起了解有关游戏输入在iOS、tvOS和macOS上的进展首先我要为刚接触 Apple平台游戏输入的人针对“如何”和“为什么” 做个快速回顾然后我会展示一种全新的虚拟GameController 然后再来一起写点小代码最后我想要谈更多有关实体手柄并探讨更多新功能所以让我们开始复习吧 GameController架构的目标就是能轻松在Apple全平台加入不同种类高效低延迟输入的支持通过一般API 将输入硬件抽象化 GameController的架构让你可以一口气写出你的输入代码而不用担心输入会被重新映射无论是在不同的手柄上键盘或点击装置上在iOS、iPadOS、和tvOS上玩家可以创建全系统的以及适用各个应用的 GameController输入映射能让你的游戏更加自定义化且更加无障碍而在全平台上你可以让UI对应玩家手柄的特定功能或符号上所以无论玩家偏好圈圈、方块、三角、叉叉或是A、B、X、Y 你的游戏UI在他们眼中都是正确的 GameController的基本框架就是对不同的游戏控制装置(GCDevice) 对象连线及断线的通知做反应并轮询装置作用中的输入状态或设置值变化处理程序来接收输入状态变化的通知在手柄与系统连接或断线时 GCController对象也会被创建或移除而你会发送 GCControllerDidConnect 以及GCControllerDidDisconnect 的通知在GCKeyboard对象上也是一样的模式在键盘连线或断线以及GCMouse对象在指向装置连线或断线的时候都是你要做的就是加入观察者找出 GCController对象何时连线或断线你可以决定要不要设置这些变更处理程序来通知你输入状态的变化或是轮询手柄位置的状况你应该要运用这个模式不管是在手柄、键盘或是指向装置上我们看过了不少很棒的新游戏支持GameController 而大量顾客也对支持手柄的游戏感兴趣这就是为什么我们十分希望帮助大家找到支持手柄的游戏当我们知道一款游戏支持手柄时我们会在App Store里加上手柄支持的标章看起来没什么对吧？但这是喜爱手柄的玩家所需要的我也知道我需要这个标章我们总是热衷于展示及推广支持GameController的应用在游戏专区里我们会精选一些充分利用手柄的应用我不保证你的应用会被选上推广但若你对手柄做了很好的适配玩家们一定会察觉所以在标记应用支持时这就是你得做的在Xcode里只要加上 GameController的能力这会为应用的Info.plist 添加GameController能力的标记在上架App Store之前你只要做这些就行了当你的游戏有了这个能力后别忘了将其放入 GameController偏好设定的个别应用自定义区块中玩家都喜欢按照喜好调整控制设定而这也是增加游戏可玩性的好方法你不需要做什么来涉及输入重新映射但只要你标记了你的游戏玩家们就能自己定义当你采用GameController架构后另一个很棒的免费特色就是截屏及视频玩家们可以截屏或开始视频录制只要按一下手柄上的分享键这里我用Fox2示范
我按了两下分享键就截屏了
该截屏会出现在我的相机胶卷里在我的macOS台式机上或是从AppleTV通过AirDrops 到我的手机上现在如果我要开始或暂停录制视频只要长按分享键没两下子我的通知就显示了通过今年刚加入的功能所录制的游戏视频
我最后对游戏在手柄支持上的建议就是善用UI的字样思考一下按键提示显示在你的清单上在MFi认证或Xbox手柄上我们会显示Y按钮在PlayStation手柄上我们会显示三角形看起来似乎是小事但我们真的收到反映有关UI上的按钮显示错误你也可以考虑另一种方法就是选择性显示按键的位置如果这样更适合你的游戏的话有些玩家特别是年轻玩家能更快地辨识出显示出来的位置而且不用往下瞄按键名称
我们让显示正确字样变得更简单了哪怕玩家在系统UI中重新映射了按键举例来说如果你映射了按X键会做出A键的动作就像在映射选项显示的这样而我们要让用户知道按下A动作来继续事实上我们想要显示的是X字样如果开发者将A键动作与该字样连结的话为了做到这点只要询问 A按键的sfSymbolsName 再用UIImage system-该图像名称来显示该图像现在就得到了重新映射后的正确字样了以上为我的快速回顾如果你想知道更多细节可以查阅其他有关GameController的WWDC研讨会在过去几年间我们谈过了有很多的开发者将游戏带到iOS及iPadOS上其中不少游戏是原本就为 GameController而开发的所以预期中会有两根摇杆或十字键、或是触控板还有数字按键输入我们听说了你们有些人费尽了心思打造稳定的、舒适的以及好看的游戏触控输入体验我们也知道你们的触控输入处理代码和键盘、鼠标 GameController输入代码路径不同为了说明这一点我想谈谈新的虚拟屏幕触控手柄可以适配你们目前的 GameController输入代码这些iPhone和iPad上的屏幕触控操作好看极了而且也为了手掌尺寸抓握范围仔细调整过反馈与感受都非常好你可以很容易地把这些加入到应用中而且用起来就像GameController一样而不用再特地写一个屏幕覆盖的UI 然后把触控输入转译到游戏输入系统里这些屏幕触控在代码里看起来就像GameController架构的 GCController对象所以你可以保有更一致的输入逻辑它们都是能用你的图标自定义的也能与你的颜色及式样整合同时仍然享有iOS与iPadOS上同样的设计语言元素它们可以适应你想要的按键布局例如一个或三个按键或是十字键和多个按键屏幕上手柄的核心原则就是左右范围是分别配置的而布局是根据配置来决定的手动分配元素是不支持的每一边的配置可以是零到四个按键或是其中一个摇杆一个十字键或触控板按键和摇杆也有震动而最后配置在创建之后便固定了你可以显示或隐藏元素但你不能加入或移除它们除非创建另一个新虚拟手柄所以来看看要怎么选择布局以及显示屏幕虚拟GameController 首先创建一个GCController配置辨认所有可能的你想使用的按键或摇杆再来根据那个配置创建虚拟手柄然后你可以选择性地对那些元素做配置例如设置自定义的形状或是将一些元素隐藏接下来告知系统连接手柄然后这会触发 GCGameControllerDidConnect 通知这你们都熟悉了然后它会给你GCController对象所以来看看我们要写什么代码才能产出以下的布局吧左右边各有个拇指摇杆右边也有个A和B键超级简单首先创建一个新的 GCVirtualControllerConfiguration 对象再来建立我们想要的元素我们想要两根拇指摇杆和两颗按键出现在右边就像上述的图片一样接下来创建 GCVirtualController对象作为配置之用最后再来呼叫连结我们的标准 GCControllerDidConnectNotification 就会出现了
所以真的很简单但我们是怎么像上述图片那样建立这些按键的视觉的？可以简单做到这点通过调整GCVirtualController 元素的配置在这个布局里我改变了 A按键来表示回旋攻击而B按键表示跳跃我调整了A键的配置来增加BezierPath 接着我设置了B键来建立它的BezierPath 可以通过config.hidden属性轻易地显示或隐藏按键元素如你所见不需要花太多时间能随意自定义按键好的让我们回来讨论真实世界的实体手柄市面上有很多优秀的手柄可供玩家选择有些是为iPhone打造的 MFi认证手柄并且我们经常看到它们推陈出新独立的SteelSeries Nimbus+ 现在有了L3/R3拇指板机以及更多系统按键太棒了我也很喜爱大小适中的 Razer Kishi和Backbone One 这些大小适中的手柄是我会放进背包里的最爱当然除了MFi手柄我们也支持Sony DualShock 4 和Xbox One手柄在全Apple平台上使用玩家对去年加入Xbox Elite V2 与Xbox自适应手柄的支持也非常喜爱我们在iOS 14.5 和macOS 11.3上加入了最新一代主机手柄的支持 Sony DualSense手柄和Xbox Series X手柄都是手感非常棒的手柄在你运用游戏手柄架构作业时非常顺手 Xbox Series X手柄有专门的分享键而DualSense有很酷的自适应板机技术让我们深入探讨一下自适应板机还有如何实际运用它们 DualSense自适应板机能通过力道的回馈真正提升游戏的沉浸感根据玩家的操作加入各种板机的阻力就能模拟拉弓的感觉或是弹弓的张力以及其他更多感觉我希望你们都能亲身体会这些板机有多棒在游戏手柄架构中支持自适应板机的方法非常直白明了首先得验证玩家手柄上的实体输入描述文件是DualSense 接下来通过方法呼叫（method call）设置想要的板机效果如果你要创造更生动的效果你可以不断读取游戏和板机的状态并分别调整你的效果例如你能加入更多的阻力无论是用力按下板机或是玩家将绳子拉得更紧最后就像我孩子离开房间会记得关灯一样你得确保在结束之后关掉自适应板机效果来看看这个代码范例在实例中是如何达成的例如说这款游戏中玩家可以发射弹弓击倒一些目标玩家可以用左板机瞄准和使用右板机来拉弹弓我们希望在玩家拉弹弓时加入自适应板机的效果首先我们要确认玩家的手柄是DualSense 既然我们的游戏都是单人游戏我们需要检查 GCController.current 来找到运作中的手柄在这之后我们可以抓取 DualSense的右自适应板机在这个例子中我们希望只有在玩家拉弓瞄准时加入阻力我们会根据板机扣下的力道来动态计算阻力的大小如果板机没有被扣到底我们就会为板机加入反馈效果回馈效果会在你扣下板机时为手指带来持续性的阻力但现在如果板机被扣到底时我们会加入低频的震动效果这个效果会让板机震动模拟保持瞄弓的挣扎感往后拉弓的张力最后一旦玩家发射了弹弓我们想将自适应板机关闭今天我们最后的一个话题是关于通过手柄分享键的媒体撷取去年我们介绍过一些手柄分享键上专用的媒体截取手势分享键通常是映射在手柄最左上角的系统按钮但一些手柄如Xbox Series X 则另外标明了分享键的位置如同我先前展示的系统的媒体撷取手势是通过双击按钮截屏并存入相机胶卷中以及长按来启动或暂停 ReplayKit录制视频在今年我们加入了超级酷的媒体撷取方式 15秒高光时刻所以比起得记住什么时候开始和停止录像玩家可以开启自动背景缓冲让他们可以储存最近15秒的游玩画面只要长按就行 ReplayKit视频是个很好的方法让玩家们捕捉伟大的头目战美妙的连续技或是壮烈的失误如果要在自动录制一段长视频或是在背景录制长达15秒的高光这两者之间做选择只要在游戏手柄的偏好设定面板切换到全球或个别应用设定如果想在游戏中某个重要时刻触发自己的高光这有个专门的API 这也会触发15秒的快照咻好的以上就是今年游戏输入的新消息在结束之前请记得将你的应用标记为支持游戏手柄来取得个别应用自定义如此App Store才会帮你的应用找到合适的分类我们很期待看到你们在游戏中运用游戏手柄、键盘和鼠标如果你们想要看更多有关游戏开发者和玩家的特别节目请看《探索ReplayKit中的卷动片段》以及《Game Center新鲜事》感谢你们的收看希望很快能亲自与你们见面至于现在我们很期待与你们在线上见面及解答你们的问题 [轻快音乐]

func setupGameController() {
    // Add handler for when controller connects.
    NotificationCenter.default.addObserver(
        forName: NSNotification.Name.GCControllerDidConnect,
        object: nil,
        queue: nil)
        { (note) in
            guard let _controller = note.object? as GCController else {
              return
            }
            // Add controller input change handlers.
            _controller.physicalInputProfile[GCInputButtonA]?.valueChangedHandler = { ... }
            _controller.physicalInputProfile[GCInputButtonB]?.valueChangedHandler = { ... }
        }

    // Add handler for when controller disconnects.
    NotificationCenter.default.addObserver(
        forName: NSNotification.Name.GCControllerDidDisconnect,
        object: nil,
        queue: nil)
        { (note) in ... }
}

// Polling for controller input.
func checkInput() {
    if controller.physicalInputProfile[GCInputButtonA]?.pressed { ... }
    if controller.physicalInputProfile[GCInputButtonB]?.pressed { ... }
}

8:42 - Virtual Controller Initial

// Creating an on-screen controller

let virtualConfiguration = GCVirtualControllerConfiguration()

virtualConfiguration.elements = [GCInputLeftThumbstick,
                                 GCInputRightThumbstick,
                                 GCInputButtonA,
                                 GCInputButtonB]

let virtualController = GCVirtualController(configuration: virtualConfiguration)

virtualController.connect()

9:17 - Customizing Buttons

// Creating customized buttons

vc.changeElement(GCInputButtonA) { 
  config in
    let spinningPath = UIBezierPath()
    // load or draw the spinning attack path
    config.path = spinningPath
    return config
}

vc.changeElement(GCInputButtonB) {
  config in
    let jumpPath = UIBezierPath()
    // load or draw the jump path
    config.path = jumpPath
    return config
}

12:06 - DualSense Adaptive Triggers

func updateControllerAdaptiveTriggers() {
  guard let dualSense = GCController.current?.physicalInputProfile as? GCDualSenseGamepad
    else {
        return
    }
  let adaptiveTrigger = dualSense.rightTrigger
  if playerIsPullingSlingshot {
    let resistiveStrength = min(1, 0.4 + adaptiveTrigger.value)
    if adaptiveTrigger.value < 0.9 {
      adaptiveTrigger.setModeFeedbackWithStartPosition(
        0,
        resistiveStrength: resistiveStrength)
    } else {
      adaptiveTrigger.setModeVibrationWithStartPosition(
        0,
        amplitude: resistiveStrength,
        frequency: 0.03)
    }
  } else if adaptiveTrigger.mode != .off {
    adaptiveTrigger.setModeOff()
  }
}

正在查找特定内容？在上方输入一个主题，就能直接跳转到相应的精彩内容。

提交你查询的内容时出现错误。请检查互联网连接，然后再试一次。

资源

相关视频

WWDC23

WWDC22

WWDC21

WWDC20