這次WWDC蘋果發(fā)布了四大OS，很多功能都很有趣。macOS和iPadOS的平臺(tái)前向調(diào)度、連續(xù)互換攝像頭、iOS鎖屏小部件、智能墊子等體驗(yàn)不斷提高。

時(shí)間緊迫，ARKit的內(nèi)容完全沒有在Keynote中提及。盡管如此，未在Keynote亮相的ARKit 6卻有著重磅功能：4K分辨率、實(shí)時(shí)調(diào)節(jié)相機(jī)曝光、白平衡等參數(shù)，這對(duì)視頻透視的AR體驗(yàn)至關(guān)重要，基本被看作是瞄準(zhǔn)VST MR頭顯而來。

以下是值得關(guān)注的幾點(diǎn)：

1，蘋果地圖

雖然蘋果地圖支持200多個(gè)地區(qū)，但全新設(shè)計(jì)的蘋果地圖目前僅支持21個(gè)國家或地區(qū)，它們的特點(diǎn)是提供城市三維體驗(yàn)和類街景內(nèi)容。增加了諸多的細(xì)節(jié)，包括3D地標(biāo)，立交橋等，看上去更立體，信息密度很高。

之前谷歌、Niantic推出VPS視覺定位系統(tǒng)，實(shí)際上蘋果地圖也在推動(dòng)相關(guān)工作，只是支持地區(qū)太少。Look Around功能就是如此，它和谷歌街景類似，可以實(shí)現(xiàn)步行AR導(dǎo)航（利用VPS）等功能。目前僅限部分城市，其中，城市三維體驗(yàn)與步行導(dǎo)航功能一致，目前支持7個(gè)城市，Look Around支持40個(gè)國家或城市。

同步還推出MapKit，這對(duì)第三方App來說是一個(gè)重要契機(jī)，可以更好地調(diào)用原生地圖能力，也有望推動(dòng)AR應(yīng)用與地圖能力的結(jié)合。比如，Bird可以通過新地圖查找車輛，在立體感強(qiáng)烈的場景中清晰地標(biāo)注車輛位置，有助于識(shí)別標(biāo)志建筑和辨別方向。

第三方App借助MapKit可以直接調(diào)用Look Around，用戶可直接查看高清圖像（類似谷歌街景），實(shí)現(xiàn)例如查看房屋外景等用途。

2，智能摳圖

iOS 15在OCR上提取文字變得非常輕松，現(xiàn)在iOS 16上支持在圖片中提取主體，例如上圖中的狗狗。

同時(shí)，相機(jī)文本識(shí)別功能現(xiàn)在更強(qiáng)大，支持識(shí)別電話快速撥打，識(shí)別價(jià)格并進(jìn)行單位轉(zhuǎn)換，語言翻譯等?？梢灶A(yù)見的是，這些玩法很可能會(huì)作為MR/AR頭戴設(shè)備的基礎(chǔ)功能。

3，M芯片的游戲支持

M系列芯片帶來了更強(qiáng)勁的性能，除了更好的用于影視媒體工作外，理應(yīng)用于游戲場景。這次WWDC蘋果也演示了Hello Games旗下的《無人深空》，以及找到Capcom，并在Mac上演示了《生化危機(jī)8：村莊》。

怎么說呢，一個(gè)是擴(kuò)大Mac自身游戲的擴(kuò)展，另一個(gè)則是為AR/MR內(nèi)容做預(yù)備。雖然《生化危機(jī)8：村莊》的VR版為PS VR2獨(dú)占，但不排除在開發(fā)其它內(nèi)容，甚至也是蘋果向頭部游戲品牌招攬MR內(nèi)容開發(fā)的例證。

4，ARKit 6

之前我們提到過，最近一兩年蘋果在ARKit方面進(jìn)展略微緩慢，除了增加LiDAR等硬件支持外其它新功能很少，一個(gè)是移動(dòng)AR功能整體比較完善，對(duì)手競爭平臺(tái)的體驗(yàn)和功能都處于追趕階段，另一個(gè)就是，按照蘋果的設(shè)計(jì)思路，軟件方面新功能大概率需更強(qiáng)大的硬件做支撐。

這一次的ARKit 6的重磅功能就是：支持4K分辨率、HDR錄制。

這些功能對(duì)于影視編輯、電影制作等行業(yè)應(yīng)用更有價(jià)值，對(duì)廣大用戶來說，將AR錄制的短片進(jìn)行日常社交分享也有著不錯(cuò)的效果提升，尤其是HDR視頻錄制。

這里說的4K分辨率指不是虛擬物體，而是視頻背景，也就是AR體驗(yàn)的背景。ARKit 6在AR體驗(yàn)中還可以實(shí)時(shí)調(diào)節(jié)相機(jī)曝光、白平衡、對(duì)焦，這對(duì)于沉浸式的AR體驗(yàn)至關(guān)重要，比如可以把現(xiàn)實(shí)場景調(diào)暗等等操作。

可能你已經(jīng)聯(lián)想到，傳聞中采用VST透視方案的蘋果MR頭顯即將問世，那么4K分辨率支持是一項(xiàng)十分必要的功能，它幾乎對(duì)應(yīng)著頭顯屏幕的物理分辨率規(guī)格，也直接影響VST透視的視覺效果。而且AR體驗(yàn)中控制相機(jī)的曝光、對(duì)焦的玩法，基本上就是瞄準(zhǔn)了MR頭顯而來，比如控制光圈實(shí)現(xiàn)抑制或拉高曝光，提高透視畫面視覺效果，可避免過暗過亮場景的干擾；通過對(duì)焦實(shí)現(xiàn)背景模糊模擬，模擬數(shù)字的深度信息，在VST AR體驗(yàn)中作用非常明顯。

甚至，如果還可以可以設(shè)置不同的焦點(diǎn)切換（這一點(diǎn)暫時(shí)沒有明確），還能基于此實(shí)現(xiàn)引導(dǎo)注意力轉(zhuǎn)移等玩法，對(duì)MR游戲的虛實(shí)融合類交互幫助很大，想象空間很大。

目前4K分辨率、HDR錄制功能僅限于iPhone 11、iPad Pro（第五代）或更新機(jī)型。

ARKit 6還改進(jìn)了運(yùn)動(dòng)追蹤，現(xiàn)支持識(shí)別左右耳朵，優(yōu)化了姿態(tài)檢測功能，可以自動(dòng)估算好拍攝場景中物體的大小，并實(shí)現(xiàn)穩(wěn)定的追蹤效果，提高3D物體檢測的魯棒性。

此外，ARKit 6還加入了前攝+后攝融合玩法，可通過前攝捕捉人臉，然后基于后攝拍攝背景，實(shí)現(xiàn)一些另類的玩法和交互。

5，RoomPlan

?RoomPlan是蘋果Swift的一個(gè)全新API，該功能依托于ARKit。就如同名字一樣，可以進(jìn)行房間掃描和規(guī)劃，例如房地產(chǎn)、建筑、室內(nèi)設(shè)計(jì)、電子商務(wù)、酒店管理等行業(yè)，可以通過掃描房屋場景進(jìn)行3D規(guī)劃。

RoomPlan功能基于LiDAR硬件，可以導(dǎo)出USD或USDZ格式文件，文件中信息包括：房間中識(shí)別到的組件尺寸，家具類型等，并可在C4D、AutoCAD、Shapr3D等進(jìn)一步編輯。

本質(zhì)上RoomPlan已經(jīng)在LiDAR發(fā)布時(shí)添加支持，當(dāng)時(shí)就展示了Shapr3D的掃描建模能力，現(xiàn)在這項(xiàng)功能正式開放給開發(fā)者。