iOS14 畫中畫調研

iOS14 畫中畫 調研

畫中畫(PictureInPicture)在iOS9就已經(jīng)推出了,不過之前都只能在iPad使用,iPhone要使用畫中畫就得更新到iOS14才能使用。

蘋果在iOS14中開放了手機端對畫中畫的支持,方便在app退出前臺時仍然可以播放視頻。 畫中畫的開啟,本質上還是需要依賴系統(tǒng)播放器,同時UI、動畫等都是系統(tǒng)原生提供的,因此自定義空間很小。

目前有三種方式實現(xiàn)畫中畫:

  • WKWebView自帶
  • 如果對播放器要求不大的可以直接使用AVPlayerViewController,自身就提供畫中畫功能可直接使用,設置allowsPictureInPicturePlayback = YES即可展示出畫中畫按鈕。
  • 自定義的播放器要開啟畫中畫那就使用AVPictureInPictureController來包裝,也是很簡單易用,并且動畫效果內部已經(jīng)實現(xiàn),只需要注意畫中畫按鈕需要用戶自己去實現(xiàn),畫中畫圖標系統(tǒng)已有相關APIpictureInPictureButtonStartImage

總共需要以下幾步:

  • 開啟后臺模式,即Xcode中后臺能力中的第一個勾選框

  • 創(chuàng)建AVPictureInPictureController(你一定要讓用戶通過操作(點擊按鈕等)來開始畫中畫顯示。 不能直接在代碼中直接startPictureInPicture ,這樣的話你的APP上架審核會被拒絕,因為蘋果本身是不希望用戶自定義畫中畫的。)

  • [AVPictureInPictureController isPictureInPictureSupported]允許的情況下,設置AVAudioSession的category為AVAudioSessionCategoryPlayback

  • 可以播放遵守HLS協(xié)議的.m3u8的直播,因為AVPlayer 不支持 flv,只能播放 hls 的流。HLS是蘋果主導的音視頻傳輸協(xié)議,其主要的格式是一個索引文件(M3U8)+ ts分片的視頻文件。

  • 如果業(yè)務使用系統(tǒng)播放器,那么這里一般不會有問題,因為播放器已經(jīng)正確顯示了。但是如果業(yè)務使用了自定義播放器,同時也希望具有畫中畫能力,那么通常會創(chuàng)建一個隱藏的系統(tǒng)播放器,作為畫中畫功能的承載。這時候就要注意保證用于渲染的view、layer正確地加入到了層級中

具體代碼如下:

// init player
    NSURL *url = [NSURL URLWithString:@"https://devstreaming-cdn.apple.com/videos/streaming/examples/bipbop_16x9/bipbop_16x9_variant.m3u8"];
    //使用playerItem初始化AVPlayer的目的是為了監(jiān)聽播放器的`status`狀態(tài)
    self.playerItem = [AVPlayerItem playerItemWithURL:url];
    [self.playerItem addObserver:self
                 forKeyPath:@"status"
                    options:NSKeyValueObservingOptionOld | NSKeyValueObservingOptionNew
                    context:nil];
    self.player = [[AVPlayer alloc] initWithPlayerItem:self.playerItem ];
    
    // init player layer
    AVPlayerLayer * playerLayer = (AVPlayerLayer *)self.playerView.layer;
    playerLayer.player = self.player;
    
    // init pip controller
    self.pipController = [[AVPictureInPictureController alloc] initWithPlayerLayer:playerLayer];
    self.pipController.delegate = self;
    //監(jiān)聽'pictureInPicturePossible'是為了讓自定義的畫中畫按鈕是否顯示/隱藏 或者 能否點擊,因為有些時候即使設備支持,但是需要AVPlayer等到直播流可以播放的一個狀態(tài)才可以為possible
    [self.pipController addObserver:self
                         forKeyPath:@"pictureInPicturePossible"
                            options:NSKeyValueObservingOptionOld | NSKeyValueObservingOptionNew
                            context:nil];

   if ([AVPictureInPictureController isPictureInPictureSupported]) {
        NSLog(@"該設備支持畫中畫功能");
        //開啟畫中畫后臺聲音權限
        NSError *error = nil;
        [[AVAudioSession sharedInstance] setCategory:AVAudioSessionCategoryPlayback error:&error];
        [[AVAudioSession sharedInstance] setActive:YES error:nil];
        if (error) {
            NSLog(@"請求權限失敗的原因為%@",error);
        }
    } else {
        NSLog(@"該設備不支持畫中畫功能");
    }
    
    //在點擊畫中畫按鈕的時候 開啟畫中畫
     if (self.pipController.isPictureInPictureActive) {
        [self.pipController stopPictureInPicture];
    } else {
        [self.pipController startPictureInPicture];
    }
    
    //status狀態(tài)一共三種 可以在不同的狀態(tài)下設置不同的交互
    AVPlayerItemStatusReadyToPlay:
    AVPlayerItemStatusFailed:
    AVPlayerItemStatusUnknown:
    

注意點:
一、 AVPictureInPictureController的初始化通過將要展示視頻的視圖的view的 AVPlayerLayer來初始化。為了達到這種目的視頻播放的視圖的layer返回應該是AVPlayerLayer,重寫+layerClass方法使得在創(chuàng)建的時候能返回一個不同的圖層子類。UIView會在初始化的時候調用+layerClass方法,然后用它的返回類型來創(chuàng)建宿主圖層。即需要在展示視頻的view視圖里有如下類方法

+ (Class)layerClass {
    return [AVPlayerLayer class];
}

二、 startPictureInPicture并不是立馬觸發(fā),而是需要在視頻可以開始播放時才允許打開。所以如果不加載一個本地加載的動畫視頻的話,界面上不會立馬顯示出畫中畫,給用戶造成一種不靈敏的感覺。所以 先循環(huán)播放一個本地的 loading 視頻來開啟畫中畫,同時等待直播可以開始播放時,再將畫中畫的畫面切換成真正的直播內容。

三、 因為AVPlayer只能播放本地視頻或者HLS直播流,而AVPictureInPictureController的初始化需要用到AVPlayer。但公司目前的設備推流機制是直接客戶端接受YUV數(shù)據(jù)并用OpenGL渲染,沒有經(jīng)過服務器取流,所以畫中畫暫時無法實現(xiàn)。

實現(xiàn)步驟:如果現(xiàn)在不支持,后續(xù)如果想實現(xiàn)的話,可以在點擊畫中畫后去服務請求視頻的HLS直播地址,和一些token的驗證拼接,之后將其賦值給self.playLayer.player = [AVPlayer playerWithURL:[NSURL URLWithString:urlStr]];,之后就可以開啟畫中畫了。否則就按失敗處理。

//歡迎大家交流并指出錯誤,謝謝

官方文檔

最后編輯于
?著作權歸作者所有,轉載或內容合作請聯(lián)系作者
平臺聲明:文章內容(如有圖片或視頻亦包括在內)由作者上傳并發(fā)布,文章內容僅代表作者本人觀點,簡書系信息發(fā)布平臺,僅提供信息存儲服務。
  • 序言:七十年代末,一起剝皮案震驚了整個濱河市,隨后出現(xiàn)的幾起案子,更是在濱河造成了極大的恐慌,老刑警劉巖,帶你破解...
    沈念sama閱讀 228,156評論 6 531
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件,死亡現(xiàn)場離奇詭異,居然都是意外死亡,警方通過查閱死者的電腦和手機,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 98,401評論 3 415
  • 文/潘曉璐 我一進店門,熙熙樓的掌柜王于貴愁眉苦臉地迎上來,“玉大人,你說我怎么就攤上這事。” “怎么了?”我有些...
    開封第一講書人閱讀 176,069評論 0 373
  • 文/不壞的土叔 我叫張陵,是天一觀的道長。 經(jīng)常有香客問我,道長,這世上最難降的妖魔是什么? 我笑而不...
    開封第一講書人閱讀 62,873評論 1 309
  • 正文 為了忘掉前任,我火速辦了婚禮,結果婚禮上,老公的妹妹穿的比我還像新娘。我一直安慰自己,他們只是感情好,可當我...
    茶點故事閱讀 71,635評論 6 408
  • 文/花漫 我一把揭開白布。 她就那樣靜靜地躺著,像睡著了一般。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發(fā)上,一...
    開封第一講書人閱讀 55,128評論 1 323
  • 那天,我揣著相機與錄音,去河邊找鬼。 笑死,一個胖子當著我的面吹牛,可吹牛的內容都是我干的。 我是一名探鬼主播,決...
    沈念sama閱讀 43,203評論 3 441
  • 文/蒼蘭香墨 我猛地睜開眼,長吁一口氣:“原來是場噩夢啊……” “哼!你這毒婦竟也來了?” 一聲冷哼從身側響起,我...
    開封第一講書人閱讀 42,365評論 0 288
  • 序言:老撾萬榮一對情侶失蹤,失蹤者是張志新(化名)和其女友劉穎,沒想到半個月后,有當?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體,經(jīng)...
    沈念sama閱讀 48,881評論 1 334
  • 正文 獨居荒郊野嶺守林人離奇死亡,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內容為張勛視角 年9月15日...
    茶點故事閱讀 40,733評論 3 354
  • 正文 我和宋清朗相戀三年,在試婚紗的時候發(fā)現(xiàn)自己被綠了。 大學時的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片。...
    茶點故事閱讀 42,935評論 1 369
  • 序言:一個原本活蹦亂跳的男人離奇死亡,死狀恐怖,靈堂內的尸體忽然破棺而出,到底是詐尸還是另有隱情,我是刑警寧澤,帶...
    沈念sama閱讀 38,475評論 5 358
  • 正文 年R本政府宣布,位于F島的核電站,受9級特大地震影響,放射性物質發(fā)生泄漏。R本人自食惡果不足惜,卻給世界環(huán)境...
    茶點故事閱讀 44,172評論 3 347
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望。 院中可真熱鬧,春花似錦、人聲如沸。這莊子的主人今日做“春日...
    開封第一講書人閱讀 34,582評論 0 26
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽。三九已至,卻和暖如春,著一層夾襖步出監(jiān)牢的瞬間,已是汗流浹背。 一陣腳步聲響...
    開封第一講書人閱讀 35,821評論 1 282
  • 我被黑心中介騙來泰國打工, 沒想到剛下飛機就差點兒被人妖公主榨干…… 1. 我叫王不留,地道東北人。 一個月前我還...
    沈念sama閱讀 51,595評論 3 390
  • 正文 我出身青樓,卻偏偏與公主長得像,于是被迫代替她去往敵國和親。 傳聞我的和親對象是個殘疾皇子,可洞房花燭夜當晚...
    茶點故事閱讀 47,908評論 2 372

推薦閱讀更多精彩內容