蘋果該項(xiàng)新專利名為“使用基于內(nèi)容的幀搜索實(shí)現(xiàn)視頻傳輸”，可以解決用戶在FaceTime過程中視頻通過出現(xiàn)幀率過低或丟幀的現(xiàn)象。目前iPhone或iPad用戶在低帶寬網(wǎng)絡(luò)使用FaceTime通話時(shí)經(jīng)常遇到不流暢的丟幀問題。

　　目前，視頻通信技術(shù)在很多方面由于受到了現(xiàn)有無線移動蜂窩數(shù)據(jù)的帶寬限制，在某些情況下，像蘋果FaceTime由于丟幀、屏幕分辨率過低或音頻質(zhì)量太差而導(dǎo)致無法使用。

　　該項(xiàng)專利詳細(xì)介紹了一種可以通過之前傳輸?shù)囊曨l幀畫面和“視頻幀內(nèi)容信息”直接被應(yīng)用到視頻通話中來減少兩臺設(shè)備之間數(shù)據(jù)傳送量的方法。這種方法可以從一個(gè)給定的關(guān)聯(lián)視頻幀中產(chǎn)生一組參數(shù)或系數(shù)。例如可以通過物體的標(biāo)志點(diǎn)或面部特征點(diǎn)、定位和規(guī)模等系數(shù)來來跟蹤和儲存視頻傳輸內(nèi)容。同時(shí)這些數(shù)據(jù)可以被加工成可搜索的數(shù)據(jù)庫，在數(shù)據(jù)庫中可以檢索出每一幀畫面。

　　在低帶寬的場景中，對于給定的實(shí)時(shí)視頻內(nèi)容一臺設(shè)備可以計(jì)算并發(fā)送一組系，而不是某個(gè)視頻幀。而另一方面，當(dāng)帶寬足夠通暢時(shí)，完整的圖像相關(guān)的系數(shù)可以發(fā)送和儲存。

　　當(dāng)連接不良并且開始丟幀時(shí)，系統(tǒng)可以使用系數(shù)從之前存儲的一個(gè)視頻數(shù)據(jù)庫中搜索出相似的對象。在給出的例子中，一個(gè)直播視頻的系數(shù)在視頻幀數(shù)據(jù)庫中找到了一個(gè)最佳匹配。當(dāng)相似對象特性的幀被發(fā)現(xiàn)時(shí)，它將被檢索并顯示在接收裝置上。

? ? 　在另一個(gè)場景中，生成的系數(shù)可以被用于在先前記錄的視頻幀中，并且將圖像智能變形，所得的結(jié)果被插入到直播視頻以代替丟幀處理。最后，被視作為背景內(nèi)容的對象要比主要對象獲得更低分辨率的視頻傳輸。比如在呈現(xiàn)人物面部的分辨率要比墻壁背景的分辨率更高，這樣就會在節(jié)省流量的前提下清晰的展示出主要的內(nèi)容。

　　除了在通話質(zhì)量上能夠獲得明顯的好處之外，這項(xiàng)技術(shù)也可以用于減少在已發(fā)送視頻中用于動態(tài)再現(xiàn)場景參數(shù)的數(shù)據(jù)消耗。盡管在每隔三個(gè)直播幀中才會插入一個(gè)人工生成的視頻幀，但它的儲量仍然非常巨大。

　　就像之前大多數(shù)的蘋果公司專利一樣，我們無法確認(rèn)該項(xiàng)專利究竟何時(shí)會被真正應(yīng)用到產(chǎn)品中。不過隨著現(xiàn)在數(shù)據(jù)成本的上漲以及智能手機(jī)高分辨率相機(jī)模塊的應(yīng)用越來越多，這一功能對于經(jīng)常使用FaceTime視頻通過的用戶來說將非常有利。

　　蘋果公司該項(xiàng)“變形和匹配FaceTime視頻幀”專利首次在2012年進(jìn)行提交，專利發(fā)明人為Alex Tremain Nelson和Richard E.Crandall。

? ??