免费久久国产&夜夜毛片&亚洲最大无码中文字幕&国产成人无码免费视频之奶水&吴家丽查理三级做爰&国产日本亚欧在线观看

英國查爾斯王子迎娶卡米拉時，讀唇者成功破解了伊麗莎白二世與兒子的低語，讓女王糟糕的婆媳關系浮現在大眾眼前 —— 這可能是“唇語識別”第一次大面積走進大眾的視野。

什么是唇語識別

所謂的“唇語識別”，其實并不神秘。

早在古代，就有專門的唇語師存在。通過長期的訓練，他們具備了“觀察別人的嘴型，解讀其表達語句”的能力。在現代社會里，一些聽力障礙者們也會使用這種技巧與他人進行交談，補充聽力器官的不足。

但隨著科技的發展，人工智能在各領域漸次開放，在唇語識別上，機器已經做的比人類好了。

從技術路徑上，唇語識別是一項集機器視覺與自然語言處理于一體的復合型技術。

要理解這個“唇語識別”，需要注意這幾個關鍵詞：

運用機器視覺技術從圖像中識別出說話人的人臉，提取此人連續說話時口型變化的特征。

將連續變化的特征輸入到唇語識別模型中，識別說話人口型對應的發音，運用大數據計算出可能性最大的自然語言語句。

圖中字幕是由谷歌AI通過唇讀實時同步輸出，語速之快，難度之大。

在唇語識別過程中，口型與發音，發音與文字之間，并不是唯一對應的關系，常常有多個可能的備選結果，需要實時計算出可能性最大的結果。

唇語識別的研究現狀

早在 2003 年，Intel 就開發了唇語識別軟件 Audio Visual Speech Recognition（AVSR），開發者得以能夠研發可以進行唇語識別的計算機。

2016 年 Google DeepMind 的唇語識別技術就已經可以支持 17500 個詞，新聞測試集識別準確率首次達到了 50％ 以上。

海云數據，截至2018年他們訓練新聞類節目時長是1萬小時。為什么是新聞類節目？當然是因為播音員的唇語最標準。目前，海云數據在英文方面可以達到80％的準確度，中文方面是71％

                                 海云數據的AI唇語識別測試

搜狗的通用識別準確率在60％以上，而在車載、智慧家居等垂直場景下，準確率高達90％。

                                  搜狗的AI唇語識別測試

從視頻中可以看出將面部放入橢圓形區域內，不發聲的說出一段話，幾乎說完的瞬間，識別的文字就出現在屏幕上，無論是口語、詩詞、歌詞還是繞口令，都能很好的識別。

唇語識別的技術原理

AI唇語識別技術原理：

唇語識別技術從鏡頭輸入到理解輸出，中間最重要的關鍵是：視覺前段、視覺特征提取、唇動識別。

 視覺前段——包括人臉檢測與唇的檢測和定位，先用人臉檢測演算法得到人臉然后有針對性的定位唇動；

或者利用最佳閩值二值化演算法，以唇的邊緣是平滑的，和左右形狀對稱為條件，作為二值化閩值選定的約束條件，得到平滑而對稱的唇圖像。

視覺特征提取——是對獲取的唇圖像進行處理得到對應特征，特征提取方法主要分為基于圖元的方法和基于模型的方法兩大類；

搜狗所用的基于模型的方法就是，對唇的輪廓建立一個模型，將特征資訊包含在這個模型之中，并對模型中特征資訊的變化用一個小的參數來描述。

這類方法的優點是重要特征被表示成二維參數，不會因光照、縮放、旋轉、平移而改變，缺點是忽略了細微的三維資訊，可能會對后面的識別過程造成影響。

 唇動識別——目前采用的技術大多是隱瑪爾可夫模型（ Hidden Markov Model，簡稱 HMM ），該模型認為唇動信號在極短時間內是線性的，可以用線性參數模型來表示，然后將許多線性模型在時間上串接起來，組成一條瑪爾可夫鏈。

瑪爾可夫鏈可以用來描述統計特征資訊的變化，并且這種變化過程與人的唇動過程是相吻合的，所以 HMM 能夠識別唇動并與相應語句匹配轉化成文字。

隨著機器學習方法在語音識別領域里取得的巨大成功，尤其是 HMM 的應用，根據唇語識別研究和語音識別的相似性，出現了大量的 HMM 應用在唇語識別領域的研究成果。

在非特定開放口語測試中，目前的通用識別準確率已經在 70％ 以上，而在金融風控、車載、智能家居等垂直場景下，已達到超過 90％ 的準確率。

唇語識別的研究意義

人類費盡心力開發研究人工智能、提高唇語識別的準確率，除了偷窺伊麗莎白二世和兒子的秘密外，還有很多更為廣泛的用途：

比如應用于金融在線業務的生物識別、噪聲環境下輔助語音識別、輔助聽障人士交流、體育賽事暴力語言識別等多個領域，這些都是有著實際意義且頗為重要的應用場景。

自出現唇語識別技術出現起，就有聲音說唇語識別是語言交互的高階戰，甚至可能帶來一場革命。

但在人工智能大范圍落地的今天，國內從業者扎堆涌入的，大多為語音識別，圖像識別，人臉識別，機器翻譯，無人駕駛，虛擬助手和個性化內容推薦等領域，相較這些聚光燈之下的落地場景，唇語識別相對冷僻。

但業界的常識是：人工智能未來將會出現一個數萬億美元的巨大市場，在面對具體乃至細碎的應用場景時，人工智能的細分程度，勢必如百年前的電力那般觸角龐雜。

而廣袤的嫁接空間也意味著，從真實應用場景出發，人工智能領域會出現不少藍海市場，被國內巨頭忽視的唇語識別就是其中之一。