程序員們,快把這款AI“魔法”做到手機相機里,求求了

熱點(diǎn)
TIME
2022-06-03 21:22
量子位
分享

  這位胖友,你聽(tīng)說(shuō)過(guò)“鏡頭恐懼”嗎?

  包括但不限于,總是盡力躲避鏡頭,即使拍照也往往表情尷尬,笑不出來(lái)。

1.png

那感覺(jué),就是人家拍照是回眸一笑百媚生:

2.png

(圖片來(lái)自:山東畫(huà)報《老照片》第94輯)

  我一上相就是“我是誰(shuí)”、“我在哪”、“我在干什么”靈魂三連。

  現在各種算法技術(shù)這么發(fā)達,就不能我往鏡頭前一站,相機自動(dòng)幫我微笑到位嗎???

  真別說(shuō),本老鏡頭恐懼癥患者仔細查了查,發(fā)現這事兒還挺靠譜。

  比如前面這張阮玲玉露齒而笑的照片,原片其實(shí)長(cháng)這樣:

3.png

  嘴角這么一揚,老照片里的清冷美女,是不是就多了一些鮮活的嫵媚溫柔?

  再看林徽因和她的表姐妹們,微笑加持,少女的天真本性就仿佛透過(guò)照片穿越了時(shí)代。

4.png

(左圖來(lái)自:山東畫(huà)報《老照片》第8輯)

  關(guān)鍵是,AI這一手微笑P圖,著(zhù)實(shí)是P得行云流水不著(zhù)痕跡。

  不僅嘴角上揚,連帶蘋(píng)果肌的變化也刻畫(huà)到位,細節拉滿(mǎn)。

5.png

(左圖來(lái)自:山東畫(huà)報《亞細亞大觀(guān)》)

  此刻的我只想說(shuō):

6.png

  媽媽再也不用擔心我拍照不會(huì )笑

  不過(guò)說(shuō)實(shí)話(huà),從技術(shù)的角度來(lái)看,雖然現在的各種AI“P圖”大法百花齊放,真要自己手動(dòng)實(shí)現一個(gè),麻煩事兒屬實(shí)不少。

  以這個(gè)“一鍵微笑”為例,別看只是一個(gè)微笑的動(dòng)作,背后涉及的算法環(huán)節就包括:

  1.人臉檢測

  2.面部關(guān)鍵點(diǎn)識別

  3.面部屬性識別

  4.目標表情驅動(dòng)

  ……

  而具體到細節,關(guān)鍵的一步,就是要把人臉圖像分割成高度精細的語(yǔ)義塊,使得圖像與像素級語(yǔ)義分割相匹配。

7.png

  只有經(jīng)過(guò)類(lèi)似這樣的操作,才能讓表情編輯與人臉本身的狀態(tài)相貼合,達到真實(shí)自然的效果。

  還有一重難點(diǎn)在于數據集。

  一鍵微笑背后的算法模型最終效果好不好,很大程度上依賴(lài)于人臉數據集的構建。

  數據集中包含的人臉越多越豐富,AI算法就能學(xué)到越多的人臉特征,提高輸出結果的精準度。但人臉數據集的獲取又往往涉及到用戶(hù)隱私等多種問(wèn)題,較難采集。

8.jpeg

  但橋豆麻袋,我也不是在為難各位攻城獅,因為這事兒啊,也不是沒(méi)有現成的捷徑可以走。

  開(kāi)頭的這么一套AI“魔法”,其實(shí)就是我最近了解到的華為HMS Core提供的AI“一鍵微笑”功能。

  所謂HMS Core,官方說(shuō)法是華為終端云服務(wù)(HUAWEI Mobile Services)開(kāi)放能力合集。

  簡(jiǎn)單翻譯一下,就是一個(gè)給移動(dòng)端開(kāi)發(fā)者們提供各種App基礎應用服務(wù),以及圖形、媒體、AI等一系列算法能力的平臺。

  其中媒體領(lǐng)域的視頻編輯服務(wù)(Video Editor Kit)提供了專(zhuān)屬濾鏡、AI著(zhù)色、人物追蹤等多種AI能力。而一鍵微笑能力正是來(lái)自于此Kit能力。

  對于開(kāi)發(fā)者們而言,這便意味著(zhù),不用費力調教模型,僅需幾行代碼,簡(jiǎn)單接入華為HMS Core開(kāi)放的SDK,就能低門(mén)檻地復制同款AI“微笑魔法”。

  可以看到,基于面部識別算法以及數據集的優(yōu)化,與FaceApp等相比,Video Editor Kit的微笑處理偏合理含蓄,微笑自然且不會(huì )改變原本人臉的合理結構。

9.png

  HMS Core研發(fā)團隊依托自研的人臉生成模型,結合算法利用部分真實(shí)人臉圖片,生成大量的虛擬人臉圖片來(lái)訓練微笑模型,比如可以基于數千張具有肖像權的人臉圖片,生成百萬(wàn)張虛擬人臉數據集。然后再利用自研算法模型,從人臉數據集中生成了“開(kāi)心數據對”,也就是一系列的笑臉。最終,從中選出更符合原圖人臉面部狀態(tài)、更自然合理的微笑。

  Video Editor Kit的“一鍵微笑”功能近期會(huì )在華為開(kāi)發(fā)者聯(lián)盟官網(wǎng)上線(xiàn),有興趣的小伙伴可以嘗試下~

  除了賦予照片中人自然微笑的能力,Video Editor Kit在處理老照片時(shí),還展示了另一重AI能力:AI著(zhù)色。

  與此前火爆外網(wǎng)、成為老照片修復界標桿的MyHeritage相比,來(lái)自華為的AI著(zhù)色風(fēng)格強調的不是“復古感”,而是更貼近真實(shí)生活。

10.png

  △左為華為Video Editor Kit,右為MyHeritage

  據了解,Video Editor Kit的AI著(zhù)色是通過(guò)設計輕量算法模型、構建百萬(wàn)數據集,和優(yōu)化調整訓練方式,來(lái)讓照片著(zhù)色更自然。

  另外,相對而言,Video Editor Kit的AI著(zhù)色賦予老照片的色彩飽和度更低一些,更便于后期處理

  復雜算法一個(gè)SDK就搞定,應用開(kāi)發(fā)超簡(jiǎn)單

  這里咱們就以AI著(zhù)色為例,看看在自己App中集成HMS Core的AI能力,需要經(jīng)過(guò)哪些步驟。

  首先,你需要在華為開(kāi)發(fā)者聯(lián)盟網(wǎng)站上完成實(shí)名注冊。

  第二步就到了集成HMS Core視頻編輯服務(wù)(Video Editor Kit)的視頻編輯原子能力SDK。該SDK不僅提供導入、編輯、渲染、導出、媒體資源管理等一站式視頻編輯能力,還涵蓋了多個(gè)AI算法能力接口,可根據業(yè)務(wù)場(chǎng)景靈活選擇。

  在快速集成SDK之后,只需要增加幾行代碼就可以調用AI著(zhù)色能力,輕松實(shí)現圖片和視頻處理的AI智能化:

11.png

  除了詳細的開(kāi)發(fā)指南之外,HMS Core官網(wǎng)還提供了Codelabs、服務(wù)教程和開(kāi)發(fā)實(shí)例,幫助開(kāi)發(fā)者快速集成SDK,進(jìn)一步降低了應用開(kāi)發(fā)的門(mén)檻。

  需要說(shuō)明的是,視頻編輯服務(wù)(Video Editor Kit)的SDK不僅支持華為手機,也支持非華為設備,具體版本要求如下。

12.png

  另外小小地提醒一下:人臉算法千萬(wàn)條,安全守法第一條。大膽的想法,還是收一收吧~

  降低開(kāi)發(fā)門(mén)檻的“基座”

  看到這里,你是否有些躍躍欲試了呢?

  簡(jiǎn)單接入SDK即可獲得復雜的AI算法能力,對于A(yíng)pp的開(kāi)發(fā)者們而言,技術(shù)層面的顧慮減少了,自然可以投入更多的精力和時(shí)間去豐富創(chuàng )意。

  而對于咱們吃瓜群眾來(lái)說(shuō),這也就意味著(zhù),你能在HMS Core里找到的開(kāi)放能力,都能在各種App里,以各種好玩的創(chuàng )意形式直接體驗到。

  實(shí)際上,無(wú)論是安卓還是iOS,各自生態(tài)內類(lèi)似的“基座”,如今都已是大勢所趨。

  谷歌的GMS Core也好,蘋(píng)果面向開(kāi)發(fā)者的各種Kit也罷,都已證明其在各自生態(tài)內,推動(dòng)中小應用開(kāi)發(fā)者創(chuàng )意落地的價(jià)值所在。

  而這種應用的繁榮,反過(guò)來(lái)也進(jìn)一步為安卓、為iOS獲得了更多用戶(hù)的好評、吸引了更多優(yōu)秀的開(kāi)發(fā)者。

13.jpeg

  作為全球Top 3移動(dòng)應用生態(tài)的HMS,同樣在這條“基建”之路上探索已久:

  在去年HMS Core 6正式發(fā)布之時(shí),華為官方的數據就顯示,其開(kāi)放能力已覆蓋應用服務(wù)、圖形、媒體、智能終端、人工智能、安全、連接與通信在內的7個(gè)領(lǐng)域,總共70個(gè)Kit能力。

  截至2022年Q1,HMS生態(tài)中的開(kāi)發(fā)者數量,已經(jīng)超過(guò)540萬(wàn)。

  可以說(shuō),華為搭起了臺子讓移動(dòng)應用開(kāi)發(fā)者來(lái)唱戲,相當于是在移動(dòng)應用生態(tài)里構建起了一套全新獨立的基礎設施。

  并且不僅面向HarmonyOS,HMS Core也支持安卓和iOS的應用和服務(wù)開(kāi)發(fā)。同時(shí)也在平板、智慧屏、智能手表及車(chē)機等更多智能終端上布局。

  更重要的一點(diǎn)是,作為手機軟件能力之基,HMS被推至臺前,或許也可以看作是華為將多年積累的創(chuàng )新能力寶藏分享給了全球的應用開(kāi)發(fā)者。

  你覺(jué)得呢?

  — 完 —

 ?。ㄎ恼略醋怨娞枺毫孔游唬?/p>


THE END
免責聲明:本文系轉載,版權歸原作者所有;刊載之目的為傳播更多信息,如內容不適請及時(shí)通知我們。

相關(guān)熱點(diǎn)

  6月2日,美團在港交所公告,一季度收入由2021年同期的370億元增長(cháng)25%至463億元。一季度經(jīng)調整EBITDA及經(jīng)調整虧損凈額同比及環(huán)比均有所改善,分別為負18億元及經(jīng)調整虧損...
電商
  早在4月初,比亞迪汽車(chē)就宣布,根據其戰略發(fā)展需要,自2022年3月起停止燃油汽車(chē)的整車(chē)生產(chǎn)。未來(lái),比亞迪在汽車(chē)版塊將專(zhuān)注于純電動(dòng)和插電式混合動(dòng)力汽車(chē)業(yè)務(wù)?! ?月30日...
新能源

相關(guān)推薦

1
3
人人狠狠综合久久亚洲88_国产超薄丝袜足底脚交国产_日本wvvw高清中文字幕_97国产品香蕉在线观看