随着人工智能 AI 技術的發展,現在也越來越多的軟件采用了 AI 技術,例如之前鋒哥給大家分享過的清華大學的一些 AI 工具,包括有反向辭典、文字校對、據意查句、一鍵生成詩詞等。同時還有視頻補幀、智能摳圖、語音合成、人像修複、去除馬賽克等流行的 AI 項目。
如果你對這些 AI 項目感興趣的話,今天鋒哥要給大家分享這個「Paper2GUI」免費的 AI 桌面 APP 工具箱,根據作者介紹已支持 18 AI模型,内容涵蓋語音合成、視頻補幀、視頻超分、目标檢測、圖片風格化、OCR識别等領域。支持Windows、Mac、Linux系統,未來還将适配安卓和蘋果設備,另外還有小程序。
AI語音合成
AI 語音合成适用于配音、講解、說書等場景,相比傳統 TTS 有着特殊優勢:有呼吸聲、萬千音色、自然流暢、媲美真人。
目前提供了三種語音合成,分别是微軟語音、火山語音、阿裡雲語音,操作簡單、支持音效試聽、支持無限多開、中文語音豐富、自帶呼吸聲,效果逼真。
因為是使用了第三方接口,微軟語音、火山語音、阿裡雲語音需要一定的付費,免費的有限制,作者也提供了免費的使用,你也可以自己去申請相關的 APPID 和 Token 密鑰。
AI視頻補幀
目前一般來說視頻的幀數在 30FPS 左右,加上拍攝視頻為了節省成本,幾乎大多數電影都是 24 幀拍攝的。現在 30FPS 的影片已經開始滿足不了一些人的觀感了,例如我們玩遊戲通常需要到 60 幀才會發現畫面是流暢的。所以可以借助 AI 軟件來實現插幀。
AI視頻補幀提供了 Dian-GUI 和 RIFE-GUI 兩個版本,根據作者推薦用 RIFE-GUI 版本,無需繁瑣設置,零依賴,開箱即用的一款視頻補幀工具,經過智能補幀算法,可實現絲滑流暢畫質。
AI視頻補幀幀率方面支持選擇 60、90、120、240、360,轉換的時間根據你電腦的性能了,默認使用 GPU 加速處理,較高要求 4K/60FPS 如果需要多顯卡支持,作者表示未來會考慮加入多顯卡支持。
AI視頻超分辨放大
對于一些老舊視頻、電影想要轉換成高分辨率在以前是靠人工逐幀修複,成本非常高,修複的時間也很長,據說每人每天可能隻能修複二三十秒,修複一部電影甚至需要兩三年的時間。
而現在可以用 AI 來自動超分辨率放大,支持把視頻放大2倍、3倍、4倍,甚至優化畫質。AI視頻超分辨放大目前提供了四種超分模型,分别是 RealCugan、RealESRGAN、RealSR、waifu2x,不同算法對不同的圖像效果不一樣,例如動漫類的可以優先考慮用 waifu2x 。
軟件使用很簡單,你隻需要輸入文件路徑,選擇要放大的倍數,開始處理即可。不過對硬件要求比較高,低配置電腦耐心等待處理了。
AI圖像風格化
之前很流行把自己的頭像變成卡通動漫風格,通常需要自己用 PS 等軟件處理,不過現在用 AI 算法也可以快速轉換,目前開源算法主要用的 AnimeGAN,軟件使用很簡單,打開圖片直接開始處理即可。
不過作者也說了,因技術限制,目前隻适合矩形圖片轉換,照片最好要清晰。抓換後的漫畫可以采用超分辨工具進行二次優化。
AI視頻摳圖
圖片摳圖沒什麼難度,但是手動對視頻摳圖就比較麻煩了,現在借助 AI 智能算法 RVM、MODNet、MobileNetV2 等可以自動摳出圖片。使用也很簡單,導入視頻後點擊開始按鈕處理即可。
需要注意的是,因為是采用 GPU 加速,所以同樣你需要一個給力的顯卡。輸出的效果支持綠幕背景,方便你導入視頻編輯軟件進一步合成處理。
AI人像修複
對于一些有紀念價值的老舊照片,如果損壞的話想要修複比較麻煩,現在用 AI 技術可以自動對丢失的細節進行自動繪制。據介紹,這個項目采用的是 GFPGAN 騰訊開源的人臉修複算法,它利用預先訓練好的面部 GAN(中封裝的豐富和多樣的先驗因素進行盲臉修複。
修複效果還支持給黑白的照片上色,不過如果你的照片損壞的太嚴重,那麼修複的效果也是不太理想,隻能等 AI 算法繼續訓練了。
AI人像摳圖
AI摳圖現在已經很成熟了,有非常多的在線 AI 智能摳圖網站,例如比較流行的 remove.bg,識别和摳圖的結果都非常不錯。現在用 Paper2GUI 也可以本地人像摳圖了,支持設置摳圖後的背景,例如透明、綠幕。
不過目前這個模型算法的摳圖效果并不太好,對于比較複雜背景圖片,例如毛發,識别摳出來的效果比較一般了。
AI目标檢測
AI目标檢測可以識别視頻/圖片裡面的一些東西,采用 Yolo 目标算法,支持的檢測比如物體檢測、口罩檢測、車牌檢測、車輛檢測、蘋果質量等級檢測等等。
總結
以上這些工具都是基于開源的 AI 項目制作成 GUI 界面版本,方便大家使用了。所有依賴和模型都是内嵌的,所有打包輸出的桌面APP都是可以開箱即用。
另外「Paper2GUI」項目都是獨立軟件,并不是整合在一起,你可以根據你的需求來選擇性下載。
最後就是這個項目作者還在繼續開發中,目前一些 AI 項目使用的效果未必很好,感興趣的可以繼續關注後續的更新吧。
,更多精彩资讯请关注tft每日頭條,我们将持续为您更新最新资讯!