3 個令人驚艷的 AI 開源項目,誕生了!
大家好,今天繼續(xù)聊聊 AI 科技圈發(fā)生的那些事。分享幾個最新好玩、實用的AI工具。
LivePortrait
LivePortrait:一款可以輕松讓一幅肖像栩栩如生的工具
它可以精準(zhǔn)操控眼睛和嘴唇動作:
讓靜態(tài)照片變?yōu)榱鲿硠討B(tài)視頻,顛覆傳統(tǒng)動畫制作,處理多人物肖像無縫拼接,自然流暢。
解決傳統(tǒng)動畫制作難題,高質(zhì)量高效率,精確控制眼睛和嘴唇動作,微表情逼真。
采用先進(jìn)技術(shù)方法,生成速度快,支持多風(fēng)格肖像,提供更多創(chuàng)意空間。
1、克隆代碼并準(zhǔn)備環(huán)境
git clone https://github.com/KwaiVGI/LivePortrait
cd LivePortrait
# create env using conda
conda create -n LivePortrait python==3.9.18
conda activate LivePortrait
# install dependencies with pip
pip install -r requirements.txt
2、下載預(yù)訓(xùn)練權(quán)重
pretrained_weights
├── insightface
│ └── models
│ └── buffalo_l
│ ├── 2d106det.onnx
│ └── det_10g.onnx
└── liveportrait
├── base_models
│ ├── appearance_feature_extractor.pth
│ ├── motion_extractor.pth
│ ├── spade_generator.pth
│ └── warping_module.pth
├── landmark.onnx
└── retargeting_models
└── stitching_retargeting_module.pth
3、推理
python inference.py
GraphRAG
微軟最近開源 GraphRAG,構(gòu)建知識圖譜增強大模型的問答、推理等能力
GraphRAG 通過構(gòu)建實體知識圖譜來增強大模型的搜索、問答、摘要、推理等能力,特別擅長處理大規(guī)模數(shù)據(jù)集。
GraphRAG 的核心包括構(gòu)建實體知識圖譜和生成社區(qū)摘要兩個步驟,通過社區(qū)摘要提取數(shù)據(jù)集中相關(guān)信息,生成更全面和準(zhǔn)確的答案。
GraphRAG 對 tokens 的需求很低,能夠幫助開發(fā)者節(jié)省成本。在綜合測試中表現(xiàn)優(yōu)異,是目前最佳的RAG方法之一。
基于 Python 的開源將在https://aka.ms/graphrag上發(fā)布
Fish Speech
Fish Speech 完美支持中英日語言的開源TTS模型
語音處理接近人類水平
模型使用約十五萬小時三語數(shù)據(jù)訓(xùn)練,對中文支持非常的完美。
該項目由 fishaudio 開發(fā),作為一個僅有億級參數(shù)的模型,F(xiàn)ish Speech 設(shè)計高效輕量,可以在個人設(shè)備上輕松運行和微調(diào),成為您的私人語音助手。
使用方法
Github:https://github.com/fishaudio/fish-speech
AI算法交流群(知識星球)來了,這是一個面向全體學(xué)生和機(jī)器學(xué)習(xí)/算法工程師/研究員的技術(shù)溝通和求職交流的平臺。
在這里你可以了解最前沿AI技術(shù)資訊、Paper、大模型、多模態(tài),算法競賽、實戰(zhàn)項目、獲取AI算法的校招/社招準(zhǔn)備攻略、面試題庫、面試經(jīng)驗分享、Offer選擇、內(nèi)推機(jī)會、學(xué)習(xí)路線、求職答疑和海量學(xué)習(xí)資料等內(nèi)容。
同時,你也可以與來自港科大、北大、清華、中科院、CMU、騰訊、百度等名校名企開發(fā)者互動交流~
AI算法交流群方向涉及搜廣推、深度學(xué)習(xí),機(jī)器學(xué)習(xí),計算機(jī)視覺,知識圖譜,自然語言處理,大數(shù)據(jù),自動駕駛,機(jī)器人,大模型、多模態(tài)等多個方向。
本文內(nèi)容根據(jù)網(wǎng)絡(luò)資料整理,出于傳遞更多信息之目的,不代表金鑰匙跨境贊同其觀點和立場。
轉(zhuǎn)載請注明,如有侵權(quán),聯(lián)系刪除。