開源：深度學(xué)習(xí)模型和姿態(tài)估計代碼開源代碼推薦，人工智能教程（趣說人工智能編譯，來源modelzoo）。姿態(tài)估計的任務(wù)旨在將RGB圖像或視頻的人像素映射到人體的3D表面。姿態(tài)估計是一個多任務(wù)任務(wù)，并涉及其他幾個問題：物體檢測，姿態(tài)估計，分割等。姿態(tài)估計的應(yīng)用包括需要超越簡單地標(biāo)定位的問題，如圖形，增強現(xiàn)實（AR）或人機交互（HCI）。姿態(tài)估計還涉及基于3D的物體識別的許多方面。在這篇文章中，我們分享了幾種開源深度學(xué)習(xí)模型和代碼進行姿態(tài)估計。如果我們遺漏了您認為值得分享的實現(xiàn)，請將其留在下面的評論中。

DensePose

開源：深度學(xué)習(xí)模型和姿態(tài)估計代碼開源代碼推薦，人工智能教程

GitHub | 數(shù)據(jù)集

開源：深度學(xué)習(xí)模型和姿態(tài)估計代碼開源代碼推薦，人工智能教程（趣說人工智能編譯，來源modelzoo）。這篇文章的靈感來自Facebook Research，他在上周 早些時候發(fā)布了DensePose的代碼，模型和數(shù)據(jù)集。Facebook分享了DensePose-COCO，這是一款用于人體姿勢估計的大型地面真實數(shù)據(jù)集。該數(shù)據(jù)集由在50K COCO（上下文中的通用對象） 圖像上手動注釋的圖像到表面對應(yīng)關(guān)系組成。這是深度學(xué)習(xí)研究人員非常全面的資源。它為姿態(tài)估計，零件分割等任務(wù)提供了良好的數(shù)據(jù)來源。

DensePose論文提出了DensePose-RCNN，它是Mask-RCNN的一種變體，用于以每秒多幀的速度在每個人類區(qū)域內(nèi)密集回歸特定部分的UV坐標(biāo)。它基于DenseReg。該模型的目標(biāo)是確定每個像素的表面位置以及其 所屬部分的相應(yīng)2D 參數(shù)。

DensePose采用Mask-RCNN的體系結(jié)構(gòu)以及特征金字塔網(wǎng)絡(luò)（FPN）功能和ROI對齊池。此外，他們在ROI池中引入全卷積網(wǎng)絡(luò)。有關(guān)更深入的技術(shù)細節(jié)，請查閱DensePose論文。

OpenPose

GitHub | 數(shù)據(jù)集

開源：深度學(xué)習(xí)模型和姿態(tài)估計代碼開源代碼推薦，人工智能教程（趣說人工智能編譯，來源modelzoo）。OpenPose是一個實時多人關(guān)鍵點檢測庫，用于CMU感知計算實驗室的身體，臉部和手部評估。OpenPose提供二維和三維多人關(guān)鍵點檢測，以及用于估計域特定參數(shù)的校準(zhǔn)工具箱。OpenPose允許各種輸入：圖像，視頻，攝像頭，IP攝像頭等。它還以各種格式生成輸出：圖像和關(guān)鍵點（PNG，JPG，AVI），以可讀格式（JSON，XML，YML）保存關(guān)鍵點，甚至作為數(shù)組類。輸入和輸出參數(shù)也可以調(diào)整以適應(yīng)各種需求。

OpenPose提供了C ++ API，可以在CPU和GPU上工作 - 包括與AMD圖形卡兼容的版本。

實時多人姿態(tài)估計

GitHub

開源：深度學(xué)習(xí)模型和姿態(tài)估計代碼開源代碼推薦，人工智能教程（趣說人工智能編譯，來源modelzoo）。該實現(xiàn)與OpenPose高度相關(guān)，并且在各種框架中提供了與實現(xiàn)相關(guān)的模型。本文的作者提出 了一種實時多人姿態(tài)估計的自下而上方法，而不使用任何人檢測器。該方法使用非參數(shù)表示（我們稱之為部分相似性字段（PAF））來學(xué)習(xí)將身體部位與圖像中的個體相關(guān)聯(lián)。有關(guān)實施和理論的更多技術(shù)細節(jié)，請參閱論文。這種方法的***特點之一就是已經(jīng)在許多不同的框架中實現(xiàn)，并且代碼和模型隨時可用于您的選擇框架：

• OpenPose C ++庫
• TensorFlow實現(xiàn)
• Keras實現(xiàn)一和二
• PyTorch實現(xiàn)一， 二，三
• MXNet實現(xiàn)

AlphaPose

[[234401]]

GitHub

開源：深度學(xué)習(xí)模型和姿態(tài)估計代碼開源代碼推薦，人工智能教程（趣說人工智能編譯，來源modelzoo）。Alpha Pose 是一個準(zhǔn)確的多人姿勢估計器，并聲稱是***個開源系統(tǒng)。AlphaPose對圖像，視頻或圖像列表執(zhí)行姿態(tài)估計和姿態(tài)跟蹤。它產(chǎn)生各種輸出，包括以PNG，JPEG和AVI格式的關(guān)鍵點顯示的圖像，以及JSON格式的關(guān)鍵點輸出，使其成為更多以應(yīng)用程序為重點的優(yōu)秀工具。

目前，有一個TensorFlow實現(xiàn) 和一個PyTorch實現(xiàn)。AlphaPose使用區(qū)域多人姿勢估計（RMPE）框架來在存在不準(zhǔn)確的人體邊框時促進姿態(tài)估計。有三個組成部分：對稱空間變換網(wǎng)絡(luò)（SSTN），參數(shù)姿態(tài)非***抑制（NMS）和姿態(tài)引導(dǎo)建議生成器（PGPG）。有關(guān)更多技術(shù)細節(jié)，請參閱該論文。

人體姿勢估計

網(wǎng)站 | GitHub | 數(shù)據(jù)集 | ArtTrack紙 | 更深的紙張

開源：深度學(xué)習(xí)模型和姿態(tài)估計代碼開源代碼推薦，人工智能教程（趣說人工智能編譯，來源modelzoo）。這個代碼庫提供了一個TensorFlow實現(xiàn)的人體姿態(tài)估計算法，在 ArtTrack 和 DeeperCut 論文中介紹。訓(xùn)練的模型利用MPII人體姿態(tài)數(shù)據(jù)庫，這是豐富的圖像集合，用于評估 明確的人體姿勢估計。這個項目考慮了在現(xiàn)實世界的圖像中多人的關(guān)聯(lián)人類姿勢估計的任務(wù)。他們的方法解決了檢測和姿態(tài)估計的任務(wù)，這與先前 檢測人員并隨后估計他們的身體姿勢的方法不同。在其實現(xiàn)中使用基于CNN的部分檢測器和 整數(shù)線性程序。有關(guān)更多技術(shù)細節(jié)，請參閱 ArtTrack 和 DeeperCut 論文。

DeepPose

開源：深度學(xué)習(xí)模型和姿態(tài)估計代碼開源代碼推薦，人工智能教程（趣說人工智能編譯，來源modelzoo）。DeepPose是從2014年開始的相對較老的論文，提出了一種基于深度神經(jīng)網(wǎng)絡(luò)（DNN）的人體姿態(tài)估計方法，該方法被制定為針對身體關(guān)節(jié)的基于DNN的回歸問題。它以一種整體的方式推理姿勢，并且具有簡單而強大的表述。DeepPose似乎沒有在線提供官方實施。但是，已經(jīng)努力復(fù)制其結(jié)果：

• Chainer實施
• TensorFlow實現(xiàn)

DeepPose很有趣，因為它是人類姿態(tài)估計的***個深度學(xué)習(xí)應(yīng)用，并且在開始時達到了***進的結(jié)果，為許多其他更新的實現(xiàn)提供了基準(zhǔn)。

姿態(tài)估計是計算機視覺社區(qū)中日益流行的問題。隨著 Facebook Research 等新型姿態(tài)估計數(shù)據(jù)集（如 DensePose-COCO）的發(fā)布，現(xiàn)在在這方面存在更多工作資源。在我看來，有很多方向可以進行姿態(tài)估計，而這些資源的發(fā)布肯定會激起該領(lǐng)域的新興趣。希望很快我們會看到許多新的創(chuàng)新想法和實施。