國科大本科生以第一作者身份發表AAAI論文,用神經網絡分析三維模型
日前,中國科學院大學計算機與控製學院首屆本科生談清揚同學,以第一作者身份撰寫的論文《Mesh-based Autoencoders for Localized Deformation Component Analysis》,被計算機科學領域人工智能頂級會議AAAI錄用,並將於2018年2月2日赴美作大會宣講。
該研究成果是談清揚同學在中國科學院大學博士生導師、中國科學院計算技術研究所夏時洪研究員領導的人體運動仿真課題組完成的。這是中國科學院大學首批本科生以第一作者身份在頂級國際學術會議發表論文,即便在美國麻省理工學院、普林斯頓大學等國際一流高校本科生中也屬相當難得。
談清揚同學參與了2016年度中國科學院大學生創新實踐訓練計劃項目——基於RGBD相機的人體運動捕獲,深入研究了其中的三維模型序列分析,具體由夏時洪研究員和高林副研究員指導完成。
三維模型序列分析在三維模型重建與建模中起到關鍵的作用,而傳統的機器學習方法無法智能地對三維模型庫進行合理的分析。該研究工作使用一種新的神經網絡結構來對三維網格進行卷積操作,基於課題組前期研究的大尺度形變表示方法,通過在自編碼器的網絡節點上引入稀疏性約束來得到合理的局部的形變分量,從而可以幫助用戶更加精確的編輯模型和根據外部約束進行重建。
中國科學院大學計算機與控製學院首屆本科生談清揚同學
同時,談清揚同學還完成了另一篇第一作者論文,“Variational Autoencoders for Deforming 3D Mesh Models“,目前正在審稿中。此前,談清揚作為國科大首批訪學麻省理工學院本科生,共選修4門專業課,成績均為A,平均績點達到5.0(麻省理工學院的GPA為5分製)。2014年,談清揚從江蘇南京師範大學附屬中學考入國科大。
AAAI是人工智能領域的頂級國際會議(CCF A類會議),每年吸引世界各國數千名學者共同探討人工智能發展前沿。AAAI 2018將於2月2日-7日在美國新奧爾良(New Orleans, Louisiana, USA)召開。本屆會議論文錄取率低於25%。
下麵簡單介紹論文及實驗結果。
摘要
空間局部變形組件對於3D幾何處理中的形狀分析和合成非常有用。最近研究人員已經提出了好幾種方法,旨在提取直觀、可解釋的變形部件。然而,這些技術存在重大局限(fundamental limitation),特別是對於具有噪聲或大規模變形的網格而言,而且這些方法有可能識別不出重要的變形分量。
在本文中,我們提出了一種全新的基於網格的自編碼器架構,能夠處理具有不規則拓撲的網格。我們在這個框架中引入了稀疏正則化,和卷積運算一起幫助定位變形。我們的框架能夠從具有大規模變形的網格數據集中提取局部變形分量,並且對噪聲具有魯棒性。使用提取出的基礎,這個框架還提供了一個非線性的方法來重建網格,比當前的線性組合方法更加有效。大量的實驗表明,我們的方法在定性和定量評估方麵均優於最先進的方法。

上圖展示了使用模型生成不可見數據(unseen data)的錯誤率,使用的數據集是(a) SCAPE(Anguelov et al.2005)和(b) (c) Swing(Vlasic et al.2008)。從上圖可見,論文提出的模型(較為深的藍線)在數據集和指標方麵均優於其他方法。
下麵這張圖展示了使用有限控製點重建SCAPE(Anguelov et al. 2005)和Swing(Vlasic et al. 2008)數據集中不可見數據的泛化誤差。同樣,較深的藍色代表論文提出的方法,誤差相對其他是最低的。
在下麵的對比中,上麵一行是通過物理模擬創建的一個旗幟數據集的關鍵幀。下行是兩種方法提取前四個變形分量的結果對比,左邊是論文提出的方法。
通過結合這四個組件(權重相同),得出合成結果(下排藍色的圖像),作者展示了使用他們的方法得出的結果更加合理(與上排最右邊的結果相比)。
原文鏈接:國科大本科生以第一作者身份發表AAAI論文,用神經網絡分析三維模型
最後更新:2017-11-13 10:34:10