高斯像素編解碼器頭像:一種用於高效渲染的混合表示方法 摘要(節錄): GPiCA採用了獨特的混合表示方法,結合了三角形網格和各向異性3D高斯函數。這種組合在保持照片級真實感的同時,最大限度地提高了記憶體利用率和渲染效率。 - 三角形網格在表示臉部皮膚等表面區域方面非常有效。 - 3D 高斯函數能夠有效地處理頭髮和鬍鬚等非表面區域。 為此,我們開發了一種統一的可微渲染管線,將網格視為 3D 高斯噴濺體積渲染範式中的半透明圖層。 我們訓練神經網路將臉部表情編碼解碼成三個組成部分: 1. 一個3D面部網格, 2. RGBA紋理, 3. 一組三維高斯函數。 這些元件在統一的渲染引擎中同時渲染。網路採用多視圖影像監督進行訓練。我們的結果表明,GPiCA 在達到純高斯化身逼真度的同時,也能與基於網格的化身的渲染性能相媲美。
論文連結:https://t.co/O8FNPwXCeR



