user avatar
Shunsuke Saito
@psyth91
Director, Research Scientist @AIatMeta Digital Human/Vision/Graphics デジタルヒューマンの研究してます。 #pifuhd #sapiens All opinions are my own.
Pittsburgh
shunsukesaito.github.io
Joined April 2020
522
Following
4,518
Followers
Posts
  • Pinned
    user avatar
    Shunsuke Saito
    @psyth91
    Aug 11, 2025
    Relightable Codec Avatars is now extended to full-body! At #SIGGRAPH2025, we will present Relightable Full-body Gaussian Codec Avatars. Key contributions include learnable Zonal Harmonics and deferred learnable radiance transfer for specular! Check it out! neuralbodies.github.io/RFGCA/
    00:00
    14K
  • user avatar
    Shunsuke Saito
    @psyth91
    Jun 14, 2020
    #CVPR2020 にオーラルで採択された、1枚画像から人の高解像フル3D化を実現する研究「PIFuHD」のコードがgithubで公開されました！！！！ GPUが無くても自分で画像をアップロードして3Dモデルが作れるようにGoogle Colabのデモも公開中です！#お家でデジタルヒューマン github.com/facebookresear…
    00:00
  • user avatar
    Shunsuke Saito
    @psyth91
    Jan 5, 2021
    OpenAIのDALL-E （GPT3のテキスト→画像版）が凄まじい。複雑な文章入力に対しての高品質でそれっぽい生成画像は、もはやクリエイティブとしか言いようがない。（画像は”犬を散歩させるチュチュを履いた大根”の入力に対する生成結果） openai.com/blog/dall-e/
  • user avatar
    Shunsuke Saito
    @psyth91
    Jun 13, 2022
    自分達の#SIGGRAPH論文がITMediaで特集されました🎉🎉 携帯での簡単なスキャンで表情もコントロールできる本人そっくりのアバターが作成できるようになります！
    user avatar
    Seamless
    @shiropen2
    Jun 12, 2022
    iPhoneの自撮りで本物そっくりな動く3Dリアルアバター　米Metaが技術開発 itmedia.co.jp/news/articles/… スマホで撮影した短時間のスキャン画像から頭部アバターを生成。シワや歯など細部も正確に再現され,動く表情も自然に表現される。視点が変わっても頭部の角度に応じた光の当たり具合を表現。
    00:00
  • user avatar
    Shunsuke Saito
    @psyth91
    Dec 7, 2023
    📢 Check out 𝗥𝗲𝗹𝗶𝗴𝗵𝘁𝗮𝗯𝗹𝗲 𝗚𝗮𝘂𝘀𝘀𝗶𝗮𝗻 𝗖𝗼𝗱𝗲𝗰 𝗔𝘃𝗮𝘁𝗮𝗿𝘀! Our latest codec avatars using 3D Gaussians generalize to novel lighting (OLAT, envmap) with *all-frequency* reflection (see video for hair and eye reflection) in real-time! shunsukesaito.github.io/rgca/
    00:00
    46K
  • user avatar
    Shunsuke Saito
    @psyth91
    Apr 11, 2021
    動きキレッキレのアバターを全自動で３Dスキャン群から作り出す技術『SCANimate(=SCAN+Animate)』がCVPR2021にオーラル採択＋公開されました🎉 リグと服のシワなどの変形(PSD)を３Dスキャンから直接学習することによりリアルなアバターアニメーションが手作業なしで作れます→scanimate.is.tue.mpg.de
    00:00
  • user avatar
    Shunsuke Saito
    @psyth91
    May 9, 2021
    今年のSIGGRAPH共著論文が公開されました！デジタルヒューマン・アバターの照明、表情、顔向きを”リアルタイム”かつ”実写レベル”で自由にコントロールできます！（動画は全てCGです）facebookに移っての初仕事（？）です。 ビデオ👉youtu.be/5YigyNvt4GE Webサイト👉sai-bi.github.io/project/sig21_…
    00:00
  • user avatar
    Shunsuke Saito
    @psyth91
    Aug 1, 2023
    🎉 We just released code, data and model for our #SIGGRAPH2023 work "CT2Hair"!! CT2Hair achieves fully automatic reconstruction of production-ready hair strands from computed tomography (CT) scans!! Code&Data: github.com/facebookresear… Project: yuefanshen.net/CTHair
    00:00
    56K
  • user avatar
    Shunsuke Saito
    @psyth91
    Nov 24, 2021
    Brown/MIT/トロント大/Google/NVIDIA/TUMの研究者とのサーベイ論文及び論文検索サービスが公開されました🎉🎉 NeRFやDeepSDFなど、この1~2年で爆発的に研究が進んでいる“MLPを用いた時空間場を表現する技術＝Neural Fields”の基礎から応用例まで幅広くカバーしています！ brownvc.github.io/neural-fields-…
  • user avatar
    Shunsuke Saito
    @psyth91
    Nov 15, 2023
    🎉 Excited to share our #3DV2024 paper: "Diffusion Shape Prior for Wrinkle-Accurate Cloth Registration". We show how to incorporate a powerful diffusion prior into cloth 3D registration, and achieve wrinkle-accurate alignment! Project: www-users.cse.umn.edu/~guo00109/proj…
    00:00
    46K
  • user avatar
    Shunsuke Saito
    @psyth91
    Apr 5, 2024
    Wow, both Relightable Gaussian Codec Avatars and URHand are selected as Oral at #CVPR2024 !! RGCA: shunsukesaito.github.io/rgca/ URHand: frozenburning.github.io/projects/urhan…
    00:00
    23K
  • user avatar
    Shunsuke Saito
    @psyth91
    Aug 11, 2022
    📢 Looking for high-res and generalizable NeRF rendering for face and body without requiring 3DMM or SMPL? Check out our #ECCV2022 paper, KeypointNeRF!! The code is just released!! Project: markomih.github.io/KeypointNeRF/ Code: github.com/facebookresear… (1/4)
    00:00
  • user avatar
    Shunsuke Saito
    @psyth91
    Aug 25, 2024
    #ECCV2024 にオーラル採択された人物特化型基盤モデル「Sapiens」のコードおよび学習済み重みが公開されました！！ 史上最高精度の4タスク(姿勢推定、領域分割、深度・法線推定）モデルに加え、3億枚人物画像による事前学習モデルも公開中です。#おうちでデジタルヒューマン github.com/facebookresear…
    00:00
    28K
  • user avatar
    Shunsuke Saito
    @psyth91
    Oct 24, 2022
    📢 Does your avatar lack history-dependent secondary motions such as soft-tissue dynamics? Try our #ECCV2022 paper, AutoAvatar!! Now you can learn secondary-motion from raw scans *without* mesh registration. Project: zqbai-jeremy.github.io/autoavatar/ Code: github.com/facebookresear… (1/N)
    00:00