単純にFOV(視野角)の問題
https://www.diyphotography.net/gif-explains-changing-focal-length-impacts-portrait/

VaMの場合、初期設定でDesktopだとFOVが緩め、VRだとFOVがきつい
だから奥行のある顔であればあるほどDesktopでは問題なくても
VRだと顔が細く?見えるようになる

逆にVRでFOVのことを考慮せずにLOOKを作ると
Desktopにもってきたときに顔の具が寄ったような状態になる

どちらもFOVの設定を変更することで対処可能だが
VRの場合は変更できないこともあるので
「そういうものだ」という割り切ったほうがいいかもしれない