眼鏡や水中メガネぐらいのサイズになってワイヤレスだったらそれほど面倒でもなくね？
あと片目だけ現実と切替可能とか、極端に言えばスカウタータイプにするとか
没入感を維持しつつ、簡便にするぐらいはきっと未来ではできているはず