度々すみません
シーン購入させて頂きました
すごい力作ですね
アップデート後に購入したので実際のおもちゃのずれは確認できていませんが、実験した感じではおもちゃがオンの間はPositionとRotationのステータスをHold、オフの間はParentLinkにすればズレは起きないようです。
ScaleとCollisionを変えるのと手数は同じなのであまり良いとは言えませんが参考になれば。
プラグインがActiveの間はHold、そうでない場合はParentLinkに自動的に切り替わってくれると楽になりそうですね。