度が過ぎた推し活は精神的浮気だと思いますか？

そうね

相手にするのが難しく、相手にセズに訣れると思う

そもそも精神的浮気なんてものはない

自分は子供が最大の「推し」なのであまり理解できない感覚です。
（好きなミュージシャンや作家などはいますが、ときどき聴いたり読み返したりすれば満足します）
本来なら家族に向けられるべき時間・金銭・愛情が別の対象に向けられているという点では浮気と同じかなと思いますね。
この旦那さんは嫉妬とかじゃなくて、単純に精神的に未熟な妻に呆れてるだけな気がします。

個人的には浮気だとは思いませんが、パートナーが浮気だと思うなら浮気かもしれないですね。