私はちょっと状況は違うのですが、大学時代にメンタルを病んでしまって、就活では元々希望してなかったところに入りました。ゆったりしてるし嫌な人もいないし、ほぼ定時に帰れるのでよかったかなと思ってます。
一応、元々希望していたところに入ろうと思えばまだいけるのですが(特殊な職種なので…)、激務で有名なので迷ってます。やっぱり働きやすいって大事だと思いますよ…一回、楽(?)なところを経験してしまったら特に。だって40年も働かなきゃいけないし…やりたいことに未練はありすが。
質問者様も、未練があるなら同じようなやりがいを得られるホワイトな職場を探した方がいいと思います。