冬至のゆず湯って今日の夜十二時以降ですか、それとも明日の夜ですか

冬至のゆず湯は「冬至の日の夜」に入るのが一般的です。
つまり、

今日が冬至なら → 今日の夜（入浴する時間）

夜12時を過ぎる必要はありません

明日の夜ではありません

冬至は「日付」で考える行事なので、その日の夕方〜夜にゆず湯に入れば大丈夫です。

体を温めて無病息災を願う意味なので、時間に厳密な決まりはありません。