大宮駅から東武日光駅までの乗車券を、大宮駅以外のみどりの窓口がある駅で、乗車日前日に買うことはできますか。よろしくお願いします。

確認ですが、

JRと東武の直通特急に乗る、ということで良いですね？
JRと東武の普通列車の乗り継ぎとか、東武だけで行く、
ということではないですよね？

その前提で回答しますが、直通特急ということなら、
別に大宮駅限定ということではありません。
JR東日本であれば他のみどりの窓口のある駅や、
指定席券売機で購入することが可能です。