Google mapsだと平均滞在時間が2〜4時間。
回れなくもない、という感じですね。
質問者さんがどれほど丁寧に絵を見るか、でしょう。
日本の美術館で、どの程度絵見ます?
上野とかどこでもいいですが、Google mapsの滞在時間と比較して、自分があっさり見る方なら足りるでしょう。
じっくり見たい人は半日はかけます。
絵だけではなく、建物も素晴らしいですよ。次いつ行けるかどうかわからないところで、ケチると後悔するかなと思いますが、それも質問者さん次第です。
冬だとまだ空いていますが、コロナ以降、ガラガラということはないです。