休憩時間は自由、確かにそうなんですが就業時間内という事は考慮が必要です。
私は製造業なんですが、休憩中は工場の敷地内から出てはいけないルールです。
理由は別にあります。
一般的に企業は通勤時間を含めた就業時間内は従業員の安全に配慮する義務があります。
従業員の業務中の災害は労災となります。
仮に貴方が休憩中に散歩していて交通事故に遭ったら企業にも安全義務違反として管理責任が及びます。
例えば金融機関や役所に手続きに行かないといけないとか、企業側が納得できる理由があるなら許可もおりますが、用事も無いのにブラブラ出歩かれては管理が行き届かないですよね。
そういった意味でも制限されるのは普通ですよ。違法性はありません。