一旦の解約が必要です。
以下公式ヘルプの最後のほうにそう説明されてます。
google.com/YouTube/answer/11417260?hl=ja">https://support.google.com/YouTube/answer/11417260?hl=ja
作成したアルバムとはどういうものでしょう?
プレイリストのことならリセットされません。
プレイリストは YouTube Music の無料会員でも使える標準機能なので、プレミアムを解約しても影響を受けません。
ただ、オフラインに一時保存したものは影響を受けるかもしれません。こちらは無料会員には使えない機能なので。