プリンター兼用(対応)のインデックスラベルにしないと、市販のプリンターではトラブルを起こすだけです。
使おうとしているものは、台紙にラベルが個別に貼ってあるタイプですよね。
このタイプだと、プリンターの用紙送りが正しく動作しないで目詰まりを起こす可能用があります。
ラベル部分の用紙もインクなどに対応していない可能性もあります。
他の回答にもあるように、AOneなどのプリンター対応のものを購入して印刷してください。
https://www.a-one.co.jp/product/search/detail.php?id=31483
https://www.nichiban.co.jp/general/stationery/adhesion_label/mytack_recycledindex_a4/
https://www.kokuyo-st.co.jp/stationery/hakadori/tackindex/hard_br.html
ちなみに、コクヨの場合はタイトルブレーンクロス対応のものならば、プリンター非対応でも印字できるようです。
https://www.kokuyo-st.co.jp/stationery/titlebrainx/
https://www.kokuyo-st.co.jp/stationery/titlebrainx/pdf/NS-TB5-catalog.pdf
4万円前後するようなので、ラベルなどを大量に必要な部署以外では高価な危機になります。