球体の材質と大きさが不明で、判断が難しいですが
大変難しい作業になりますよ
通常凸面の研磨は
それと同じくらいの凹面の工具を使い左右に振る方法で磨きます
https://www.olympus.co.jp/technology/way/challenge/lens.html
回転運動では磨けないのです。
したがってインパクトドライバーでは磨けません。
ただし、あなたが求める仕上がり品位では磨けるという回答も出てくると思いますが、大変難しいですよ。
可能性として厚みのある目の細かいスポンジに研磨剤を付けて
指１本程度縮む程度の力で押し付けて左右に振ることで磨けるかもしれません。
相当の時間が必要になると思います。
もし大きさが野球のボール程度なら皮手袋に研磨剤を付けて
手で揉みながら磨くほうが確実で早いかもしれませんよ
