心配されているとおり名誉棄損になる可能性があるのでやめた方がいいです。名誉棄損は言ったのが事実であったとしても該当します。ましてや「陰湿です」というのは事実でもなんでもなく、相手に感じている個人的な印象を言っているだけの単なる悪口です。
例えば労働組合の役員など限られた数名に、あくまで流布を目的とせず、相談という形で伝えるのであれば問題ないです。それか本当にやり返したいなら、労働あっせんや労働審判を起こして会社に非を認めさせることです。辞めてからでもできますし弁護士付けない限りはほぼタダ、こちらはノーリスクです。