AIとの会話って人との会話よりも正しくて、きれいなことをいうので知識を深めたり、深く考えるならAIの方が会話相手として優れていると感じたのですが、今後AIはもっと正しいことを言うようになりますか？

現在すでに良質な学習データが尽きて、AIはSNSやredditの誤用だらけの悪口雑言を学習するようになっています。

アメリカは言論自由思想が強いため学習データクリーニングはしづらく、今後もっとネット上の流行語だらけの無責任な回答を吐いてくるようになると思います。もちろん、話題によりますが。