付き合って約7か月です

付き合いはじめから多少は気になっていたのですが、彼がたまにデリカシーのない事を言ってきます
その時は注意すれば謝りますが、後で思い出たりしてしまいバカにされてるのかと悲しくなります
こっちも何かしらそういう事を言うべきでしょうか？