いちいち気に留めてしまうのをやめたいです。

どこの職場でも合う人合わない人がいると割り切るしかないと思います。
一人で成り立つ職種ではないので、主さんの気に障るのであれば極力関わりを減らす対応しか取れないような気がします。

私もそうですよ。
相手を変えることはできないし、流せないので、人に話すことが多いです。
自分の感情に共感してもらったり、「〇〇って意味だったんじゃない？」と違う見方をしてもらったりして、解消を心がけています。
思ったことを紙に書き出すという人もいました。
自分の中だけで抱えていると、イライラが増幅する気がします。
SNSで吐き出す人もいますが、特定される場合があるので、おすすめできません。

他の方の意見同様に、相手は変わらないので開き直るしかないと思う。
実際私は私のせいで新人が病み、いじめられた挙句退職に追い込んだと言われてかなり凹みましたが、自分は自分の仕事を、やり遂げただけ。
人の言葉を気にしていては何もできない。
辞めたいと思うことも日常で、それを上司に訴えることもしばしば。
その度に、諦めとは違う何かを吹っ切って仕事してます。
言っても変わらないから、人からは言われないような仕事をしようと心がけてます。仲良しごっこの職場なんてこの世にありえないと思いますよ。