私もトピ主さんと同じで最初は仲良くしたいな、と思ってちょっと交流に励みましたが雰囲気になじめず、すぐ無理ってなりました。
す～っと離れてみたけど、誰も何にも言ってこないです

ブロ解して孤立するのが嫌でそのまま気の合わない人たちと苦手な気持ちを隠しながら波風立てないよう割り切って慣れ合い続けるか、もし狭い界隈ゆえに孤立したとしても、思い切ってブロ解してその方たちと離れて活動するかどちらがいいかはトピ主さん次第ですが…
ストレスフリーになるのは目に見えて後者だと思います。前者は早かれ遅かれトピ主さんの我慢が限界に達して、いっそアカウント削除してしまおうコースになりそう。予想ですが。
もしくはこのさい垢転生してしまうのも手かと。
新アカ先では「壁打ちです」って明記して、もし前アカウントから空気の読めないような知り合いに気づかれて向こうからフォローされたり関わりを持とうとしてこられたとしても「壁打ち」って明記してあるからスルーしちゃっていいと思うし。
その人たちと離れて活動してけばまた新しい道が開けると思います。
気の合わない人たちと神経すり減らして付き合わないほうがいいですよ。