交流したくないわけじゃないのですが、誰かの解釈違いになったり、自分も人がせっかく楽しくしてるのに自分…

交流したくないわけじゃないのですが、誰かの解釈違いになったり、自分も人がせっかく楽しくしてるのに自分とは違うな〜と思ってモヤモヤしたくないので交流をせずにXはff0の壁打ち鍵垢、支部に作品のみを投稿する形で創作活動をしています。 その中で、唯一熱心にメッセージをくれた方とXで繋がりました。 誰かと分かち合いたい気持ちが少しあり、その方とはメッセージでやりとりする中で創作に対する方向性も似ていたので、繋がろうと思えたのです。 ですが、その方はとても交友関係が広く、たくさんの方と交流していました。それに関しては何にも思わないのですが、イベントなどがあると会いたいです！と言ってくださり、私もそれに応じるのですが、いかんせんお友達が多い方です。私と会っている時も他の方から「会いたい」とメッセージをもらって、「同じカプの人なので(ここに呼んでも)いいですか？」とご一緒することがあります。 正直交流が苦手なこともあり、断りたいのですが断りづらいです。仲良くなれるかもしれませんと言ってくださるのですが、もう出来上がってるコミュニティの中に入り込む元気も勇気もありません。 こういうことが何度か続き、その方自身はとてもいい方で考え方も合うのですが、今後もこういうことがあるのかな…と思うと億劫で、繋がりを断ちたいと考えています。 あまり波風立てずに繋がりを断ちたいのですが、何かいい方法はないでしょうか。また、こういう断ち切り方をされたことがあるというのもあればお聞きしたいです。 長文になり申し訳ありません。