身内ノリの企画について

はじめまして。対処がわからなくなったので、意見を聞かせてください。
私は来年のイベントに参加する予定です。
自カプの作品を作るぞと今からネタ作りなどをして楽しんでいたのですが、突然Twitter上で自カプ推しの人たちが「自カプサークル絶対多いからスタンプラリーとかやろうよ」と言い出しました。
正直げんなりしていますし、参加したくありません。
私は自カプの人ともそれなりに繋がってはいますが、身内ノリが好きではなく今では殆ど絡んでいません。
それなのに、イベントにそのカプで参加するというだけで、企画に参加するよね？という流れになっています。
断りたいのですが、周囲には不自然に映りますよね？
そういった場合はみなさん我慢してでも笑顔で「やりたい！声掛けてくれてありがとう！」と言っているのでしょうか？
分かりづらい文ですみません。