うーん、お疲れさまです。
こういう明らかにトラブルではない微妙な問題ってひそかにストレスになりますよね…。お相手に悪気がないからこそなるべく傷つけたくもないし、対応苦慮します。
全く同じではありませんが、似た経験があります。
完全にオタクアカウント（作品アップ、萌語用）として運用している自アカによく絡んでくださる方がいるのですが、絵柄で繋がった方で、私の推しやジャンルにほぼ興味がないのが丸わかりです。（一応手軽な範囲で勉強してくれたみたいなんですが、そもそも自ジャンル系コンテンツに興味が薄いと言っていた）
明るく面白い友人としては好きな方なんです。でも萌え語りなどにも積極的に絡んでこられて、自分は面倒くさいオタクで、ジャンル語りでは触れてほしくない部分も多く、正直ちょっと辟易しています。興味ないならその話題はそっとしておいて…！と心で叫んでいます。語り合うならそのジャンルが好きさんしたい…というか…！複雑な心境です。

自語りが長くなってすみません。私は対応としては、この辺りをしています。
①自ジャンルの話になったらフェードアウト、話題ずらしをする
②同意できないときは厄介なオタクでゴメン、みたいな軽いノリで自虐しつつ「自分はそうは思えない」と言ってみる（ちょっと傷ついておられたのであまりおすすめはしないです）
③「長くなってきたからまたねー」と言ったり、同意＋ファボでこの話題は終わりアピールをする
④返信しにくいリプが来たら、暫く浮上しない。日付を開けてファボだけする。
前より萌語りを捕らえられることは減りました。トピ主さんのお相手はなかなか強者っぽいので、これくらいじゃ難しいかもしれませんが…。
オタクにとってジャンル愛・正確な知識の有無って結構大きい要素なんだなとこの１件で学びました。トピ主さんもうまくストレスなくやりとりできるよう、応援しています。

相性の問題というか、お互いが想定してる距離感のズレってありますよね〜。

私もたまーに相互さんで似たようなこと思います。悪気ないところが悪いっていうか、察しが悪いっていうか…。

ブロ解するまでもないって案外厄介ですよね笑
ミュート大活躍です。

トピ主さんの場合、相互ではないということなので、
「私生活が忙しくなってきたので、返信滞ります。さらに相互以外は通知オフにします」
ってアナウンスしてもいいんじゃないかなぁって思いました！

適切な距離感が見つかればいいですよね。
文面のみですが、その方はツイッター慣れしてないのかなって感じました。

でも過度なストレスになりつつあるようでしたら、いっそブロックも手段としてはアリだと思います。