もっと言えばエロ絵が見たいだけ……
そんな人が多いなー、とはなんとなく感じます……

それはある意味しょうがないかなーと思います。ゲームに興味があってフォローした人を責めることはできないですし、そもそも一次創作は二次よりずーーーっと反応少ないのが普通です…。(両方経験者)

まあ世の中にはフォロワー数の多さで人を判断する人もいますし、多い分には損ではないかなと。
どうしても嫌でしたら、一次創作専用のアカウントを新しく作るとか…

我儘な愚痴に反応してもらってなんか申し訳ないです。ですよね、その人たちを責めることなんて出来ないですよね。いつか1次創作でも多く評価が貰えるように地道に頑張ります

例えば、トピ主さんのフォロワーさんでＡさんがいたとします。
その人はトピ主さんと同じく、とあるゲームが好きですが、バイクも好きだったりします。
ゲームのキャプチャ画を貼ることもあれば、バイクの写真を貼ることもあります。

さて、トピ主さんはAさんのバイク写真にもゲームの話題と同じように反応しているでしょうか？

これと同じことが、トピ主さんの周りのフォロワーさんの中で起こってることです。
とあるゲームが好きで交流を持った人たちなので、
当然、それ以外の趣味の部分は好みがそれぞれ違います。

電車好きな人、ドール好きな人、韓流ドラマ好きな人。色々います。
話題が合わなければ、当然反応も薄いです。

電車好きな人は、同じく電車が好きな人と交流をすれば、当然反応も増えます。
トピ主さんの一次創作も同様で、
オリキャラや創作漫画が好き、そういったものを描いてる人たちとも
積極的に交流を広げていけば良いんじゃないかと思います。

写真を撮るのが好きな人がいても、風景の写真と人物の写真と電車の写真ではベクトルが違います。
一次創作と二次創作も同じ「絵を描く」趣味ですが、結局中身が大きく違うので、
好みとしては別物だと考えた方が共通の友人は作りやすいと思います。