自分の界隈はbioに壁打ち表記してなくてもフォロー数が0の人が何人かいますがどの人も4桁〜5桁フォロワーで人気がありそうな人ばかりです。
壁打ちをしているだけで悪口は言われないかな…と思います。人柄がまったく見えなければ遠巻きにされるかもしれないですが…画力関係なく素敵作品を黙々と投下されるなら問題ないかと。

壁打ちは高尚様、見下してる、お高くとまってると被害妄想甚だしい変な人はいますけど、大抵の人は特別な感情は無いと思います。 あと交流のために同人やってる人からしたら、なんでTwitterやってるの？とか思う人もいるみたいですね

壁打ちの方は、孤高の一匹狼といった印象である意味憧れます。悪口を言われるのは、おそらくお高く止まっていると妬まれたり、批判の多いツイート内容の方に限るのではないでしょうか？
攻撃的なツイートをせずにいれば、そんなに気にされることはないかと思います。

壁打ちアカウントの人柄に興味ないです。作品投稿マシーン的な感じで見てますし、そう見られたいのかなと思ってます。
というか壁打ちなら悪口言われようが関係なくないですか？目に入らないんだし