ツイート休んでると、TLに優先表示されなくなるのが原因です。
正確には、ツイートする側の仕様じゃなくて見る側の仕様なんですが…。

例えば
　AさんがBさんのツイートをいいねやRTやリプする
すると
　AさんのTLにはBさんのツイートが優先して表示されるようになる
ところが
　Bさんがしばらくツイートをしていないと
　AさんのTLにはBさんのツイートが表示されない
その間に
　AさんはCさんDさんEさんのツイートにアクションを行うと
　CさんDさんEさんのツイート表示の優先度が上がる
そうこうしてる間に
　Bさんの優先度よりもCさんDさんEさんの優先度が上がる
久しぶりにBさんがツイートしても
　もうAさんのTLでは優先表示されなくなっており
　代わりにCさんDさんEさんのツイートがたくさん表示されてる

こういうことがトピ主さんの2万人のフォロワーの大半で起こってて
結果的にインプレッションの低下に繋がってると考えられます。
ちなみに、Bさんがおやすみしてる間もAさんのツイートをRTしてたり
「元気にしてますか」みたいにリプ送ってる人は、Bさんツイートの表示優先度は落ちない模様です。
あと、そもそもTLを時系列順で見てる人もそれは起こりにくいんですが、
今はトップツイート方式で見てる人も多いので、それが「半減」の理由かと思います。

優先度が一番上がるのはリプ＞RT＞いいねの順だと体感してます。
なので、感想リプをたくさん貰うような人は久しぶりでもインプレッションが下がりにくい印象です。
また「久しぶりです」とか「誕生日です」みたいな感じで定期的にリプを貰いやすくするのもコツかなと思ってます。
誰かがリプをしてると、それがTLに表示されること、あると思います。

例えばAさんはDさんとよくリプをしていたとして、
Bさんが「久しぶり」のツイートをしたときに
DさんがBさんに「元気してた？」とリプを送ったとします。
するとAさんのTLにも

Bさん「久しぶり」
└Dさん「元気してた？」

みたいに表示されたりします。
すると、AさんでもBさんのツイートに気がついたりします。

こんな感じで、リプを貰いやすいツイートを心がけると、インプレッションの回復は早いかな、と思います。
イメージ的には、インプレッションが半減＝フォロワー半減とほとんど同じだな、という印象です。
なので、フォローボタンを押して貰うわけではないが、
減ったフォロワーを取り戻すくらいの勢いじゃないとインプレッションの回復は難しいな、という考えです。