お話してみたい気持ちがあるのなら素直に挑戦してみるのをおすすめします。
ご心配されている点については
・擦り寄りと思う奴なんて性格ひん曲がってるので放っておけばいい。そもそも向こうから誘われてるなら擦り寄りも何もない
・初めから◯時までなら大丈夫、そこで切り上げる旨を伝えておく。
・苦手カプは当たり障りのない言葉で最初から断っておく。
等のことで解決するのではないでしょうか？

絵描きと字書きである前に人と人ですので他人からどう思われるかなどは気にしなくていいかと。
時間の制限はよく見ますのでお相手にマイナスの印象を与えたりはしないかと思います。
苦手カプは断っておかないと「AB好きな人ってCBも好きですよね！」みたいな話からABの通話なはずなのにCBの話題になってしまった私のようなケースにもなりかねません。

推しカプを人としゃべるのはとっても楽しいのでぜひ気軽に試してみてください…！

・字書き→絵描きへの擦り寄りと思われそう
そんなことは無いと思います！同じジャンルを共にしている以上絵描きかどうかなんて気にしたことないですよ。
・長時間に及びそう(切り上げられ無さそう)
これはあります。夜9時くらいから深夜の2時までやってた時は流石にだるかったです。しかも複数人いて自分だけ途中で抜けるとかだったらイヤですし…もしそれが大丈夫なら「明日仕事なので…」がベストですかね。引き止めようがないですし。自分だけ途中抜けが嫌なら最後まで付き合った方が吉です。
・絵描きさんの推しカプの１つに私の苦手カプがあり、話を上手くずらすのがしんどい
私は自分の知らない、苦手な話が出てきたときはひたすらスルーか「はぇ〜、へ〜」で乗り切ってました。
私が相手の地雷を踏んでしまった時に「まじで無理！それホント嫌い！」って言われた時はイラッとしたので、（自分から踏んでおいてなんですが…）軽ーく流すのが良いかと。
あともくりが活発であれば、多岐に続くとは思います。
昔もくりを始めた翌週、毎日決まった時間にインされて仕事かよ…と思ってしんどかったです。
それが心配であれば初めに、もくり初参加なのでちょっと様子だけ見にお邪魔しても良いですか？とかワンクッション入れても良いかと。初めてアピールしてたらみんな優しく迎え入れてくれましたよ。ご存知でしたらすみませんが、時間制限ありの匿名視聴機能もあります。（制限切れると勝手にインしちゃうのでご注意）
トピ主さんが良い創作ライフを送れますように！