辞書からの引用は可能だと思います。トピ主さんの「論文や学校のレポートではないので…」のくだりはよく理解ができなかったのですが、一般的に論文、レポートに限らず、出典を明記すれば引用は成立すると思います。（https://shiraiwa.sakura.ne.jp/zemi/zemi-inyou.html）
さすがに同人誌の文章中で「『広辞苑』には～」とは書けないと思いますので、最後のあとがきなどで「p.〇のこの文章は『広辞苑』第◇版 p.△から引用いたしました」と表記すれば十分丁寧ではないでしょうか。

また、エピグラフのようにお使いになるのであれば、様式が大体決まっておりますので、調べてみると良いのではないかと思います。どうかトピ主さんの本が素敵なものになりますように。