物語に関わることが少ないキャラは、プロの作品とかでも結構登場します。
ですので結論だけ言えば、そういったキャラを出す事に問題はありません。
とはいえ、何も考えずにキャラを出しまくって良い訳じゃないですよ。登場人物が多いほど、読者は彼らを覚えづらくなりますから。
何かしらの方法によって対策をとった場合のみ、「キャラがある程度多くても問題はない」と言えます。
その中で特に例をあげるとするならば、

・そのキャラが「登場人物」として成り立っているか
・そのキャラは覚えてもらえるのか

この2つ辺りを意識する事ですかね。

前者は、要するに「本当に登場すべきか？」という事。
まず、キャラには役割が必要です。
でもその役割が無くたって、物語は変わらず動いていくかもしれません。そういった可能性を考慮しながら、必要なキャラと不要なキャラを分けましょう。
また、役割を果たすためだけに存在しているようなキャラ(作者の操り人形となっているキャラ)は、読者に違和感を与えます。そういったキャラを見極めることも重要です。

後者は、「キャラ個人の個性、魅力」を考えるというもの。
「キャラが多くて覚えづらくなる」というのは、脇役ならともかく主要人物にとって致命傷。
それを改善するために、覚えて欲しいキャラには「強い個性、魅力」を与えるようにしましょう。
インパクトが強いキャラは覚えてもらいやすく、キャラの量による問題点を、多少なりともカバーできるはずです。

もちろん、上記の方法が全てという訳じゃありません。
ただ、これらの方法を簡単にまとめると、「作品として都合が良くなるよう調節する」、そして「人に読んでもらう上で都合が良くなるよう調節する」という事。
作品を作って読者へ提供するのがラノベなんですから、まずはそこを意識することが大切です。
こちらでは細かいキャラの設定まで把握できないので、一概にアリかナシかは言えませんが、「作品」、「人に読んでもらうもの」として最も都合の良いものにするべきだろう、というのが僕の考えです。