主要な登場人物の数はある程度絞る必要がありますが、主要で無い登場人物の数はあまり気にする必要は無いと思います。
どこまでが主要で、どこからが主要で無いかのボーダーラインは各人の感性に依存しますが、「物語中で重要な役割がある」「登場回数が多い」などが目安になるでしょう。
あるいは、「読者にアピールしたいキャラクター」と考えても良いか。
その章にしか登場しないキャラとなるととりあえず登場回数は限られるわけです。あとは物語の中での役割次第ではありますが、主要で無い可能性が高いですね。