No es tan difícil como suena. Cuando lo veo, por lo general, solo se contará la historia de un personaje, por lo que está contenida en una parte. Por lo general, veo que el libro está limitado en su mayoría en tercera y que cambiará a primera persona para un personaje. Parece que estás haciendo lo contrario, lo que debería ser interesante. Los lectores lo disfrutan porque cambia las cosas. Sin embargo, hay una buena respuesta sobre cómo podría evitarlo al presentar un personaje o hacer que un personaje relacione lo que sucedió con el personaje principal.
No lo evitaría porque crees que es una regla o una guía porque no lo es. James Patterson lo hace en la mayoría de sus novelas y descubre que funciona. Cualquier escritor que te diga que es una regla es ser rígido. Los mejores libros intentan hacer cosas que son difíciles de lograr. Eso es parte de la diversión. Buena suerte.