Estas sobre complicando las cosas.
Según lo que dices, 3 cosas están claras:
1) No le has sido infiel a tu esposa
2) Amas a tu familia (esposa y bebes)
3) Es obvio que alguien esta metiendo mala leche entre ustedes.
Tu tienes todas las ventajas en esta situación, ya que no hay pruebas...