Meu casamento

A ex do meu marido quer voltar pra ele, eles tem um filho de 2 meses. quando me casei ele tinha alguns meses de separado da ex e ela estava grávida. foi ela quem terminou com ele, por diversas vezes ele tentou reatar com ela, mas ela não quis, agora que ele está comigo ( tem 5 meses que estamos morando juntos) ela quer voltar e está usando o filho para fazer chantagem emocional, pois eu tenho um filho de 3 anos e chama ele de pai, ela fala que meu marido em vez de criar o filho dele está criando o meu. Ele tenta me passar segurança, diz que me ama e que não vai me deixar pra voltar pra ela, que gostaria sim de criar o filho dele, mas não tem como se não gosta mais da mãe do filho e hoje está casado comigo. Mas toda vez que ele vai ver o filho ela dá em cima dele, ela não deixa ele trazer o menino e o unico jeito dele ver o filho é indo na casa dela. Eu sei que ele pensa muito no filho por isso fico insegura e estou me sentindo muito mal com essa situação, tenho medo dele se separar de mim por causa do filho, e me sinto muito triste, pois o amo, e me sinto mal também em achar que estou atrapalhando a vida del.
Antes de nos relacionarmos ele namorou essa mãe do filho dele e ela terminou com ele pra voltar pra um ex dela, depois não deu certo e ela correu atras do meu marido e eles voltaram logo ela engravidou e terminou novamente com ele, agora que ele está comigo ela quer voltar pra ele novamente alegando que tudo foi culpa da gravidez que ela enjoou dele por causa da gravidez, mas que quer criar o filho dela com o pai.
Ele disse a ela que não vai se separar de mim pois me ama, e não vai acabar o casamento dele, que está muito bom, pra aventurar com ela. Só sei que esta situação tá mexendo muito comigo e mesmo ele me dizendo que me ama e que não quer se separar eu estou muito triste e sem paz. sei que ele gostaria muito de criar o filho dele pois ele foi criado sem pai e sabe das dificuldades. mas não quero me separar, o amo e meu casamento é muito importante pra mim. Queria um conselho.