Kinderwens nieuw samengesteld gezin

Hoi iedereen, 

Ik ben ondertussen mama van een flinke peuter. Kort na de geboorte zijn ik en z'n papa (heel onverwachts) uiteen gegaan. We maakten een zeer moeilijke scheiding door, maar nu is er wel een goede verstandhouding. 
Ik heb al een tijdje een nieuwe partner (bijna 2jaar). Dit gaat heel goed. Hij is ook geweldig met mijn zoontje.
We hebben allebei nog een kinderwens. De laatste tijd voel ik het heel erg kriebelen.
Ik twijfel om ervoor te gaan. Ik ben bang dat het de huidige dynamiek zal veranderen. Dat mijn zoontje het niet zal snappen dat hij naar papa moet, maar de baby niet...
Heeft er iemand gelijkaardige ervaringen? Kan iemand me advies geven.
Bedankt!