Mein ehrlicher Gedanke bei deiner Geschichte: Lass es.
Du bist zu jung, um dir einen solchen Rattenschwanz an Problemen ans Bein zu binden.
Wenn du schon schreibst, dass du den Gedanken nicht erträgst, dass du ihn teilen musst, steht dir im Grunde eine Zukunft bevor, in der du nie richtig zufrieden sein kannst.
Deine Grundeinstellung passt nicht für einen Partner mit Kindern. Sowas kann nicht jeder (ich hätte da auch große Schwierigkeiten) und wenn bei dir da dermaßen negative Gefühle aufkommen, müssen die Alarmglocken schellen.
Ich weiß es ist hart, aber Liebe allein reicht nicht immer - auch die Umstände müssen passen, ansonsten wird die Liebe unter den Umständen mit der Zeit zerbrechen.
Die Kinder werden immer da sein. Sie werden Wochenenden und Ferien mit ihrem Vater verbringen wollen. Du wirst ihn nie für dich allein haben und seine Urlaubtage werden für Schulfeste, Kindergeburtstage, Familienurlaub etc. drauf gehen.