Держать или отпустить

Живу со своим молодым человеком 4 года. Разница в возрасте 15 лет. Он в разводе и имеет 2 детей. Но сейчас не об этом. Он у меня, в принципе, человек достаточно скромный и стеснительный. Как то зашёл у нас разговор о том, что в его жизни слишком рано началась семейная жизнь и никакого общения и разнообразия с прекрасным полом у него не было. Я ему доверяю и поэтому разрешила общаться с девушками в соцсетях. Я даже не представляла, что всё может зайти так далеко. То, что он не умеет общаться с девушками из-за отсутствия практики и скромности - в какой то мере давало мне уверенность, что дальше чем переписка дело не пойдет. Но всё как то вышло из- под контроля. Он начал общаться сразу с несколькими барышнями, затем дал им свой номер телефона, потом начал предлагать им сходить на свидание....и всё больше и больше углубляясь в это общение. Затем он предложил мне перевести наши отношения в свободные и просил с ответом хорошо определиться и подумать. Естественно мой ответ был крайне отрицательный. После этого он сказал мне что устал от меня( втайне продолжая переписку) и ему нужна свобода. Так же было сказано, что ему теперь захотелось "сладенького" и он будет дальше вести переписку, встречаться и заниматься сексом. дело в том, что лично поговорить нам так и не удалось, поскольку я сейчас в отъезде. Но после вчерашнего разговора по телефону( я сказала, что мне его не хватает) он сказал, что я могу строить планы на наши дальнейшие отношения, но только с условием того, что он всё же не перестанет вести общение в соцсетях. Не понятна мне мужская логика- то свободы хочу, то ты мне нужна, то ещё что-нибудь. Сама понимаю, что с отношениями уже большие проблемы, и в идеале, наверное, не стоит допускать такого издевательства над собой и разойтись. А с другой стороны- я же люблю его, и 4 года совместной жизни немалый срок, чтобы так просто отпустить его. я в отчаянии( Подскажите, как быть.