Я думаю, что Вам нужно самой начать выполнять свои договорённости, например, не позволять ему "вымаливать" общение с сыном "хотя бы " днём, запретить ему нарушать договорённости - раз сказали, - значит сделали. Иначе он видит, что Вы ему разрешаете нарушать договорённости, прощаете ему, - значит Вы ему ещё оставляете надежду, что всегда такое будет продолжаться и нарушает их - наверное, он хочет, чтобы всё было "по-старому" или "по-егошнему".
Я думаю, что если Вы действительно решили положить этим (с мужем) отношениям конец или вывести их уважительные относительно друг друга, то Вы должны сами решительно соблюдать все Ваши заявления, например, если Вы сказали, что заберёте ключи - их нужно забрать и ни в окем случае не отступать назад в своих решениях!