По моему, …в Вашем вопросе есть уже 90% ответа по этой ситуации… а "привязанность" наверное вас немного сдерживает :( . Здесь кому то из Вас неповезло немного в жизни. Кому? - Вот тут, как раз, всё в Ваших руках :). Как говорила Юля Меньшова когда в рекламе стирального порошка - "Вы стираете, Вам и решать".
Расставьте приоритеты в отношении к Вашей собственной жизни. Попробуйте побыть недели 2-3 без этого "молодого" человека - и Вам всё станет ясно. Только будьте ЧЕСТНОЙ в первую очередь к себе.
Удачи!.