Что делать?
Смириться с тем, что люди будут не знать тебя. Делать о тебе выводы.
Не объяснять им свой путь. Действия и решения не декларировать тем, кто предубежден.
Стоит смириться с тем, что когда ты выйдешь из комнаты, где тебе не хочется остаться и закроешь дверь - продолжение беседы будет "а почему он ушел". И выводы будут не в твою пользу, ведь ты больше не живёшь так, как раньше.