Возможно что-то есть в Вашем внешнем виде или поведении, что может отталкивать. Правда не расстраивайтесь сильно, поскольку в истории человечества ещё не было человека, который нравился бы всем!
Попробуйте поговорить с теми, кто готов идти с Вами на контакт, на эту тему. Может быть они что-то скажут и Вы поймёте в чём Ваши не недостатки, а, с большей вероятностью, ошибки. При этом, настраивайте себя на благожелательное отношение к этим людям, иначе полезный разговор не состоится. Да и в целом, попробуйте, встречаясь с людьми, относиться к ним более благожелательно - сделайте первые шаги им навстречу. Со временем это должно дать результат.
А ещё попробуйте поискать научно-популярные (не научные!)книги по психологии, в которых рассматриваются такие как у Вас проблемы: самооценка, саморазвитие, взаимодействие с другими людьми и т.д.
Если для Вас это приемлемо, можно пообщаться со священником. Обычно эти люди несут доброту и могут, искренне сочувствуя Вам, рассказать о Ваших ошибках так, каковы они есть.
И вообще, старайтесь больше общаться с людьми, любить их и жалеть. Я понимаю, что, особенно сейчас, это очень тяжело. Но у Вас со временем получиться и Вы от этого только выиграете.