Желательно переехать.
У меня был такой опыт, это очень травмирует психику окружающих, расшатывает нервную систему. Я так пять лет мучалась, спасало только то, что я знала, что через пять лет я смогу уехать, что это не навсегда. И какое облегчение испытываешь, когда пропадает этот стресс. Самое интересное, что если нет постоянного контакта с этим человеком, а лишь редкие визиты, то отношения вполне нормальные.
Если нет возможности переехать в данный момент, нужно изучить этого человека и приспособиться к взаимодействию с ним. Если он кричит на вас, покричите в ответ, посмотрите на реакцию. Кто-то притихнет, кто-то распалиться еще сильнее. Проверьте, как реагирует на полный игнор, отказ от общения. Попробуйте в ответ на негативные выпады продемонстрировать положительную реакцию, то есть ответить доброжелательно на злобное нападение (не физическое, разумеется). Если вас принуждают выполнять что-либо в грубой агрессивной манере, желательно отказаться либо вообще (если дело необязательное), либо пояснить, что при постановке просьбы в форме приказа вы ее выполнять не будете, объясните, что если попросить "по-человечески", то вы поможете.
Если же этот человек может физически вам навредить, ищите любые способы избавиться от такого соседства, постарайтесь переехать или переселить этого человека.
Удачи вам, сил и терпения.