Думаю, тут и обратное может быть.
Начал человек раздражать или предал, и вот начинаем искать недостатки в нем сразу, и запах становится неприятным, как тела, так и пота, парфюма, любимого его шампуня и тд.
Получается, что симпатия стала резко слабеть, и на этом фоне и запахи стали раздражителями.
Нравится нам человек- мы слышим на улице его духи, или вдыхаем его любимый чай, и нам приятно.
Не нравится и ужасно не нравится - и мы стараемся не дышать "его" духами с другого человека, а свой любимый чай, который любит и "тот", все, не пьем!
Потому что воспоминания негативные связаны с запахами, как и позитивные.
Но сказать, что запах ушел из любимых, и человек стал не тем для нас... Такое, думаю, возможно в случае, когда человек заболел и стал пахнуть неприятно, и мы подсознательно от больного отгораживаемся(ведь потомство природа все-таки хочет всегда здоровое, и нам то же заложила), или человек начал такими средствами пользоваться, от запаха которых только убежать.