Первый вариант. Изменой по отношению к жене, нет, не считается. Потому что пресловутая женщина, о которой вопрос, не является любовницей. Почему? Слово "любовница", образовано от слова "любовь", а точнее физического взаимодействия между любовниками или точнее заниматься любовью, заниматься сексом, они переспали вместе, занимались интимом, назовите как хотите, но они не любовники и никогда ими не были. Даже невинные поцелуи и объятия не считаются изменой. Мысли, а что мысли? Они не материальны. Значит возникает противоречие. Эти люди не любовники и изменой не считается.
Второй вариант. Изменяет ли свободный мужчина со свободной женщиной или замужней, если их считает окружения любовниками? Он с ней даже не спит, как его можно обвинить, что он изменяет своей "любовнице", если она таковой не является, и не имеет на него никаких ни моральных прав, ни материальных. Они же не женаты. Она ему просто подруга. Может её это тревожит, и в своих мыслях ей не хочется, чтобы её друг занимался любовью на стороне. Но повторюсь, мысли не материальны, значит это не имеет значения. Выходит он не изменяет своей подруге, которую окружение считает "любовницей".
Есть ещё и другие варианты относящиеся к моно отношениям, но я их не рассматриваю. А значит мой вывод, что это не считается изменой