Быть умнее и уступить или отступить, не зная, в чем конкретно конфликт, сложно сказать.
Не стесняться это сделать. Громко кричим? Хорошо, отойдем. Косо смотрим? Хорошо, не будем и т.д. Попытаться согласиться и ретироваться. Пусть это будет выглядеть бегством, хуже будет, если начнется драка, например. Почву для дальнейшего усугубления не давать, масла в огонь не подливать. Особенно, если силы не в вашу пользу. Сами понимаете, полиция за 15 минут не доберется.
Где то надавить "на жалость", мол, давайте, ребята, при детях ругаться не будем.
Но есть люди, которые конфликта ищут, скажем так: кулаки чешутся. С такими сложно, поэтому не дать им повода перейти к действиям сложно, но можно. Не получиться: только грубая сила.