Рассмотрю вопрос с противоположной точки зрения - со стороны охранника, т.к. сам являюсь руководителем охранной организации.
Вы прибываете на охраняемый объект. Значит для прохода у Вас должен быть или постоянный пропуск сотрудника или как в Вашем случае - оформлен разовый пропуск для прохода.
У Вас он был?
Если Вы пытаетесь проникнуть на территорию объекта без пропуска, то он вправе Вас не пустить всеми дозволенными Законом о детективной и охранной деятельности (статья 16.1) способами, в том числе и с применением мер физического воздействия.
Но для того, чтобы понять, насколько были правомочны его действия, необходимо иметь полную картину произошедшего, в том числе знать систему организации охраны на объекте. Из Вашего вопроса это понять невозможно. Что касается употребления ненормативной лексики (только надо доказательно подтвердить, что она была и именно ненормативная), то по должностной инструкции охранник должен быть корректным и выдержанным в обращении с посетителями.
Что касается второй части Вашего "приключения", то опять-таки исходя из специфики охраняемого объекта охранник согласно должностной инструкции имеет право задерживать посетителя, если у него есть подозрения, что посетитель осуществляет несанкционированный вынос охраняемого имущества и в присутствии руководства охраны и представителей заказчика осуществлять досмотр личных вещей. Применение мер физического воздействия охранником, а так же спецсредств и оружия опять-таки регламентируются Законом о детективной и охранной деятельности.
Так что исходя из описанной Вами ситуации дать однозначный ответ, кто прав, кто виноват, не представляется возможным.
Лично я охранника могу понять, но не одобряю его действия. Но это лично мое мнение не как руководителя, а как простого человека.