Ну, начнем с того, что не всякий переход в неположенном месте запрещен. Во-первых, есть слепые пешеходы. Их (по сигналу поднятой белой трости) полагается пропускать везде... другой вопрос, что эта ситуация крайне редка, ибо всё же ненормальна. Полностью слепой человек не должен ходить без сопровождения. Во-вторых, пешеход вправе перейти вне перехода, если он не создает помех. Иными словами, на зебре автомобили пропускают пешеходов, а вне зебры пешеходы пропускают автомобили.
А вот создавать помехи (заставлять резко тормозить, выворачивать руль) пешеходы вне зебры не вправе. Формально сотрудники ГАИ могут их за это оштрафовать. Фактически это большая редкость - если водитель обязан иметь и предъявлять водительское удостоверение и его личность по нему очевидна, то пешеход не обязан иметь при себе паспорт. Его могут задержать до трех часов для установления личности, но обычно не связываются и отпускают.
Применять к пешеходу физическое насилие Вы действительно не вправе. А вот за сбитого не на зебре пешехода, если сами не нарушали ПДД, уголовной ответственности Вы не понесете... но да, ситуация для Вас всё равно крайне неприятна. Да и специально давить Вы не будете.
Остается в наше время инфотехнологий одно... иметь видеорегистратор и выкладывать кадры наиболее оборзевших нарушителей в интернет. Нарушения закона здесь нет, так как Вы всегда можете сказать, что выложили нарушение, а не нарушителя. Возможно, хотя бы такая "известность" заставит нарушителей хоть немного думать головой.