Не могу постоять за себя

Я студент и мне 20 лет. Часто бывают ситуации когда надо проявить характер, поставить на место шутника или не доброжелателя, но за частую я отмалчиваюсь. При этом утишаю себя мыслю что эта ситауция не стоила того что бы выказывать некую жесткость или агресию. И так продолжается раз за разом. Физически я далеко не слабак и в случае необходимости мог бы дать отпор не другу, но психологически нет, какой тормоз внутри сидит! Я подозреваю что эти проблемы у возникли отчасти благодаря моему отцу. С самого детства он контролировал меня! Можно сказать в ежовых рукавицах держал. Я понимаю что он таким образом заботился обо мне, но перестарался, до сих пор он не воспринимает меня в серьез. Я постоянно настраиваю себя что могу постоять за себя в случае реальной необходимости, а когда дело до ходит до настоящего конфликта, начинаю боятся не понятно чего! Было не сколько случаев когда реально надо было применить физческую силу, но я не смог переосиить себя ( до сих пор ни разу не дрался) да были моменты когда меня уж ооочень сильно выводили из себя и я толкал, бил, но это все вспышками как бы афективно. А ведь мне уже 20 лет и я должен научится постоять за себя, свою семью и интересы! Что делать, не знаю!