残疾人打人应当承担法律责任。如果造成轻伤就涉嫌故意伤害罪，应当判处三年以下有期徒刑；如果造成轻微伤进行行政处罚，行政拘留十五天以下。同时应当赔偿治疗费、误工费、交通费。《刑法》第二百三十四条规定，故意伤害他人身体的，处三年以下有期徒刑、拘役或者管制。犯前款罪，致人重伤的，处三年以上十年以下有期徒刑；致人死亡或者以特别残忍手段致人重伤造成严重残疾的，处十年以上有期徒刑、无期徒刑或者死刑。本法另有规定的，依照规定。、四级智障属于行为能力人，要负刑事责任但是可以从轻或减轻处罚。法律明文规定为犯罪行为的，依照法律定罪处刑，刑罚的轻重，应当与犯罪分子所犯罪行和承担的刑事责任相适应。《中华人民共和国刑法》第五条刑罚的轻重，应当与犯罪分子所犯罪行和承担的刑事责任相适应。