行政机关作出行政处罚决定决定后，如果想撤销行政处罚决定，应该向行政处罚相对人出具撤销行政处罚决定书。行政行为撤销的条件。一：行政行为合法要件缺损。合法的行政行为具备主体合法、内容合法、程序合法三要素，任何行政行为如缺损其中一个或一个以上要件，该行政行为就是可撤销的行政行为。二：行政行为不适当。不适当的行政行为也是可撤销的行政行为。所谓“不适当”，是指相应行政行为不合理、不公正、不符合现行、不合时宜、不符合有关善良风俗等情形。一、可以撤销行政处罚吗。可以撤销的。行政行为撤销的条件。1、行政行为合法要件缺损。合法的行政行为具备主体合法、内容合法、程序合法三要素，任何行政行为如缺损其中一个或一个以上要件，该行政行为就是可撤销的行政行为。