行政机关做出行政行为后不可以撤回或者但是可以变更
根据《中华人民共和国行政处罚法》
第二十七条　当事人有下列情形之一的,应当依法从轻或者减轻行政处罚:
(一)主动消除或者减轻违法行为危害后果的;
(二)受他人胁迫有违法行为的;
(三)配合行政机关查处违法行为有立功表现的;
(四)其他依法从轻或者减轻行政处罚的。
违法行为轻微并及时纠正,没有造成危害后果的,不予行政处罚。
第三十五条　当事人对当场作出的行政处罚决定不服的,可以依法申请行政复议或者提起行政诉讼。
第四十四条　行政处罚决定依法作出后,当事人应当在行政处罚决定的期限内,予以履行。
第四十五条　当事人对行政处罚决定不服申请行政复议或者提起行政诉讼的,行政处罚不停止执行,法律另有规定的除外
扩展资料
行政机关依照本法第三十八条的规定给予行政处罚,应当制作行政处罚决定书。行政处罚决定书应当载明下列事项:
(一)当事人的姓名或者名称、地址;
(二)违反法律、法规或者规章的事实和证据;
(三)行政处罚的种类和依据;
(四)行政处罚的履行方式和期限;
(五)不服行政处罚决定,申请行政复议或者提起行政诉讼的途径和期限;
(六)作出行政处罚决定的行政机关名称和作出决定的日期。
行政处罚决定书必须盖有作出行政处罚决定的行政机关的印章。
参考资料来源
国家统计局-中华人民共和国行政处罚法