法律分析：一、进行行政处罚有哪些机关
(一)具有法定行政处罚权的行政机关
具有法定行政处罚权的行政机关主要是依法履行外部行政管理职能，依法得到明确授权，代表国家在某一领域内行使行政管理权限的行政机关。包括各级人民政府以及公安、工商、税务、土地、审计、卫生等部门。
(二)法律、法规授权的具有管理公共事务职能的组织
工商所、税务所、公安派出所等行政机关的派出机构依相应法律、法规享有一定的行政处罚权，他们必须在授权法规定的行政处罚的种类、幅度范围内实施行政处罚。超过授权法规定的处罚种类、幅度、数额的限制，该行政处罚无效。如《税收征收管理法》第四十九条规定，税务所可对个体工商户及未取得营业执照而从事经营的单位、个人实施罚款数额在一千元以下的行政处罚。
(三)受行政机关委托行使一定行政处罚权的受托组织
根据行政管理的实际的需要，行政机关依照法律、法规、规章的规定，可以在其法定权限内符合法定条件的组织实施行政处罚，如《治安管理处罚法》规定在农村没有公安派出所的地方，对违反治安管理行为处以警告、五十元以下罚款的，可以由公安机关委托乡(镇)人民政府裁决。
二、行政处罚权执行遵循原则
行政处罚的执行应当遵守下列原则：
(一)当事人自觉履行原则;
(二)行政复议和行政诉讼期间，行政处罚决定不停止执行原则;
(三)作出罚款决定的行政机关应当与收缴罚款的机构分离;但是，依照行政处罚法的规定可以当场收缴罚款的除外。
当事人逾期不履行行政处罚决定的，作出行政处罚决定的行政机关可以采取加处罚款、拍卖查封或扣押的财物、划拨冻结的存款、申请人民法院执行等措施。
行政处罚是以对违法行为人的惩戒为目的，而不是以实现义务为目的。这一点将它与行政强制执行区别开来。行政强制执行的目的在于促使义务人履行义务。行政处罚的适用主体是行政机关或法律、法规授权的组织。这一点使它与刑罚区别开来。刑罚的适用主体是人民法院。
法律依据：《行政处罚法》
第十五条行政处罚由具有行政处罚权的行政机关在法定职权范围内实施。
第十六条国务院或者经国务院授权的省、自治区、直辖市人民政府可以决定一个行政机关行使有关行政机关的行政处罚权，但限制人身自由的行政处罚权只能由公安机关行使。
第十七条法律、法规授权的具有管理公共事务职能的组织可以在法定授权范围内实施行政处罚。
第十八条行政机关依照法律、法规或者规章的规定，可以在其法定权限内委托符合本法第十九条规定条件的组织实施行政处罚。行政机关不得委托其他组织或者个人实施行政处罚。
委托行政机关对受委托的组织实施行政处罚的行为应当负责监督，并对该行为的后果承担法律责任。
受委托组织在委托范围内，以委托行政机关名义实施行政处罚；不得再委托其他任何组织或者个人实施行政处罚。
第十九条受委托组织必须符合以下条件:
(一)依法成立的管理公共事务的事业组织；
(二)具有熟悉有关法律、法规、规章和业务的工作人员；
(三)对违法行为需要进行技术检查或者技术鉴定的，应当有条件组织进行相应的技术检查或者技术鉴定。
