限制人身自由的行政处罚只能由公安机关行使。