根据《行政处罚法》的规定，行政机关及其执法人员当场收缴罚款的，必须向当事人出具国务院财政部门或省、自治区、直辖市财政部门统一制发的罚款收据，不出具财政部门统一制发的罚款收缴的，当事人有权拒绝缴纳罚款。