我在工地干活吸烟被安全员拍到照片了，今天去结工资不做了，班组长说，上次抽烟被罚款五千元，如果要走的话就要扣除五千元的罚款，请我我该怎么办

用人单位是没有权利进行罚款处罚的，但可以对其违反工厂规定的行为进行其他处罚。 根据法律依据：《中华人民共和国劳动法》第九十一条用人单位有下列侵害劳动者合法权益情形之一的，由劳动行政部门责令支付劳动者的工资报酬、经济补偿，并可以责令支付赔偿金： （一）克扣或者无故拖欠劳动者工资的； （二）拒不支付劳动者延长工作时间工资报酬的； （三）低于当地最低工资标准支付劳动者工资的； （四）解除劳动合同后，未依照本法规定给予劳动者经济补偿的。 扩展资料： 《工资支付暂行规定》第十五条用人单位不得克扣劳动者工资。有下列情况之一的，用人单位可以代扣劳动者工资： （一）用人单位代扣代缴的个人所得税； （二）用人单位代扣代缴的应由劳动者个人负担的各项社会保险费用； （三）法院判决、裁定中要求代扣的抚养费、赡养费； （四）法律、法规规定可以从劳动者工资中扣除的其他费用。 第十六条因劳动者本人原因给用人单位造成经济损失的，用人单位可按照劳动合同的约定要求其赔偿经济损失。经济损失的赔偿，可从劳动者本人的工资中扣除。但每月扣除的部分不得超过劳动者当月工资的20%。 若扣除后的剩余工资部分低于当地月最低工资标准，则按最低工资标准支付。 参考资料来源： 中国人大网——中华人民共和国劳动法