根据《增值税暂行条例实施细则》的规定，价外费用是指销售价格以外向购买方收取的各种性质的费用，例如手续费、补贴、基金、集资费、返还利润、奖励费、运输装卸费、代收款项、代垫款项等。这些费用无论纳税人的会计制度如何计算，均应并入销售额计算应纳税额。
因此，如果罚款收入是在合同履行过程中发生的，那么它属于价外费用，需要缴纳增值税。这是因为在合同履行过程中，卖方可能会因为违约或其他原因而被罚款，这些罚款应当被视为销售价格以外的费用，计入销售额中计算应纳税额。
然而，如果罚款收入与合同履行无关或在合同履行之前发生，那么就无需缴纳增值税。这是因为在这种情况下，罚款并不属于销售价格以外的费用，而是与合同履行无关的收入。因此，根据规定，不需要将其计入销售额中计算应纳税额。
总之，根据《增值税暂行条例实施细则》的规定，是否要缴纳增值税取决于罚款收入是否发生在合同履行过程中。如果是在合同履行过程中发生的，就属于价外费用，需要缴纳增值税；如果不是在合同履行过程中发生的，就无需缴纳增值税。