消费者退货物流异常商家应当第一时间处理。

在退货物流异常时，商家可以先与快递公司联系核实退货状态。如果确认该退货商品在途或已签收，则可直接提醒消费者等待退款处理。如果确认该退货商品未发出或发出后长时间未收到，应当主动与消费者联系，进一步核实情况，并告知退款方式和时间。商家应当尽快解决消费者的问题，维护消费者的权益，提高消费者的满意度。