一般情况下，试衣服时扣子掉了是不需要赔偿的。

但是，具体情况具体分析。如果扣子是由于试穿者的不当行为而脱落，例如用力拉扯、故意破坏等，则可能需要赔偿。另外，如果扣子是由于衣服本身质量问题而脱落，则不需要赔偿。消费者在试穿衣服时应注意爱护衣物，避免不当行为导致衣物损坏。如果发现衣服有质量问题，应及时告知商家，并要求更换或退货。