这上句:
遍身罗衣者是说混身上下都穿得很体面,都是穿着绫罗绸缎的人,一定是富贵人。
下句:
不是养蚕人是说穿着这么豪华富贵的人一定不是养蚕的受苦受累的劳动者。
整句话的意思是说在过去,真正的劳动者是享受不起自己的劳动成果的。