据衣氏族谱记载，先世相传为尚衣局官，故因衣赐姓。衣姓目前在山东栖霞市有一部分比较兴旺，有“先有衣马营，后有栖霞城”之说。另外辽宁庄河等地的衣姓也非多，据传是清朝一妇女带着几个儿子闯关东时期所发展繁衍起来。