远古部落首领伯益裔孙非子的后代，因他的子孙中有人被分封在裴乡（今山西闻喜裴城）而得姓。后来，裴姓又在河东（今山西运城）等地发展为望族，有晋代司空裴秀、唐代宰相裴度等代表人物。