周文王第六子叔处的后代，因他在周初被封在霍（今山西霍州西南）而得姓，他也因此被称为霍叔。历史上，霍姓以太原（今属山西）等为郡望，著名人物有西汉名将霍去病、名臣霍光等。