Графов
Никонов В.А. Что значили русские фамилии // Русская речь. 1974. № 2 , c. 103-107

"Фамилии другого семантического типа указывают не на предка, а на владельца: Князев, Княгинин, Графов. Сын князя тоже князь, его не могли называть Князевым; Князев — крепостной, принадлежащий князю"

 с. 105
этимология