潘姓源于周文王之子毕公高后裔，封于潘邑（今陕西北部），以地名为氏。三国时有著名美男子潘安（潘岳），成语"貌若潘安"即出于此。近代潘汉年是著名情报工作者。