潘姓源出有四：
1、出自芈姓，[mǐ ]为春秋时楚国公族潘崇之后，以祖名为氏。
2、出自姬姓，为周代周文王裔孙伯季之后，以邑名为氏。据《元和姓纂》所载，周文王第十五子毕公高让其子伯季食采于潘邑(今陕西省西安、咸阳一带)，其子孙遂以邑名为姓，称为潘氏。
3、出自姚姓，为上古舜帝之后，以国名为氏。据《中国姓氏》载，舜帝生于姚墟称姓姚，建都潘(今北京市延庆县东北)，后潘地移至今陕西省兴平北。商朝时，舜的后裔建潘子国，商末被周文王所灭，其子孙遂以国名为姓，称为潘氏。
4、出自他族改姓：① 据《魏书·官氏志》所载，北魏孝文帝汉化改革时，改鲜卑破多罗氏为单姓潘。
② 清康熙末年，台湾岸里大社(今台湾省台中市神岗)酋长阿穆归顺清廷，被赐姓为潘;光绪时，台湾高山族相率归化清廷，也被赐姓潘(这也就是台湾高山族人大多姓潘的重要原因)。
③ 其他一些少数民族如满、水、京、蒙、土家、彝、瑶、仫佬、回、壮、布依均有潘姓。
1、潘崇：春秋楚成王时太师，助楚穆王继位有功，被穆王封为太师，兼掌上环列之尹。
2、潘季驯：字时良，号印川，浙江省乌程（今吴兴）人，明代著名水利家。
3、潘尼：潘岳之侄，官至太常卿，在文学上与潘岳齐名，世称“两潘”，其诗注重词藻，多应酬赠答之作，明人辑有《潘太常集》。
4、潘岳：字安仁，荥阳中牟（今属河南省）人，西晋文学家、名臣。善缀辞令，长于铺陈，造句工整，充分体现了太康文学讲求形式美的倾向
