潘（Pān）姓源出有四：
　　1、出自芈姓，[mǐ ]为春秋时楚国公族潘崇之后，以祖名为氏。据《通志·氏族略》所载，颛顼后裔陆终生有六子，第六子名季连，赐姓芈。周成王时，封其后裔熊绎在荆山建立荆国，公元前740年，荆君熊通自封为武王，他的儿子于公元前689年改国号为楚，称楚文王。据《姓氏寻源》和《潘氏家谱》及《史记·楚世家》所载，公族子弟潘崇助楚穆王继位有功，受封为太师，其后代子孙以祖名为姓，称为潘氏。从此，潘姓在楚国成为有势力的家族，潘姓因此而来。
　　2、出自姬姓，为周代周文王裔孙伯季之后，以邑名为氏。据《元和姓纂》所载，周文王第十五子毕公高让其子伯季食采于潘邑（今陕西省西安、咸阳一带），其子孙遂以邑名为姓，称为潘氏。
　　3、出自姚姓，为上古舜帝之后，以国名为氏。据《中国姓氏》载，舜帝生于姚墟称姓姚，建都潘（今北京市延庆县东北），后潘地移至今陕西省兴平北。商朝时，舜的后裔建潘子国，商末被周文王所灭，其子孙遂以国名为姓，称为潘氏。
　　 4、出自他族改姓：
　　① 据《魏书·官氏志》所载，北魏孝文帝汉化改革时，改鲜卑破多罗氏为单姓潘。
　　② 清康熙末年，台湾岸里大社（今台湾省台中市神岗）酋长阿穆归顺清廷，被赐姓为潘；光绪时，台湾高山族相率归化清廷，也被赐姓潘（这也就是台湾高山族人大多姓潘的重要原因）。
　　③ 其他一些少数民族如满、水、京、蒙、土家、彝、瑶、仫佬、回、壮、布依均有潘姓。
　　潘崇。楚成王时，潘姓中有名为潘崇者曾为太子商臣之老师，在楚成王预谋另立太子时，潘崇极力支持太子商臣，并成功地使之继位为楚穆王。潘崇因助商臣继位有功，被封为太师，楚穆王并且还把自己任太子时的财产全部赐给他。从此潘姓在楚国成为有势力的家族。后人念潘崇兴潘姓有功，便尊他为潘姓的得姓始祖。这种观点，其正确性可能是相当高的，因为古籍中出现的春秋时代的潘姓人氏，几乎都是楚国的人物。