1、出自姚姓，先祖为生于姚墟（今河南濮城南）的舜，建潘都（今北京延庆县东北），后迁陕西兴平北。商时，舜之后裔在潘地建潘国（今河北怀来、北京一带）。周文王灭潘国，亡国后的潘国人用国名作为姓氏。
2、出自姬姓。西周初年，周文王姬昌第十五子姬高被封在毕，建立毕国。毕公高封其子季孙于潘，附庸于毕国。其地在今陕西省北部，后迁河南固始，子孙以封邑命氏。或言春秋时，姬姓潘国被楚国吞并，亡国后的潘国人就有用国名作为姓氏的，从此改姓潘。
3、出自芈[mǐ]姓，是春秋时楚国公族的后代。见于家传者始祖为潘崇。潘崇官拜楚穆王太师。《通志·氏族略三》 ：“潘氏，芈姓，楚之公族，以字为氏。潘崇之先，未详其始，或言毕公高之子季孙食采于潘，谬矣。潘岳家风诗自可见。晋亦有潘父，恐自楚往也。汉有潘瑾，后汉有潘勉。”
4、出自北方鲜卑族。据《魏书·官氏志》所载，南北朝时，北魏有代北复姓「拔略罗氏」随魏孝文帝南迁洛阳后，定居中原，代为汉姓「潘」氏。
5、清康熙年间，台湾高山族相继归顺，被赐姓潘。 分别发源于南方和北方的两支潘氏，姓源虽然看起来有所不同，但认真推溯起来，根本都是黄帝轩辕氏的后代。
1、出自芈姓，[mǐ]为春秋时楚国公族潘崇之后，以祖名为氏。据《通志?氏族略》所载，颛顼后裔陆终生有六子，第六子名季连，赐姓芈。周成王时，封其后裔熊绎在荆山建立荆国，公元前740年，荆君熊通自封为武王，他的儿子于公元前689年改国号为楚，称楚文王。据《姓氏寻源》和《潘氏家谱》及《史记?楚世家》所载，公族子弟潘崇助楚穆王继位有功，受封为太师，其后代子孙以祖名为姓，称为潘氏。从此，潘姓在楚国成为有势力的家族，潘姓因此而来。
2、出自姬姓，为周代周文王裔孙伯季之后，以邑名为氏。据《元和姓纂》所载，周文王第十五子毕公高让其子伯季食采于潘邑（今陕西省西安、咸阳一带），其子孙遂以邑名为姓，称为潘氏。
3、出自姚姓，为上古舜帝之后，以国名为氏。据《中国姓氏》载，舜帝生于姚墟称姓姚，建都潘（今北京市延庆县东北），后潘地移至今陕西省兴平北。商朝时，舜的后裔建潘子国，商末被周文王所灭，其子孙遂以国名为姓，称为潘氏。
4、出自他族改姓：
①据《魏书?官氏志》所载，北魏孝文帝汉化改革时，改鲜卑破多罗氏为单姓潘。
②清康熙末年，台湾岸里大社（今台湾省台中市神岗）酋长阿穆归顺清廷，被赐姓为潘；光绪时，台湾高山族相率归化清廷，也被赐姓潘（这也就是台湾高山族人大多姓潘的重要原因）。
③其他一些少数民族如满、水、京、蒙、土家、彝、瑶、仫佬、回、壮、布依均有潘姓。
潘崇。楚成王时，潘姓中有名为潘崇者曾为太子商臣之老师，在楚成王预谋另立太子时，潘崇极力支持太子商臣，并成功地使之继位为楚穆王。潘崇因助商臣继位有功，被封为太师，楚穆王并且还把自己任太子时的财产全部赐给他。从此潘姓在楚国成为有势力的家族。后人念潘崇兴潘姓有功，便尊他为潘姓的得姓始祖。这种观点，其正确性可能是相当高的，因为古籍中出现的春秋时代的潘姓人氏，几乎都是楚国的人物。
