潘氏族人历经千百年潘姓始祖季孙公之墓。以国名为姓，出于姬姓。毕公高的小儿子季孙封邑在潘。春秋后国灭，其子孙不以姬为姓而以国名为胜，奉季孙为潘姓始祖 。魏孝文帝汉化改革时，改鲜卑破多罗氏为单姓潘 。 清康熙末年，台湾岸里大社（今台湾省台中市神岗）酋长阿穆归顺清廷，被赐姓为潘；光绪时，台湾高山族相率归化清廷，也被赐姓潘（这也就是台湾高山族人大多姓潘的重要原因）。