高氏宗谱》记载，宋元时代，高氏家族的先祖一直居住在金陵（今南京）。明洪武十四年（1381年），17岁的楚王朱桢就藩武昌，吏部官员大用公作为楚王的护驾大臣入楚，从此在湖北安家落地，大用公就是高氏家族在湖北的一世祖。

　　《高氏宗谱》大用公栏记载：“公……先卜居蕲州东乡，后迁郡城南纪门外桃花岭之打船坊。葬桃花坞，有碑。” 大用公居住的桃花岭打船坊在武汉市汉阳区墨水湖一带，当年这里水网密布，湖汊众多，大用公时常为水患侵扰，于是移居焉厥，后来再迁至黄庙乡。

　　二世祖得二公有兄弟三人，即兄得一公，弟得三公。宗谱中记载得一公的生平、居住地及安葬地均不详，其后人在何方不得而知。得三公以武功赴京候选未归，其子三世祖绣府公继承家业，为避水患，从汉阳郡城南纪门外一路向西迁徙，于明正统年间迁往薛山堡易家咀，清初定居于龙王庙高家咀、周湾和小周湾，聚族而居，渐成村落。

　　三世祖文通公曾在京城锦衣卫里担任重要职务，离职后返回故乡，先后在汉阳桃花岭、洗马口、高公桥居住过，因嫌城市喧闹，乃迁至小奓山边的高家途(今蔡甸奓山友爱村)，历经数十年，再迁至小奓湖畔的高家畈。文通公在高家畈只是建有基屋，并没有举家迁往高家畈，当年那里三面环水，一片荒芜，人烟稀少，生活有诸多不便。

　　文通公长子、四世祖琰公年轻的时候是明朝的武进士，是领兵的武官。宗谱记载，琰公的顶头上司是杨胜二，两人均在卫所供职，杨胜二是汉阳小奓山杨家大湾人。明朝的卫所有都指挥使司、卫指挥所司、千户所、百户所，自卫指挥所以下，军官可以世袭。杨胜二年老时退出卫所，因无子继承其业，于是琰公顶替了杨胜二的职务。琰公年老时解甲归田，与夫人杨氏居住在杨家大湾，逝世后也安葬在这里。