杜少卿有子杜穰，字子饶，东汉时任谏议大夫。

穰之子杜敦，字仲信，东汉时任西河郡(治所在今内蒙古伊克昭盟东境，后移于今山西离石县)太守，政绩优异，杜姓人就有移人者，匈奴亦有的慕名改姓杜。次子杜笃，文学家；杜业之孙杜操，字伯度。

杜敦有子杜邦，字召伯，东汉时任中散大夫；杜笃有子杜硕，为大商人。

杜邦有三个儿子：长子杜宾、二子杜宏、少子杜繁。

杜宾有两个儿子：杜翕、杜崇。

杜翕有子杜契，字广平，三国时期任吴国谋士，后专心学道教，隐居于蜀(今四川)，家人亦居蜀；杜崇有子杜畿。杜畿有三个儿子：杜恕、杜理及杜宽。