明成祖朱棣奪得皇位，第一功臣是僧人道衍。道衍原本姓姚，十四歲出家，胸懷大志，有學問，詩和書法都很不錯。
他曾寫過一首《京口覽古》：“樵櫓年來戰血幹，煙花猶自半凋殘。五州山近朝雲亂，萬歲樓空夜月寒。江水無潮通鐵甕，野田有路到金壇。蕭樑事業今何在？北固青青眼倦看”。
明眼人一眼就能看出他心中不凡的抱負。
朱棣登基之後，要報答道衍，想讓他還俗，在永樂二年任命他為資善大夫、太子少師，恢復他的俗姓，賜名廣孝，又挑選兩個宮女送給他。但姚廣孝不為所動，朱棣只好把二人召回，不再勉強他。
《王文恪公筆記》記載，身在紅塵之外的姚廣孝收養過一個養子。有一年他去蘇州，看見閶門附近一家酒店的招牌很特別，字很漂亮。姚廣孝自己的書法很好，對別人的好字特別敏感，就向店家打聽，原來這些字是一個少年寫的。
姚廣孝把少年叫過來，上下打量。他精通相術，告訴少年說：“你有富貴之相，你家裡有什麼人？願不願意做我的兒子？”
少年當然願意，說他家裡只有老母親和妹妹，請少師多關照。然後少年回家辭別了母親。很奇怪的是，如此一來，姚廣孝對少年的評價打了折扣，告訴他說：“可惜了，你只能做到四品官，壽命也不太長。”
朱棣聽說姚廣孝收了一個養子，替他高興，給少年起了個名字叫姚繼，並讓他進宮，陪伴皇太子在文華殿讀書。這是不同尋常的一份榮耀，皇太子是未來的皇帝，等他繼位，必定會提拔自己的同學。
永樂十六年，年邁的姚廣孝患病，朱棣親自前來探視。姚廣孝死後，姚繼向朱棣通報消息，朱棣問他：你父親臨死時說了什麼？
關鍵時刻，姚繼暴露出他的小家子氣，很雞賊地說：“父親請陛下厚恤我們一家。”
朱棣立刻識破他在撒謊，大怒：“汝父平生與吾語，何嘗及私家？”
朱棣與姚廣孝交往多年，深知姚廣孝的稟性，他早已經拋卻了俗世的親情，曾經親口對朱棣說：“為僧者，與家絕。”
他根本不會為了一個養子有求於皇帝，所以朱棣斷定姚繼在說謊，氣得把姚繼趕走。他追封姚廣孝為榮國公，親筆為他撰寫了神道碑。明朝得到王公的大多是武將，比較特殊的兩個人，一個是韓國公李善長，屬於文臣。另一個就是榮國公姚廣孝，屬於僧人。
朱棣又派人把姚廣孝的弟弟和侄子接來，給予豐厚的賞賜。但二人沒有文化，生性愚鈍，實在難以重用，只好又讓他們回老家去。
明仁宗繼位之後，讓姚廣孝配享太廟，又想起當年陪自己讀書的姚繼，給他一個太常少卿的職位，正四品。但姚繼很快死掉，時年四十二歲。當年姚廣孝的判斷相當精準。
《明史》的記載稍有不同，朱棣給了姚繼一個尚寶少卿的官銜，但沒有說明是在姚廣孝死前還是死後。
尚寶少卿只有從五品，顯然，朱棣根本不認可這位榮國公的養子。
於左 撰