从前管仲（春秋时齐国名相）曾说：“一年之计，莫如树谷（培植五谷）；十年之计，莫如树木（培植树林）；终身之计，莫如树人（培养人才）。”礼部尚书马廷用学识渊博，诗文盖世，常以清、慎、勤、廉教育子孙。他家在百年之中，五世之内，培养出“父子四进士，祖孙五举人”。马廷用的长子马金字汝砺，在明宪宗成化二十年（1484年）中进士，四子马龠、五子马仝兄弟二人，在孝宗弘治十二年（1499年）双双考中进士。二十余年，父子四人都考中进士，为官勤政廉洁，爱民如子，皆是国家栋梁之材，一时传为佳话。当时，马廷用在朝做官，马金官至浙江布政使，史称“天下清廉第一”，惠政济民，民为祠祀。马龠曾为德安（今湖北安陆县）太守，官至参政（布政使属员），廉洁自守，惩治贪官污吏，不畏权势。据《湖广通志》记载：“马龠西充人，明正德间守德安，宽大厚重，不猎声誉，喜文学，重修郡志，政务简静，民以不扰。”马仝在正德年间，官至河南开封府知府，清政廉洁，民立庙祀之。马廷用致仕返乡后，将平生官俸积蓄，把故居修葺一新，宽敞壮美，富丽堂皇。其宅背靠紫岩山，面朝高阳山，左旁鱼凤山，右眺五马山，天然构成一幅“丹凤朝阳”的风水宝地。整个庭院呈长方形，座东向西，四周为青石浮雕围墙，西面有一道园门，两侧悬挂一联云：“父进士，子进士，父子四进士；兄翰林，弟翰林，兄弟两翰林。”正面是三间厅堂，两边是厢房，厅堂后面建有一座小巧玲珑的花园，四季有不谢之花，水榭亭阁，曲径通幽。花园侧面建有一座两楼一底的绣楼，传为马氏千金小姐的闺阁，为大家闺秀们咏诗与休闲的地方。马廷用还在鱼凤山麓修建了一座紫岩庙，三层楼宇，宛如宫阙。前面建有戏楼，后面建有高耸入云的飞凤楼，殿前悬挂烫金巨匾，“文昌殿”三字金光闪闪。大殿左右两侧为青石碑林，内刻诏书、文诰、悼文与马氏父子的诗词。庙中还建有藏书楼和钟楼，翘角飞檐，雕梁画栋，古木阴翳，金碧辉煌。设计之巧，工艺之精，气势宏伟，世所罕见。
明武宗正德十五年（1520年）秋，兵部尚书马廷用的长子马金，从浙江布政使致仕还乡，船至江西鄱阳湖，水盗李金钩带领十余党徒，驾了两只快艇，前后拦截。众贼手执钢刀，一哄而上，气势汹汹，杀气腾腾，船上众人见了，吓得魂不附体。马金上前说道：“各位壮士，下官马金致仕还乡，船上货物只管拿去，请勿伤及船上百姓。”李金钩等众撬开十余木箱，见里面全是书籍，没有半点金银，大失所望。李金钩说道：“久闻马布政清廉盖世，今日一见，果然名不虚传，令人敬佩。我平生劫的是贪官污吏之财，杀的是专横强暴之人，布政人多耗繁，无钱怎能还乡，愿赠金五百，略表敬意。”马金婉言谢绝，群盗羞愧而去。马金归家时，马廷用见儿子的行李甚多，疑心是他贪贿的金银。怒责家人打开箱箧查看，全是书籍，非常喜悦。后来马廷用父子逝世，葬于紫岩山麓，人称尚书墓与布政坟。
马廷用的后裔们也很兴旺发达，仕途文学皆声名远扬。长孙马晋明（马金的儿子）于明神宗万历十年（1582年）考中举人，初任司理（审判官），后任广西思恩知府。马晋明之子马云锦于明熹宗天启七年（1637年）中举，官至江西南城县令。马云锦的长子马士琼于清顺治十七年（1660年）中举，任东滕县知县；次子马士玠于康熙十一年（1672年）中举，任广东海康县知县；三子王士玙于康熙二十六年（1687年）中举，任浙江武康知县，时称“西充三凤”。百年间，马晋明祖孙三代五人中举，历明清两朝，为西充名门望族。