明朝时南京有十三座城门，其中南门称为正阳门，也就是聚宝门（今光华门）。正阳门是明朝时南京的正门，位于御道街最南端，建筑特点为瓮城的复合型瓮城，它对城内外都有防御效果，这在古代中国城门建造史上独一无二。

正阳门之所以称为聚宝门，据说这是沈万三修筑的，他把聚宝盆放在城门下。除了修城门，沈万三有帮助朱元璋修建了城墙。朱元璋定都南京后，为使京城固若金汤，下令修建坚固的城墙。修城墙是需要大量银子的，可沈万三负责修筑的城墙，竟然提前三天就完工，而且修筑的质量又非常好，这让朱元璋很是郁闷。

在庆功宴会上，朱元璋举着酒杯对沈万三说道，“古有白衣天子，号曰素封，这就是说你啊！”表明上是称赞夸奖，实则是杀机显露，可惜沈万三没听出来朱元璋的话中话。沈万三修完城墙、城门后，还不过瘾。

沈万三主动提出为朱元璋犒赏三军，朱元璋怒了，“朕有军百万，汝能遍及之乎？”沈万三直接回答，“愿每军犒金一两。”朱元璋却说，“此虽汝好意，然朕不须汝也。”不论这段对话是否是真的历史，朱元璋最终是将沈万三抄了家，并将其流放云南，让他至死没能回到故乡。

其实，早在朱元璋打下江浙一带后，沈万三最先捐出粮食一万石、金银5000两，“太祖军食，多取资焉”。早在沈万三巅峰时期，他的弟弟沈万四就已经看到了危机，还曾写了一首诗来劝说哥哥低调做人，“锦衣玉食非为福，檀板金樽亦可休。何事百年长久计，瓦罐载酒木棉花。”沈万三被发配后，“瘦死的骆驼比马大”，家族依然比较兴旺。

随着时间的推移，尤其是沈万三两个孙子沈至、沈庄接连入狱，沈家开始一蹶不振。至于入狱原因，一说是沈家逃避赋税，一说是沈家跟“胡党”牵连。与此同时，沈万三女婿陆中和被扣上了“胡党”的帽子，落了个满门抄斩的下场。

事情还没有结束，由于“蓝党”案的牵连，沈家再次遭到了致命一击。这起大案，牵涉了沈万三妻族沈旺、沈德全、沈昌年、沈文规、沈文矩、沈文衡、沈文学、沈文载、沈海，共八人。经过两次的打击，沈万三苦心经营的家族，彻底走向了衰落。