他们之间的事，开始比较隐蔽，少人知晓，弱智丈夫更是浑然不知，他的父亲陈先生因在外地当差也不知道，可“纸里终究包不住火”。陈氏父子虽然不知道，但陈先生一个绰号陈缩头的兄长，也就事弱智儿子的伯父，却隐约听到了风声。他怕这事影响陈家的声誉，便在暗中调查，他买通了梁氏身边的仆人，获得了一封顾学文与梁氏暗通款曲的书信作为凭证，寄给了在外地当差陈先生。陈先生收到信后，当然非常生气，但他想仅凭这样一封书信去官府告发，未必能有什么结果，弄不好还会败坏陈家的名声。
正当陈先生烦恼没有好办法时，洪武朝廷上发生了一件大事，就是开平王常遇春的妻弟蓝玉谋反案爆发。这个案件越发展牵涉的范围越大，很多无辜的人都被牵连进去。这给陈先生以启发，何不举报顾学文与蓝玉通谋造反呢?只要引起朝廷过问，任凭你顾学文或者沈万三家有多少钱，也不能免死。后来，事情的发展果然印证了陈先生的想法，不但顾学文被杀，就连他的父亲、兄弟还有老丈人沈万三的儿子沈旺等一大批人，纷纷被杀掉。梁氏也被其父逼迫自杀。据说，这件事从洪武二十六年起到洪武三十一年才平息。
沈万三家族，经此一劫算是彻底败落了。沈万三费心经营所得的无数财富，在政治斗争中被逐渐消磨，最终落得家败人亡的结局。但也有很多人认为，明史中关于沈万三的一些记载是清朝人为了诋毁抹黑明朝的统治者而故意为之，其实，根本不存在沈万三修南京城、犒军被罚等事件，他很可能在朱元璋建立明朝之前就死了，甚至根本就没和朱元璋有过交往，事实究竟如何，还有待后人进一步探究。