朱元璋还要沈万三每年献白金千铤，黄金百斤，还命他造六百五十间廊房，养数十“披甲马军”，并对他的田产每亩征九斗十三升的重税。
而且还要他独自承担南京城洪武门至水西门城墙的任务。朱元璋想：“当初如果不是你极力支持张士诚，我何苦用得了八个月才攻下苏州城？”
于是，朱元璋把沈万三全家发配到了云南。从此，沈万三名下20亿贯家当也就都归了皇帝。沈万三被赶到云南时，他已经是一个年过六旬的老人了。
在这富与贫、荣与辱产生巨大反差的一瞬间，他从心理上和身体上都难以接受，江南与云南的生活习性、水土气候的差异实在太大，简直是从天堂跌到了地狱。
没过多久，沈万三便支持不住，一命呜呼了。据说，后来他的子孙曾将他的尸骨运回家乡，葬于周庄的银子浜下，总算没有把尸骨落在异处他乡。
由于树大招风，富得让朱元璋都垂涎，以至于招来杀身之祸，家破人亡，然后把他的财富全部吞并了。
他到底富到什么程度，历史上留下了许多有趣的传说。据《留青日札》记载， 当朱元璋打下江浙后，沈万三与其弟万四（沈贵）在两浙豪富中首先输粮万担，献白金五千两，以佐用度，“太祖军食，多取资焉”。
据估算， 沈万三的财富高达20亿两白银，折合现在的人民币6000多亿。
