垄断利润让他们依然日进斗金，高枕无忧。终于，一道“改纲为票”的圣旨惊醒了尚在梦乡中的徽州盐商们，让刺骨冰寒灌顶而入。从“纲盐制”到“票盐制”，虽是一字之差，却让大批中小商人得以进入盐业自由经营，这对于垄断两淮盐业的徽州盐商来说，无异于釜底抽薪。特权的丧失，再加上豪奢的生活成本，他们很快江河日下，举步维艰。昔日有着鲜花着锦，烈火烹油之盛的烟柳繁华处，已是一片衰草枯杨。
不过到底是世代经理盐务的家族，虽说经历了‘改纲为票’初期的艰难，不过到底还是苦撑着经营了过来。然而真正摧毁了徽州盐商的却是爆发于道光三十年的太平天国战争，如同徽商的灭顶之灾一般，徽商所涉足的盐、典、木、茶、粮、棉等行业均在战火中遭到毁灭性打击。咸丰三年春，作为徽商木业基地的南京和盐业基地的扬州先后被攻破，太平军对商贾的洗劫让徽商们无法立足，只得携妻带子，仓皇逃离。李家就是在那个时候进入了没落，直到战后李鸿章跟淮军的崛起，李宗湄父亲凭借着跟李家有些远方亲戚关系，又舍得送出厚礼打点，终于在李鸿章节节高升的过程中重新获得了独家垄断淮盐南运的权力，将已经没落的黟县李家重新带回徽商大族之中。
可惜好景不长，甲午之