流传最广的传闻是马新贻“渔色负友”说。
传闻说，咸丰年间，张文祥与其友曹二虎、石锦标加入捻军，张文祥是个头目。当时马新贻因合肥县失守被革去县令一职。马新贻急于戴罪立功，率领团练与捻军交战。在一次战斗中，马新贻兵败，被张文祥、曹二虎等人活捉。张文祥和曹二虎有意投降清军，便主动与马新贻结为兄弟，随之反正。降军被编为两营，因为马新贻号谷山，称为山字营，张文祥为营官。山字营随马新贻四处作战，屡立战功，马新贻由此不断升官，一路扶摇直上。
这一版的传闻多有漏洞，年份、事迹无一与马新贻年谱和《清史》相符。根据《清史》记载，咸丰三年（1853）马新贻任合肥知县，随钦差大臣袁甲三攻打太平军，多有战功，并没有被革职一说。之后马新贻率军从太平军手中夺回庐州有功，还升任庐州知府。马新贻一生中唯一一次被革职是咸丰八年（1858）任安徽按察使时，在庐州被太平军英王陈玉成打败，但也是革职留任，两年后即重新复官。
传闻又说，同治四年（1865），马新贻升到安徽布政使，已有些看不起张文祥、曹二虎的意思了。曹二虎却不知情，还将妻子接至马新贻的官府居住。马新贻见曹二虎之妻美艳，顿起歹心