关于秦桧夫妇铁像，有一个很「臭」的传说。话说有个姓秦的浙江巡抚，上任后见秦桧夫妇的跪像受辱，感到「愧姓秦」而面目无光，想将铁像搬走。为免激起民愤，他命人在夜间偷偷地把铁像搬走，扔进西湖。不料，次日湖水忽然发生恶臭，同时，岳坟的奸像又不翼而飞。百姓就纷纷要求官府调查。不久，铁像竟然从湖底浮起。百姓将铁像捞起，放回岳坟前，湖水又马上不臭了。百姓都认为是秦桧太臭，以致弄污了西湖。姓秦的巡抚见此情况，亦无可奈何。
历代的百姓并没有因铸了秦桧的跪像而觉得出了气。相传他们把面粉制成秦桧夫妇的模样，然后并在一起放在油里炸，名为「油炸脍」或「油炸桧」〔脍与桧同音〕。今天，在中国，「油炸桧」被称为「油条」，或直接了当地称其为「油炸鬼」，好像把秦桧夫妇当作恶鬼一样。不管名称如何，秦桧已为中国民间提供了一种著名的美食，这个「功劳」，也应该归他吧！