迁谪生活，难以为怀，少游晚年诗词颇多伤心语，但他还是很旷达，很看得开的，能于颠沛中得到苦趣。明陶宗仪《说郛》卷八十二：
秦观南迁，行次郴道遇雨。有老仆滕贵者，久在少游家，随以南行，管押行李在后，泥泞不能进，少游留道旁人家以候，久之方盘跚策杖而至，视少游叹曰：“学士，学士！他们取了富贵，做了好官，不枉了恁地，自家做甚来陪奉他们！波波地打闲官，方落得甚声名！”怒而不饭。少游再三勉之，曰：“没奈何。”其人怒犹未已，曰：“可知是没奈何！”少游后见邓博文言之，大笑，且谓邓曰：“到京见诸公，不可不举似以发大笑也。”
我以为这是秦少游传记资料中写得最生动的一则。而且是可靠的。这样如闻其声的口语化的对白是伪造不来的。这也是白话文学史中很珍贵的资料，老仆、少游，都跃然纸上。我很希望中国的传记文学、历史题材的小说戏曲都能写成这样。然而可遇而不可求。现在的传记历史题材的小说，都空空廓廓，有事无人，而且注入许多“观点”，使人搔痒不着，吞蝇欲吐。历史连续电视剧则大多数是胡说八道！
东坡闻少游凶信，叹曰：“少游已矣，虽万人何赎。”呜呼哀哉。