赵抃致仕回到三衢后，与乡民往来不管官位和容貌，将所居之处取名为“高斋”，曾作诗道：“腰佩黄金巳退藏，个中消息也寻常。时人要识高斋老，只是阿村赵四郎。”

琴鹤随身

　　赵抃任成都转运使，到官时随身只带一琴一鹤。见宋沈括 《梦溪笔谈·人事一》、《宋史·赵抃传》。后来称人为官清廉，常用此语。按：宋赵善璙《自警篇·嗜好》称抃赴官携一琴一鹤，朱长文《琴史》卷五及叶梦得《石林诗话》则以琴鹤龟三事并言。《宋史·赵抃书》原话为：“帝曰：闻卿匹马入蜀，以一琴一鹤自随；为政简易，亦称是乎！” 在四川崇州（古蜀州）后人为纪念赵忭与陆游在罨画池旁修一庙宇称赵陆公祠，后改称“二贤祠”。其后人为纪念此事以此为堂号曰琴鹤堂。

解救无辜

　　赵抃巡察青州时，经常想：有一人下狱就有十人因而耽误工作；那些受牵连波及的，更是无辜；而且监狱中，夏天有湿气、传染病，冬天有冻伤、脚气病；有的人因为一点小罪，长年受到拘禁；有人因为一点牵连，几乎丧命；狱卒、囚长的勒索凌辱，更令人痛恨。他令人常常回派人去查阅各地监狱的记录，以囚犯数目的多少，来推断定官吏的贤明与否。这样的办法实行一年以后，郡、州、县各级官吏都不敢随意羁押人了。邵雍每每称赞这件善政。