郑余庆通晓《六经》，奏对之时多引用古语。夏绥留后杨惠琳不听朝廷诏令，宰臣多主张用兵。郑余庆也上表皇帝，并引用“仰给县官”、“介马万蹄”等词汇，百官都不晓其意。时论认为他虽博雅好古，但却不合时宜。

南北郑相

　　郑余庆与堂叔郑絪曾同朝为相，都居住在昭国坊。郑絪府邸在坊南，郑余庆府邸在坊北。时人都称郑絪为“南郑相”，而称郑余庆为“北郑相”。

葫芦宴客

　　郑余庆为人清廉俭朴，品德高尚。一日，他忽然宴请亲近的官员。大家都感到很奇怪，但还是早早的就赶来了。一直等到红日高照，郑余庆才出来见客，并对仆人道：“去告诉厨师，要蒸烂去毛，别把脖子折断了。”客人们都认为一定是清蒸鹅鸭一类，但到吃饭时才发现，每人面前只有一碗米饭、一枚蒸熟的葫芦，并配以鲜美的酱醋。但郑余庆吃的香甜，客人只得勉强下咽。后人便用“烂蒸葫芦”表示饭食粗劣，也比喻生活俭朴。