有一次，万年县尉犯了法。万年县由京城直辖，地处天子脚下，唐玄宗下诏将其流放到岭南。韩休跳出来说，一个小小县尉，所犯也不是大罪，况且朝中还有大奸大恶之徒，之前左金吾大将军程伯献依仗恩宠，多次贪赃枉法。臣请先处分将军，再处治县尉。陛下若不惩处程伯献，臣便不奉诏。唐玄宗本来不乐意，见韩休坚定不移，只好同意。
唐玄宗对这位谏臣一向敬重，每次稍有过失，就左顾右盼说：“韩休知否？”每次话音刚落，韩休的谏疏就送到眼前。可能是韩休老是刺到他的痛处，皇帝日渐消瘦。左右侍从就问唐玄宗，自从韩休拜相，大家（唐代宫中近臣对皇帝称呼）时常闷闷不乐，为何不将他罢免呢？
唐玄宗道：“吾虽瘠，天下肥矣。”玄宗意思是说，朕瘦了，百姓就胖了，朕用韩休，是为江山社稷考虑。