端午节是驱邪辟毒的节日。那一日中国民间常用三样辟邪的宝物：钟馗像、天师符和雄黄酒。三者都与道教有关。符和酒且不论，单说这钟馗像，唐以前是没有的，画第一张钟馗像的是谁呢?就是唐玄宗时的画师，后代称“画圣”的吴道子。
唐玄宗一次游幸骊山，回来后染了疟疾。白天卧床养病，朦胧睡去，梦见一个小鬼偷了杨贵妃的香袋和玄宗常吹的玉笛。玄宗喝问他是谁，那么大胆。小鬼回答说：“我嘛，叫做‘虚耗’，能耗尽人家财物，让喜事成忧。”皇帝大怒，正想唤武士擒拿，突然见一个大鬼奔来，戴着破帽，穿着蓝袍，围着牛角腰带，一只脚赤，一只脚套着旧朝靴，一只眼是瞎的。小鬼一见大鬼，便绕殿狂奔逃走，但仍然被一把抓住。那大鬼伸出手指挖出小鬼的眼睛，然后将他身体劈开，啃吃个干干净净。玄宗问道：“你是什么人?”那大鬼奏说：“臣是终南进士钟馗，武德间应举中了进士，却因长得丑被黜，臣撞死在阶下。皇上怜悯，赐我进士绿袍下葬，臣感谢圣恩，发誓为陛下清除虚耗鬼和其他妖孽。”话说完，玄宗也就梦醒，缠身多日的病痛一时全消。玄宗召来吴道子，将梦中形象述说一遍，让他画出钟馗像。吴道子奉诏，立即构思，恍惚中似乎眼见钟馗在前，便展开素毫，一挥而就。玄宗一看，那画上钟馗与自己梦中形象完全一样：左手捉住小鬼，右手挖它的眼睛。玄宗惊叹吴道子画得逼真传神，说道：“就像你和朕同做一梦似的。”
吴道子的钟馗画精绝一时。到了五代时，后蜀皇帝对此画极为欣赏，但对画上钟馗用食指挖鬼眼有些不满，便召来当时名画师黄筌，说道：“这钟馗如果用拇指去挖鬼眼，便更加有力。你给我改一下。”几天后，黄筌将吴道子画仍然呈回，自己另外画了张用拇指挖鬼眼的钟馗，皇帝不满地问道：“我是让你改吴道子的画，为什么不照办?”黄筌回答：“吴道子画的钟馗，一身之力，神气抟聚眼色注视，全在食指，不在拇指，所以不敢轻易改动。只好按陛下意思另画一幅呈上。”从黄筌以后，画钟馗的越来越多，各依自己理解巧加构思，所以流传在民间的钟馗也是千姿百态。不过，貌丑而威猛，正气凛然，则是所有钟馗像的共同特点。他的使命呢，也都是为人们驱邪捉鬼，所以多被悬挂在厅堂、居室。也有将他的画像挂在后门的，因为根据民间传说，钟馗碰死的地方，在皇宫的后宰门前，所以请他来做了后门的门神。