徐渭是明朝极为著名的军事家、文学家、戏剧家，在诗、书、画、戏剧方面都颇有建树，这一点即使在文风极盛的江浙，甚至其他地区都极为罕见。徐渭此人在当时许多方面，都表现出了超越时代的色彩。这样一个人，自然不会是泯然众人之人，不仅仅是史书及后世史料中，常常见其身影，就是在许多故事传说中，徐渭也是故事流传的主角。
后世对于徐渭此人，流传了许多故事，虽不知这些故事与徐渭本人到底有何干系，但是却也能闲来读之。
冯梦龙的《情史类略》就描写了一个关于徐渭的故事，并且这个故事还涉及某些真实的节点，故事真实性不可性，但是读来还是很有趣的。故事是这样说的，说徐渭中举之后，就到了胡宗宪幕下做事，胡宗宪很信任宠爱他。徐渭有一次出游，到了某一寺庙中，里面的僧侣对徐渭很不礼貌，徐渭就记下了。晚上徐渭留宿妓家，将那妓女的睡鞋偷偷藏在袖中。第二天一早就去见胡宗宪，并对胡宗宪说这个鞋子是他偶然在那寺庙中捡到的。胡宗宪听了之后，大怒，也不详查，当即就捉拿了寺中僧侣几人，砍了头。
徐渭这个人猜忌善妒，原配死了后又娶了一个继妻。有一日徐渭出门归来，从窗中看见一个大约二十多岁的俊美僧人将继妻抱在怀里，两人欢声笑语，好不快活。徐渭大怒，拿着根棍子，就想将那奸夫打死。等他进了门，却不见人，问继妻，继妻感到极为奇怪，并不知他在说什么。后来他再次出门归来，见着那俊美僧人与自己的妻子并枕而卧，徐渭怒吼一声，拿了个尖锐事物便乱刺一通。最后将他的继妻刺死，徐渭因此被下狱，后有诗《述梦诗》云：“伯劳打始开，燕子留不住。今夕梦中来，何似当初不飞去。怜羁雌，嗤恶侣。两意茫茫坠晚烟，门外鸟啼泪如雨。”“跣而濯，宛如昨，罗鞋四钩闲不着。棠梨花下踏黄泥，行踪不到栖鸳阁。”
买缸
徐渭有一日逛街，见着一个卖缸的，便问这缸对少钱一斤。那卖缸的以为他是外行，于是便想欺诈他道：“一百文一斤”。徐渭点了点头，让卖缸的扛着缸往家里而去，他让人等在外面，自己进去拿了秤砣，出来对卖缸的说：“我只要两斤!”卖缸的一口血都快吐出来了，只能再搬回去。
挑粪
有一日徐渭过桥，见着一个挑粪的农夫。挑着粪过桥，实在不好过，于是徐渭便好心对农民说，他们两人一起将粪抬过去。那农夫想着徐渭是文弱书生，做这些事情实在不好，因此坚决推辞，无奈徐渭固执的要帮他抬，便只得同意了。两人极为费力的将粪桶抬过桥，徐渭喘着气道：“我实在抬不动了，另一桶你自己看着办吧!”那农夫当时的表情，一定是一脸吃了屎的表情。
徐渭诗词选
谒孝陵诗
二百年来一老生，白头落魄到西京。
疲骑狭路愁官长，破帽青衫拜孝陵。
亭长一抔终马上，桥山万岁始龙迎。
当时事业难身遇，凭仗中官说与听。
《题墨葡萄诗》
半生落魄已成翁， 独立书斋啸晚风。
笔底明珠无处卖，闲抛闲掷野藤中。
海上曲
暇日弃筹策，卒卒相束手。
四疆险何限，但阻孤城守。
旷野独非民，弃之如弃草。
城市有一夫，谁不如木偶?
长立睥睨间，尽日不得溲。
朝餐雪没胫，夜卧风吹肘。
彼亦何人斯，炙肉方进酒!