中国是豆腐的故乡，最早制造豆腐的相传是西汉的刘安。史载，“豆腐之法，始于淮南刘安”。当年刘邦之孙淮南王刘安为求长生不老之药，在安徽寿县八公山以黄豆、盐卤等物炼丹，无意中竟炼出了“白如纯玉，细若凝脂”的豆腐。西汉初年豆腐问世后，很快成为老百姓非常喜欢的小吃。
网络配图
当时流行的吃法是碗里搁一大块豆腐，撒上佐料，拿小刀边划成小块边吃。于是坊间出现了无数这样的豆腐快餐店。当时长安街上有个夫妻合开的豆腐小店，老板娘本来就漂亮，又以有美容功能的豆腐为常食，自然更是细皮嫩肉，人称“豆腐西施”。为招徕顾客，“豆腐西施”难免有卖弄风情之举，引得周围男人老以“吃豆腐”为名到豆腐店与老板娘调情，且动手动脚，比如趁付铜板时摸摸老板娘的纤手等。于是，醋海翻波的老婆们不满意了，经常以“你今天又去吃豆腐了？”来训斥丈夫。后来，“吃豆腐”便成了男人轻薄女人的代名词.
网络配图
还有一种说法可信度更高： 旧时丧俗有“吃豆腐”的习惯。丧家准备的饭菜中必有豆腐，所以去丧家吊唁吃饭叫“吃豆腐”，也叫“吃豆腐饭”，和现在的吃软饭差不多。以前江浙一带农民家里有了丧事，要把一具尸体从家里移到坟地去埋葬，是需要邀些人来帮手的。到吃饭的时候，主人就在院里或门前空地上摆上几张桌子，端上饭菜请帮忙的乡亲们吃。但此时也会有个别游手好闲之徒，忙倒没有帮，却也坐上饭桌吃开了。即使被主人发现，也不便撵他。办丧事的饭菜比较简拙，以豆腐为主，盖白色乃丧事之主色也。有些去帮忙的老乡，因忌说去丧家帮忙，而说是去吃豆腐饭的。对那种不干活而去蹭饭吃的家伙，也说他是吃豆腐的。这大概就是“吃豆腐”一词的来源。
上世纪30年代，上海就开始流传这句颇具幽默而带讽刺的新词儿了。生活中比较典型而常见的，是个别男士爱跟女性调笑，甚至动手动脚占点便宜的，就被人斥之谓“吃豆腐”。即《吃豆腐》文中所谓“毛手毛脚占人便宜”是也。
网络配图
又说“豆腐”具有色白、面细、质嫩、性软四个特点，恰与“年轻女子”肌肤白皙细嫩而性情软弱的特点相契合。所以，“吃豆腐”被用来借指调戏年轻的女子。
鲁迅先生在《故乡》里也塑造了一个美丽的豆腐西施杨二嫂，年轻的时候也是很会来事的，人长得又漂亮，因此她的生意也格外的好，豆腐自然卖得很快。