泼寒胡戏的日渐风行，各地纷纷组建自己的乞寒队伍，互相攀比，看哪一队的服饰更华美气派。如此即失去了原有的那种驳杂活泼的趣味，又花费奢靡，引来众多的非议，一些大臣开始发出反对的声音。
史载，唐中宗在东都洛阳南楼上观看泼寒胡戏，殿中侍御史吕元泰上疏劝谏，认为游戏的人们穿胡服、骑骏马，击鼓张旗，有战争之象，很不适合在都城里表演。而且参加者竞相夸耀自己的服饰，助长奢靡之风，浪费国家财富。
吕元泰认为，时寒则顺之，“何必裸露形体，浇灌衢路，鼓舞跳跃，而索寒焉?”这种风俗有百害而无一利，请求皇上禁绝这种野蛮之戏。
但唐中宗并未采纳这份谏议，照看不误。
到了唐玄宗时代，宠臣张说也上疏批评泼寒胡戏，认为这种外来之戏没有典故，有悖先礼，“……裸体跳足，盛德何观?挥水投泥，失容斯甚。”再次请求禁绝泼寒胡戏。
这一次唐玄宗采纳了张说的建议，开元元年冬天，敕令“腊月乞寒，外蕃所出，渐浸成俗因循已久。自今已后，无问蕃汉即宜禁断。”
那样一个生机勃勃的戏乐从此消失，想来实在可惜。如果泼寒胡戏能够一直传承下来，今天的隆冬腊月我们也会有一个热闹而刺激的好去处了。