散会后，另一个画家也对李山说：“看你，画小路干什么，我画的是《我们走在大路上》。”李山没作声，只感到风雨来临前的暗黑与寒意。他终没有将草图画成正稿，此事也没有再讨论，但处境慢慢变得困难了。

　　不久，在中共华东局一家内部通讯上，有一篇题为“阶级斗争新动向”的报道，说李山画了一幅《公社小路》，攻击人民公社！没过多久，1964年底的一天，省文联召开大会，文联书记突然宣布李山须去农村劳动。1965年春，他被送到江宁县李家庄。同时被送去的，还有傅抱石的儿子小石和作家协会的陆文夫等六人。一年之后，李山才得以回画院。后来得知，那次草图观摩时闪了一下身的江苏文联副书记伊某指使魏某批判李山，而时年50多岁的魏某，因早年画过蒋介石而处于不被重用的境地，正可以借此残害别人藉以显示自己的忠诚。真真是可悲可憎可怜可叹！