对于刘少奇来说，他抓了“四清”的工作，又蹲了点，觉得是有发言权的，他对“四清”运动中的问题提出了自己的见解。当时到1964年底，全国已有一百万以上的干部参加“四清”运动；但是，人们普遍地反映“四清”运动搞不下去，对此提出了种种意见和看法。会议在听取汇报后就开始讨论“四清”运动的性质问题，与会者纷纷发表了各自的意见与看法。
刘少奇根据大家意见与看法，认为还是“四清”和“四不清”的矛盾，既在党内，也在党外，既有敌我矛盾，又有人民内部矛盾，并且是相互交叉着。
而刘少奇这些“四清”和“四不清”的矛盾分析，毛泽东之前就根本不同意，并把它们视为原则分歧、两条路线的斗争。毛泽东在“四清”运动中没有得到主导权，全国“四清”运动基本是按照刘少奇的路子进行的，在毛泽东看来，他似乎被架空了。中央工作会议开幕前，邓小平对毛泽东说：“这会不重要，您老人家不用参加了。”本意是想说，这样的会议应该是主持一线工作的刘少奇的事情。
说者无意，听者有心，毛泽东很介意。邓的话反而激起了他的逆反情绪，他坚持要参加。到此为止或可作罢，偏偏刘少奇又加了一句：“参加可以，但不要发言了。”
一个不让参加，一个让参加却不让说话。毛泽东是一个自尊心极强的人，新中国成立以后，他从未受到过这样的对待，心理上无法接受。
毛泽东反问：“我为什么不参加？为什么不能说话？”
刘少奇和邓小平看毛泽东真的生气了，没有再行阻止。
