黄永胜生活作风一直被人诟病
俗话说罗马不是一天建成的，作为林彪手下“四大金刚”之首的黄永胜，他的个人作风问题一直被人诟病。这点林彪自己也很清楚，林彪在“文革”期间曾经有过一个关于使用干部看大节小节的讲话，林彪说：“有些干部小节不那么好，生活作风、男女关系不太好，但他拥护毛主席，突出政治，有革命干劲。”而林彪这里所说的有些干部实际指的就是黄永胜。黄永胜的妻子项辉芳，曾经就黄永胜和一名女服务员有染一事给叶群写信，请叶群出面给予黄永胜警告。黄永胜身上的这个弱点始终没有彻底纠正，所以他和叶群的关系也正是建立在这个基础上的。
曾一度是叶群朋友的贺龙妻子薛明，也称叶群也有着类似的私生活问题：叶群在江西的时候，便和国民党的一个县长李林打得火热，以后到了延安，还把林彪给她的信到处宣扬。
而众所周知的是林彪因为身体（或许还有政治上的考虑）的原因，无法像其他人那样过正常的家庭生活，这使得叶群倍感精神上的空虚，她不止一次地向其他人表达这层意思，甚至和秘书也谈起过。林彪的秘书张云生曾在回忆录中提到，他就是因为不忍叶群的骚扰而主动提出辞职的。
黄永胜曾给叶群写情诗
目前关于叶群和黄永胜之间特殊关系的史料来源主要有三：林立果偷录的黄永胜与叶群通话的录音带；九•一三事件以后从叶群文件柜中发现的黄永胜写给叶群的一首爱情诗；还有叶群的内勤王兰多的有关回忆。
“九•一三事件”之后查抄叶群文件柜中发现的黄永胜本人写给叶群的那首诗中写道：“缠绵五周月，亲手折几枝。虽是寒冬日，黄叶热恋时。”而作为证明黄永胜与叶群的关系的人证则是叶群的司机杨振纲的妻子王兰多。
王兰多的回忆证实了林立果偷录通话，还证实了叶群与黄永胜之间的不同寻常的关系，其中有一次很晚的时候，叶群与黄永胜开车到郊外，黄永胜的警卫员和王兰多都倍感纳闷，当时，叶群的司机问王兰多，黄（参谋）总长和叶主任这么晚了来这里干什么呢？王回答说这是首长们在散步，司机又问散步为什么不用手电筒，而要带着马灯和毛毯呢？王兰多回答不出来了。
林立果偷录黄叶通话
林立果偷录的录音带中更对黄叶的这种关系做了进一步的解答。据众多当事人回忆，林立果与叶群虽然是母子，但却一直不睦，林立果从不叫叶群妈妈，平时都称她的官衔，发牢骚时称她“叶老胖”。
为监视叶群，林立果从叶群的电话线外接了一根窃听线，一直通到他自己的房间里，并偷录了黄永胜与叶群的一段对话。对话一共是157分钟，时间是1970年10月7日。这个录音带也是公审黄永胜时，法庭公开出示的黄叶不正当关系的证据之一。
在这段通话中，叶群问黄：“你想我吗？”黄永胜回答：“怎么不想呢？”。叶群说：“我这个生命是和你联系在一起的，不管是政治生命，还是个人生命。”叶还说在家挨着林彪的骂声过生活，叶表示愿做愿永远做黄的助手，做黄的秘书，以黄的意志为意志，还说“我的孩子也就是你的孩子，你的孩子也就是我的孩子”。
以上是黄叶二人的部分对话记录，删节主要是因为涉及到一些私人上的事，如叶群连自己的例假、痔疮也同黄永胜说。这段对话已清晰地表明了叶黄二人的关系。
至于叶群是出于政治目的拉拢总参谋长黄永胜，还是别的目的而与黄有了不正当关系，已无从考证。但作为林彪最信任的大将，黄永胜居然背地里与首长夫人有了关系，不能不让人惊叹。