一文字でこの違い

昔「話を聞かない男と地図が読めない女」
って言うのがベストセラーになりました。
でも、これって結局、

男って話を聞かないものよ♪
女って地図がよめないものよ♪

って感じで社会的には認知されているので
あまり攻撃されることはありません。

でも何故か

「話を聞かない女と地図が読めない男」

というように、たった一文字を交換しただけで、
世間は恐ろしく攻撃的になるのでしょうか？？
誰か教えてください！！