我が家はアラフォー夫婦２人暮らしです。
他の回答者様も仰るよう、女性は臭覚・味覚・視覚などが男性より優れているらしいと見聞きしまして、これも原因のひとつと思われます。
私も質問者と同じく、夫が気にならない(臭いを感じない？)不快なニオイを感じます。

お洗濯の分担は、主に質問者様でしょうか？
ちょっと旦那様のお気持ちを悪くされるかも知れませんが(失礼)、男性に多いニオイや皮脂汚れのある物は、高抗菌作用の洗剤(無香タイプがお薦めです)の使用が良いです。
女性と男性では皮脂分泌量が違いますし、実際にニオイがしなくても、汗や皮脂は時間と共に雑菌が繁殖していくので、旦那様の衣類は別洗いしたり(了解を得て)工夫されると良いですね。

男性向けの洗濯洗剤も色々なメーカーから出ていますので、参考になれば幸いです。