昔はそういう「付き合い」があったと聞きましたが、まだそんなことしてる会社（たまたまあなたの同僚か先輩が好きなのかな）があるんですねぇ。
そういうことはしない、病気が怖い、と最初から言っていたら付き合いが悪い奴と思われても、それが定着して誘われないはず。
もしくは接待で取引先のご機嫌を取るためかな。
（それにしたって今時？ですけど）
風俗に付き合わないと仕事ができないのなら、それはそれで心配ですよね。
そんなに無能？みたいな。
多分旦那さんはそういうことが嫌いではないタイプで（みんなやってるからいいか～）って流されたのでは？
周りが妻帯者で風俗に行ってたら（いいんだ）って思う男性多いですよ。
でもそれはそれぞれの奥さんの考えもあることで、あなたのようにイヤだと思う奥さんなら行っちゃダメだと思います。

私なら証拠を押さえてから話し合います。
家庭と仕事の付き合い、どちらを取るのか？までいきます。
それくらいイヤだということを理解してもらいます。
病気の説明もします。女性側のリスクも。
離婚なんて話が出たらとことん会社とも揉めてやります。マジで。