自分で書いておいて何だが、不倫と万引きとでは咎める感情に違いがありそうなので、同列に扱うのは不適当ですね。「他人の家庭の事情に口出ししたくない」という言い回しが不快に感じるだけなのでしょう