この場合、明らかに正しいのはチビさんのほう。
そして間違っているのはご主人のほうです。
おそらくご主人は、あなたが本気で傷ついていることを理解していないのではないでしょうか。
あなたの思いをちゃんと伝えることができれば、ご主人は少なからず罪悪感を持ってやめようと考え始めるでしょう。
ここで大事なことは、しっかり謝罪させて、ご主人に
「二度と浮気しない」
と約束させることです。
口約束でも、浮気した本人に言わせることによって、自覚させることができます。
ここであなたが
「今回の人は多めに見ます」
と言ってしまうと、状況は変わりません。
あくまで正しいのはあなたのほうだという認識の元、はっきり自分の気持ちを伝えましょう。