大人の言葉遣いの影響について

もうすぐ11か月になる娘がいます。
夫は家事も育児もよくしてくれて、娘ともたくさん遊んで可愛がってくれています。
ただ、夫の言葉選びで気になることがあり娘に影響が出ないか不安になったため、相談させていただきたいです。

先日夫が、娘にハグやチューをする時に「○○ちゃんパパに虐待されてるね～」と言いながらすることがありました。(娘を溺愛していることを表現しているだけで、もちろん虐待なんてしてないです。)

夫本人に悪気はなく冗談として言ってるだけだと分かってはいたのですが、
マイナスの意味でよりによって「虐待」という言葉を直接娘に向かって言っていることが衝撃的だし、一度だけでなく2~3回そう言っている場面を見たので、我慢できず「虐待って言葉は使わない方がいいんじゃない?」と注意しました。

すると、夫に「なんで?」「その言葉を使っちゃいけない理由は何?」と言い返されました。そんなこと聞かれると思ってなかったので「虐待って悪い意味の言葉だし、娘には冗談だって分からないから使わないでほしい」とだけ答えました。(夫も意地になって言い返しただけかもしれませんが…)

本心では、娘がこれから先言葉を覚えていく時に「虐待」なんて言葉を覚えてしまったらどうしよう…という先々の不安があります。大人でもなかなか使わないのに小さい子供が使う言葉ではないと思うからです。
娘はまだ11か月前後なので、大人の使ってる言葉の意味を理解するのはまだまだ先の話だと分かってはいるのですが、
このくらいの月齢からでも大人が使っている言葉の影響を受けたりするのでしょうか？

今回の「虐待」に限らず、夫は時々マイナスの意味とか万人受けしない表現の言葉で娘の可愛さを表現することがあるので、今後のことを思うと不安です。(動きや見た目が虫みたい・爬虫類みたい等)
今から夫(と私自身も)には言葉選びを気にしてもらった方がいいのか、私の気にしすぎなのか…

まとまりのない長文で大変申し訳ありませんが、何かアドバイス頂ければと思います。
よろしくお願いします。