授乳中のはちみつ

お世話になります。６ヶ月の子どもを育てています。
今は、母乳だけで育てています。離乳食は、来週から始める予定です。
材料に蜂蜜を使っているカステラを 母親である私が食べてしまいました。赤ちゃんにはちみつがNGだから、私も食べないようにと気をつけていたのですが、うっかりと食べてしまいました。フレンチトーストなどで、はちみつをべったりとつけて食べることはやめていたのですが、市販のものの材料までは意識が足りませんでした。
カステラを食べた後に母乳をいつも通りあげていますが、特に問題はありません。
私がはちみつが入っているものを食べても子供に影響はないと安心して良いのでしょうか。また、授乳中に気をつける食べ物はありますか。
よろしくお願いします。