アレルギーの心配について

お世話になります。
4ヶ月と22日の男の子のママです。

ちょーど4月1日から離乳食を始めようと思っています。

あたしとパパ共に花粉症からくる口腔アレルギーっぽくて食べ物や量にもよりますが、パパはりんごが1切れで痒くなってしまいます。それ以上の反応はないです。

あたしは以前豆乳や絹豆腐、発酵が進んだ醤油が痒くなり、それ以降食べたり飲んでないので反応があるか分かりません。
ただ納豆や鮮度の新しめな醤油、木綿豆腐は問題なく食べられます。

アレルギーの遺伝はあまりしないと聞いたのですが離乳食開始して3週目にりんごと豆腐をスケジュールに組み込みましたが遅くした方がいいでしょうか？
やはり食べさせてみて反応が出ないとアレルギーと判断つかないと言われたので食べさせるしかないとは思うのですがタイミングが早いかどうか分からず、、そこら辺についてアドバイス頂ければと思います。