市販のお菓子、チョコレートは3歳以降？

2歳7ヶ月の息子です。
今まで添加物が入っているものや砂糖が多く含まれてるものは一切食べさせないようにしていました。一度だけ添加物入ってるパンケーキミックスを使ってお菓子を作ってあげましたが、発がん性など身体への影響がもし多量取ったとしても全く無く安全と証明されているものしか使っていないアルミニウムフリーの物を使いました。体が小さいので、少量でも影響が大きいのでは？と不安だからです。
しかし周りは意外と市販のお菓子なども普通に食べさせていて私が気にしすぎなのでしょうか？
息子がお店でコレ食べたい！と言ったチョコレートがあり、バレンタインにプレゼントしてちょっとずつなら食べさせてもいいかなぁと考えたのですが、チョコレートは3歳からと聞いたことがあり…やはり食べさせるなら3歳の誕生日を待ってからにした方がいいでしょうか？
また添加物は「乳化剤（大豆由来）、香料（乳・大豆由来）、野菜色素、クチナシ色素」と一見、市販のお菓子にしてはまだ体に優しめな方には見えるのですが大丈夫でしょうか？

 また、3歳の誕生日には普通のケーキを食べさせても大丈夫なのでしょうか？1歳はいつも食べてる無添加パンとヨーグルトとバナナで、2歳はパンケーキとヨーグルトとバナナでケーキみたいな物を私が作っていましたが、色々な味を知る機会があってもいいのかなぁとも思います。ただ市販のケーキは色々入っているでしょうし、かなり甘いので甘い物依存にならないか心配しています。 私自身がかなり甘い物依存のため私のようになって欲しくないという思いがあります。私は小さい頃、祖母が甘やかし、砂糖だらけの物を毎日もらっていたようなので…小さい頃の影響は大きいのかなと。
 誕生日は特別で日常的に大量に与えないようにすれば、3歳ならばそれほど影響無いのでしょうか？ どの程度気をつけたらいいのかわからず、アドバイスお願いします。