妊娠初期のカフェイン摂取について

初めてご相談させていただきます。妊娠初期にカフェインを多く摂取してしまい、不安です。
 第2子を妊娠中、現在妊娠9週です。
2人目にしてつわりが結構辛く、ここ1ヶ月程毎日カフェインの含まれるものを摂取してしまいました。振り返りカフェイン量を計算してみると、WHO基準では300mg以内に留めるようにとされているところ、私は毎日240mg前後摂取していたようです。もしこれに加えて、覚えていないけど摂取していたカフェインがあれば300mgを超えているかもしれません。
1人目は結構カフェインや食べるものに気をつけていただけに、2人目に対して緩やかに過ごしてしまったこと、つわりの辛さから逃れたいためにカフェイン摂取を辞められなかったことを本当に後悔しています。
妊娠初期のカフェイン摂取過多は胎児に悪影響を及ぼすのでしょうか。また、ネットの書き込みで妊娠中のカフェイン摂取は発達障害となる可能性が高いとも見ました。そちらも不安です。昨日からカフェイン摂取をやめましたが、今からでも間に合うでしょうか。
自業自得なのかもしれませんが、なにかご教示いただけたら幸いです。また、妊娠中多くカフェイン摂取してしまったけどその後の発育に問題がなかった事例などありましたら教えていただけますと幸いです。