みょんなリケジョさん、こんにちは☀
う～ん、悩みますね(笑)
確かにどちらに行ってもいいと思いますよ。

おっしゃられているように、理科の専門性を高めたいなら理学部に、理科教育をメインに学びたいのであれば教育学部の方がいいです。
ただどちらに行っても物理の勉強はできますし、教職科目を取るのであれば理科教育も学べます。
あと、なんとなくのイメージですが、小中の教員は教育学部卒、高校の教員は理学部や工学部などの専門学部卒が多い気がします。
やはり小中は“教育”の面が重要ですし、高校は専門知識をどこまで教えるかがカギとなってきますからね。

あとは大学での講義のことと、学部を卒業した先のことを少し考えてみるといいですね。
まず講義についてですが、物理学科はやはり物理の講義がメインになってきます。
そのため教職科目を取ろうとすると＋αの授業という扱いになります。
もちろんちゃんと全て取って教員になっている人もいますので、無理なカリキュラムにはなりませんが、なかなか大変で、それが故に教職科目を諦める人もちらほらいます。
その点、教育学部は最初からカリキュラムに教職科目が組み込まれていたりしますからね。
それからもう1つは、大学院にも進学したいかどうかです。
通常、理系の学部であればほとんどの人が学部卒業後に大学院(修士・2年)に進学します。
教職科目を取っている人は学部で卒業してしまって教員になる人もいますが、大学院を出てから教員になる人もいます。
要はどこまで専門性を高めたいかっというところですね。
教育学部に行っても大学院はありますので進学は可能ですが、そもそも大学院まで行く人が少ないのと、“教育”の大学院となりますので、“物理”としての専門性を高めるわけではありません(もちろん教育学部物理であれば、物理の内容はやれますが)。
大学院進学も視野に入れているのであれば、物理学科に行った方がいいでしょう。

今はまだ高2ということで、受験までまだ時間に余裕があると思いますので、もう少し悩んでもいいと思います(^^)
もし可能なら、出身中学の先生にも一度意見を聞いてみるといいですよ。