おかしくはないと思います
オタクな彼もいれば、bbkkさんのような方もいるので
同じ趣味でなければ、そういう感情になることもあると思います。

私は相方がそうだったのですが、オタクだったことに
最近まで気づきませんでした＾＾；
相方はプライドのせいなのか、なんなのか分かりませんが
そんなに熱く語ることも、私の前でのめりこむ姿も見せないので
まぁいいかぁって思ってます。

アニメの番組をたくさん撮ったり、本を購入したりしてますが
その程度ならと思ってます。

冷めてきただけならいいですが、嫌悪感になってしまうと
どんな形でもお付き合いはできないと思います。
そのオタク加減が無理なら、お友達のままで終わらせたほうがいいかもしれませんね。