歯医者に行くのがいいです
あまりに増えて困るようなら、内科的に悪いところがあるかもしれないので
病院にかかった方がいいですね。
大きい病気だったりすることもあるようですし。（白血病など）
胃腸が弱っているときには、特になりやすいと言いますよ～。
とにかく、「どんどん増えて」というのなら検査されたほうが良いと思います。

口の中を噛んだりして、出来た口内炎で痛くてどうしようもないなど
というときは、歯医者に行くと薬を塗ってくれたり、レーザーで焼いてくれたりします。
市販薬でよく効くのは「ケナログ」という口中用の軟膏。
だけど、コレを買うには薬剤師さんに相談と、印鑑が必要だったと思います。歯医者で出してくれるところもあるので相談してみてください。