それは辛いですね。お友達から指摘されたりすればなんと返して良いかわかりませんよね。
アレルギー検査をしてみたことはありますか？医療機関の血液検査などでわかります。
医療機関ごとで金額が違いますが、食品やダニ、花粉、金属などが原因で肌荒れが治らなかったりすることもあるそうです。
SKE48須田亜香里さんも原因不明の肌荒れに悩んでいて、検査をしたら金属アレルギーが原因だと判明したそうです。（金属のアクセサリーの他に、化粧品にも金属が含まれていることがあります。）
絶対にアレルギーが原因とは断言できませんが、何年もお悩みであるならばやってみても良いかも。
私も春になると花粉症症状が出て困っていて、アレルギー検査を耳鼻科で受けましたが、35項目の食品や花粉などを調べて5000円でした。（料金プラスで検査項目を増やすことができるようです。）
医療機関ごとに価格も違うので、近隣のお医者さんで調べてみると良いかもです。