現在は主にかさぶたの上にコンシーラーを使ってらっしゃるんですね？
私もシミだけでなくかさぶたの上に使う事が多いのですが、かさぶたの上は普通にオイルタイプのクレンジングしても落としにくいです。その後洗顔してもかさぶたの上には残ったまま、です。
仕方ないのでクレンジング時に爪でこするか、先にウエットティッシュタイプのクレンジングでゴシゴシこするか、になってしまって、そうするとせっかく治りかけてる傷口を傷めてしまうんですよね…。

負担無く落とすならポイントメイクリムーバー(ウォータープルーフタイプのアイラインやマスカラなどを落とせるもの)を毛羽立ちにくく肌当たりのいいコットンに含ませて、少し当ててから優しく拭き取る、でしょうか。
その後洗顔をすれば大丈夫かと思います。

私の場合はかぶれではなく吹き出物を潰してのかさぶた、そしてまたそのかさぶたを剥がして血が出てかさぶたになって…で自業自得です＾＾；
私は化粧品かぶれした事が無いのでどのメーカーでも使えるため、これがかぶれにくいとのお勧めはできなくてごめんなさい。お肌に合うポイントメイクリムーバーがあるといいのですが。