取りすぎて肌表面ではなく、肌内部は乾いていませんか？
乾燥している方の方ができやすいですよ。
角栓は皮脂だけが原因ではなく、皮脂と肌に残った不要な角質が混ざり合って毛穴をふさぐ事です。

無理矢理はがしたり、取り除い足りすると、角質が乾燥してより角栓が詰まりやすくなりますので、要注意です。白い角栓が酸化して黒い毛穴の詰まりに変化しますので、白いうちに取り除くことも大切です。

まずは角質を潤いで十分に柔らかくして、取り除きやすい角質にする事と同時に肌の表面だけでなく、肌の内部も十分な潤い(水分＋油分＋保湿剤)で角質が詰まりにくい肌状態を作る事です。
肌表面の余分の皮脂は取り除き、肌を潤わせて、肌が元々持っている酵素を活性化させて、自然にいらない角質を負担なく取り除き、潤い成分がきちんと肌内部に浸透しやすい肌作りを意識してみたらいかがですか。

私はうるおいマスクで肌をほぐしてから、特殊な糸で編んだ布で拭き取っています。