私もHSP判定で中程度でした。同じく20代ですが遠出するにしても翌日の仕事を考えて時間や行動量を調整しないと結構しんどいですし、友人との連絡ですら疲れてしまうことが多々あります。
連絡がめんどうな時は極力放っておいて、余力のあるときに返信するようにしています。（返信遅くなってごめんね、と一応前置きしたり大事な要件でなければ既読無視、未読無視します。)
今時これだけ精神病などが巷で騒がれていてもなかなか理解してくれる人は多くないですよね。理解してくれない人には近寄らない、無理に理解してもらおうとはしていません。もともと体が弱いという風に言い切ってしまうときもあります。また人付き合いはとにかく無理のない範囲でするようにしています。明日仕事あるから早めに解散でもいいかな？と相談したりお酒も1，2杯で抑えたりしてます。究極はHSP、体の不調などに理解のある人とだけ付き合うようにしてます。コミュニティが狭くなってしまうこともありますが理解してくれない人に無理して合わせたり嫌な思いをするよりこの方がよっぽど利口かなと思っています。