症状が軽くてもヘルプマークをつけていていい？

この度障害者手帳を取得することになったのでヘルプマークをもらっておいた方がいいのかな？と考えています。ただ元々一般就労でフルタイム勤務、症状も落ち着いていてパニック発作などは起こしたことないので、そんな人がヘルプマークを持ってると本当に困ってる人に迷惑かなと思って悩んでいます。