手のひらのかゆみについて

手のひらに赤いブツブツが多数出来て、痒みもあります。
掻いているとだんだん皮も剥けてきてしまいます。
市販の塗り薬を塗っていてもなかなか良くならないのですが、皮膚科に見せにいったほうがよいでしょうか？市販薬でも効果のある薬剤がありましたら教えてください。