用手拔胡子会破坏面部的皮肤、毛囊及相邻的皮脂腺，这样会导致附着在皮肤的细菌进入。轻者可以引起毛囊和皮脂腺发炎形成疖肿，严重的患者就会使炎症蔓延至整个面部，甚至颅内，对人体的健康造成影响。
胡须是毛发的一种，而且在皮内毛根末端的毛乳头里面，含有丰富的神经末梢和血管，所以在拔胡子的时候只是拔掉的毛干和部分的毛根，但是剩余的毛根还会长出胡子。
如果是长时间的刺激就会使长出来的胡须变性，甚至还会留下瘢痕，所以不能使用手去拔胡子，尽量使用剃须刀刮掉。