Pourquoi dit on "avoir un poil dans la main" ?

L'expression ''avoir un poil dans la main'' est une image. Elle insinue qu'à force de ne rien faire, la pilosité se développe dans la paume de la main. Le poil pousse dans la main par manque d'usage de celle-ci. Cependant, cela est techniquement impossible.