我的手指上长了很多小水痘，而且还会很痒

这种情况很可能是由于疱疹引起的，建议你这段时间可以用清水进行清洗皮肤，然后可以涂抹阿昔洛韦乳膏来帮助进行缓解一下，同时还可以配合着口服阿莫西林胶囊来进行治疗。