勃起时间太短，我觉得这会不会对身体有一定影响？

根据你的描述你这是阳痿的症状，建议你平时经常运动锻炼，少手淫，多吃些补肾的食物，可以服用点肾宝片之类的药物来调理看一看，必要时在去医院检查下。