37度4还是挺正常的体温的,而且宝宝的体温本来就会比大人的体温略微的高一些,建议妈妈不要太担心,可以给宝宝和一点儿的温开水,只要宝宝接下来的体温没有升高,妈妈就可以放心,宝宝如果体温升高妈妈可以让宝宝洗个热水澡或者用热水泡脚。
如果有条件可以去医院做个检查。