您好，根据您的描述，小宝宝37.4度，有点偏高，但可以不服用药物，室内温度不要太高，宝宝不要捂得太厚，及时喂奶，一般会痊愈的。宝宝妈妈如有身体不适宜及时治疗。