小孩儿一直37.5℃的低烧，考虑有可能存在感染性的因素，例如胃肠道的感染或者呼吸系统的感染，家长这时应当注意观察一下孩子的临床症状，看看孩子是否存在咳嗽、鼻塞等一些呼吸系统的症状，还要观察孩子是否存在腹胀、腹泻等一些消化系统的症状。

如果存在上述的情况，可以给孩子使用一些抗生素的药物来进行治疗，如果没有其他明显的临床症状，只是单纯的发低烧，考虑孩子有可能发生婴儿急疹或者存在结核感染等一些疾病，建议家长可以带孩子到正规医院，进行一下相关的检查，明确诊断之后，对症进行治疗。