寶寶腋下體溫37.5℃即發熱，可通過以下方法改善：

一、物理降溫：這主要是利用熱毛巾擦拭身體，或者洗熱水澡等方式來實現。熱毛巾擦拭能帶走體表熱量，洗澡能使全身受熱均勻，從而有助于降低體溫，緩解發熱狀況。

二、理療：通常借助中醫治療手段，比如通過針灸特定穴位等。這種方法對改善體溫升高的狀態有一定幫助。

三、藥物治療：寶寶發熱可能是病毒或細菌感染引發的疾病。如果是病毒感染，可在醫生指導下使用利巴韋林片等藥物；若是細菌感染，可遵醫囑口服頭孢克肟分散片、阿莫西林膠囊等藥物。這些藥物能夠起到消炎和抗病毒的作用，有利于病情好轉。

此外，還可以通過補充水分來緩解。在治療期間，要密切關注體溫的變化。若患者經過治療后相應癥狀仍未改善，應及時就醫。總之，要根據寶寶的具體情況選擇合適的治療方法來改善發熱癥狀。