B

$A$.初中物理课本一张纸的厚度约为$0.1mm$，故$A$不符合实际；
$B$.中学生立定跳远的距离大约在$1.5\sim 2.3m$之间，故$B$符合实际；
$C$.成年人正常步行的速度约为$4km/h\approx 1.1m/s$，故$C$不符合实际；
$D$.人的体温约为$37^{\circ}\mathrm{C}$，洗澡水的温度略高于人的体温，所以洗澡水的温度约为$40^{\circ}\mathrm{C}$，故$D$不符合实际。
故选：$B$。