B

$A$、成年人正常步行的速度在$4km/h=4\times \frac{1}{3.6}m/s\approx 1.1m/s$左右。此选项不符合实际；
$B$、中学生伸开手掌，大拇指指尖到中指指尖的距离大约$20cm$，初中物理教科书的长度略大于$20cm$，大约在$25cm\sim 27cm$之间。此选项符合实际；
$C$、$10$个鸡蛋的质量大约$1$斤，而$1$斤$=500g$，所以一个鸡蛋的质量在$50g$左右。此选项不符合实际；
$D$、正常情况下，人的脉搏$1\min$跳动$75$次，跳动$1$次的时间大约$1s$.此选项不符合实际。
故选：$B$。