B

成年人拇指至中指之间一拃的长度约为$18cm$。
$A$.根据生活实际可知，一张纸的厚度在$0.008mm$左右，故$A$不符合题意；
$B$.根据生活实际可知，一只铅笔的长度和成年人拇指至中指之间一拃的长度相当，在$20cm$左右，故$B$符合题意；
$C$.根据生活实际可知，教室灯管的长度在$110cm$左右，故$C$不符合题意；
$D$.根据生活实际可知，粉笔的长度在$8cm$左右，故$D$不符合题意。
故选$B$。