B

$A$、硝酸铵溶解吸热，溶液温度降低，装置中的压强减小，则气球不会鼓起，故$A$错误；
$B$、氢氧化钠溶解吸热，溶液温度升高，装置中的压强增大，则气球会鼓起，温度降低，装置中的压强减小，气球又会恢复原状，故$B$正确；
$C$、过氧化氢在二氧化锰催化作用下生成水和氧气，气体增多，压强增大，气球会鼓起，但气球不会恢复原状，故$C$错误；
$D$、氯化钠溶解时溶液温度几乎不变，气球不会鼓起，故$D$错误。
故选：$B$。