如图所示,在一条不完整的数轴（向右为正方向）上从左到右有点$A$、$B$、$C$,其中点$A$到点$B$的距离为$3$,点$B$到点$C$的距离为$8$,设点$A$、$B$、$C$所对应的数的和是$m$.
$(1)$若以$A$为原点,则数轴上点$B$所表示的数是______；若以$B$为原点,则$m=$______；
$(2)$若原点$O$在图中数轴上,且点$B$到原点$O$的距离为$4$,则$m=\_\_\_\_\_\_.$