如图,在数轴上点$A$表示的有理数为$-6$,点$B$表示的有理数为$6$,点$P$从点$A$出发以每秒$3$个单位长度的速度在数轴上由$A$向$B$运动,当点$P$到达点$B$后立即返回,仍然以每秒$3$个单位长度的速度运动至点$A$停止运动.

$(1)$求当运动时间为$1$秒时点$P$表示的有理数；
$(2)$当点$P$与点$B$重合时,求运动时间；
$(3)$当点$P$表示的有理数与原点的距离是$3$个单位长度时,直接写出运动时间.