在平面直角坐标系$xOy$中,二次函数$y=\left(x-1\right)^{2}-4$图象顶点为$A$,与$x$轴正半轴交于点$B$.
$(1)$求点$B$的坐标,并画出这个二次函数的图象；
$(2)$一次函数$y=kx+b$的图象过$A$,$B$两点,结合图象,直接写出关于$x$的不等式$kx+b \gt \left(x-1\right)^{2}-4$的解集.