Rabjerg området var en del af Bækbo ejerlav. Området var 1800 tallets begyndelse delt op i to landsbyer Vester og Øster Rabjerg. Siden er der kommer mange nye ejendomme til.
I Vester Rabjerg lå sognets biskole i Rabjervej 4.