Karierę piłkarską Rabier rozpoczął w klubie Stade Lannionnais. W 1972 roku przeszedł do Stade Rennais. Grał w nim do 1979 roku i wtedy też przeszedł do Valenciennes FC. Tam grał przez 3 sezony, a w 1982 roku zmienił klub i został piłkarzem Stade Lavallois, z którym w sezonie 1983/1984 wystąpił w Pucharze UEFA. W 1984 roku zdobył z Laval Puchar Ligi Francuskiej. W sezonie 1984/1985 był piłkarzem RC Lens, w barwach którego zakończył karierę.