L'édifice fut construit au 18^e s. sur les plans de William Kent, avec deux ailes en retour encadrant une cour où a lieu en hiver la relève de la Garde. Le bâtiment central, surmonté d'une tour-horloge, est percé de trois arches donnant sur l'immense place de Horse Guards Parade. Quartier général des Horse Guards, il joue le rôle d'entrée officielle du palais de Buckingham.