Дворец святого Джеймса — одна из достопримечательностей архитектуры прежних столетий. Он не похож ни на крепости периода средних веков, ни на дворцы эпохи Возрождения — это строение XVI века скорее напоминает английские дворцы периода правления Тюдоров. Сделан дворец из кирпича красного цвета, а территория, на которой он был построен, принадлежала больнице.

В XVII веке Яков V приказал построить у дворца капеллу.

В 1809 году Дворец святого Джеймса вместе с капеллой горел, однако был реставрирован с небольшими изменениями (кирпич стал более темного цвета, изменилась некоторая часть капеллы).

В наши дни во дворце ведет свою работу Британский суд, а другая часть дворца используется принцем Уэльским в качестве офиса, в котором принимаются послы из других стран.