Родился 9 января1764 года в Лидсе в скромной семье владельца трактира.
Обучившись кожевенному делу, открыл собственное производство по дублению кожи. После смерти старшей дочери в 1789 году пошел на военную службу солдатом в королевский полк конной гвардии.
Военная карьера
Принимал участие в военной кампании во Фландрии (1793—1795).
Геройски проявил себя в битве при Талавере (1809). В чине полковника был назначен заместителем командующего кавалерией в битве при Ватерлоо[2], был тяжело ранен в бою.
После выздоровления и окончания войны, Эллей был направлен на службу в Ирландию. В августе 1819 года ему было присвоено звание генерал-майора. В августе 1822 королём Георгом IV в дублинском замке ему был вручен Орден Бани.
Затем он был назначен начальником провинции Коннахт, а затем губернатором Голуэя (с 1826 года).
15 июля1830 года на государственных похоронах Георга IV Эллей был одним из группы старейших армейских и морских офицеров, которые поддерживали фиолетовый бархатный полог, как это было принято в Виндзорском замке при похоронных службах.