В 1956 году он вернулся в «Атлетико Мадрид». Он дебютировал в Ла Лиге 21 сентября 1958 в матче против «Валенсии». Ривилья выиграл одну Ла Лигу и три Копа дель Рей. С «Атлетико» также выиграл Суперкубок Европы.
Ривилья ушёл из футбола в 1968 году после десяти сезонов в Ла Лиге с «Атлетико Мадрид». Он сыграл 356 матчей во всех соревнованиях с «Атлетико», 244 из которых в национальной лиге, 66 в Копа дель Рей и 46 в еврокубках. За это время забил 7 голов. Он сыграл 26 игр в испанской сборной. Ривилья дебютировал 10 июля 1960 в матче против сборной Перу. Он выиграл чемпионат Европы в 1964 году, сыграв во всех играх.