5 декабря 1741 года Илларион Гаврилович Воронцов был пожалован из майоров (VIII класс Табели о рангах) прямо в статские советники (V класс), а 20 сентября следующего года, получил чин действительного статского советника и орден Святого Александра Невского. Причиной тому послужила женитьба Михаила Илларионовича на Анне Скавронской — двоюродной сестре императрицы. Известно, что Елизавета Петровна ее очень любила.
Спустя 4 года 70-летний И.Г. Воронцов согласно своему прошению был пожалован в тайные советники с увольнением от службы.
Скончался в Москве 25 мая 1750 года в возрасте 76 лет и был похоронен подле жены в монастыре на Воздвиженке. В браке с Анной Григорьевной Масловой (1684–1740 гг.) Илларион Гаврилович Воронцов имел четверых детей: Романа, Михаила, Ивана, Дарью.