течение многих лет служил в Сенате, с начала 1840-х годов действительный тайный советник и член Государственного Совета. Он получил известность как член Секретного (затем Главного) комитета по крестьянскому делу, который разрабатывал планы отмены крепостного права. В комитете князь занял консервативную позицию, отстаивая интересы помещиков. Именно по его инициативе была принята статья о так называемом дарственном наделе. Суть её заключалась в том, что по взаимному желанию помещик мог передать крестьянам 1/4 часть «высшего» надела даром, сохранив права на всю остальную землю. Этот надел впоследствии получил название «сиротского» или «гагаринского». В то же время Гагарин выступил горячим сторонником Судебной реформы 1864 года. С этого года князь возглавил Комитет министров, а также Государственный Совет (на последнем посту пробыл недолго, с 1865 года председателем Государственного Совета стал великий князь Константин Николаевич). В 1866 году Гагарин был председателем Верховного уголовного суда по делу Д. В. Каракозова, совершившего покушение на Александра II. Умер Павел Павлович в чине действительного тайного советника 1-го класса (высший по гражданской службе табели о рангах).
Наконец, нельзя не упомянуть и о другом внуке Сергея Васильевича — князе Григории Ивановиче (1782 — 1837). С 1797 года он находился на дипломатической службе. Состоял при дипломатических миссиях в Вене, Константинополе и Париже, в 1820 — 1830-х годах являлся посланником в Риме и в Мюнхене. Ещё в Московском благородном пансионе, где Гагарин учился одновременно в В. А. Жуковским, он начал пробовать силы в литературе. Оставил несколько переводов, но потом от писательской деятельности отошёл. Тем не менее он живо интересовался культурной жизнью России, помогал молодому Ф. И. Тютчеву, покровительствовал живописцу С. Ф. Щедрину, поддерживал дружеские связи с Жуковским, Вяземским, Олениным, Брюлловым и другими видными литераторами и художниками. Гагарин был почётным членом литературного общества «Арзамас», а в 1827 году избран почётным членом Академии художеств.
Племянник Григория Ивановича — князь Иван Сергеевич (1814 — 1882), рано выйдя в отставку, перебрался в Париж, где перешёл в католичество и вступил в орден иезуитов. Написал несколько нашумевших публицистических работ по вопросам церкви. Ему необоснованно приписывалось участие в составлении писем Пушкину, послуживших причиной дуэли поэта с Ж. Дантесом.
Сын Григория Ивановича Григорий Григорьевич (1810 — 1893) — пожалуй, самый известный из князей Гагариных. Состоял на дипломатической, а затем на военной службе, достиг чина генерал-майора, принимал участие в военных действиях на Кавказе. Но настоящим его призванием была живопись. Князь прославился как талантливый художник (в молодости брал уроки у Карла Брюллова), дружил с Лермонтовым, иллюстрировал его произведения. В 1859 — 1872 годах — вице-президент Академии художеств. Среди его картин, хранящихся в Третьяковской галерее, представляет интерес полотно «Встреча генерала Клюкке фон Клюгенау с Шамилём», написанное в 1849 году. Князь расписал несколько храмов, в том числе древний Сионский собор в Тифлисе (эта роспись была варварски уничтожена уже в наши дни, когда Грузия обрела независимость).
Старший сын Григория Григорьевича — также Григорий Григорьевич (1850 — 1918), юрист по образованию, состоял депутатом I Государственной думы от партии октябристов; младший — Андрей Григорьевич (1855 — 1921) окончил физико-математический факультет Петербургского университета и Михайловскую артиллерийскую академию. Работал на Петербургском оружейном заводе, несколько лет был первым директором Петербургского политехнического института. Видному инженеру-конструктору профессору Гагарину принадлежит авторство ряда станков, приборов и приспособлений (в том числе изобрёл пресс Гагарина, предназначенный для механических испытаний металла). Один из его сыновей, Пётр Андреевич погиб в 1938 году во время сталинских репрессий. Внук Андрея Григорьевича — князь Андрей Петрович Гагарин (1934 г. р.), кандидат физико-математических наук, в настоящее время возглавляет Петербургское дворянское собрание.
Племянник художника — князь Григорий Евгеньевич Гагарин (1840 — 1903) по матери приходился внуком тайному советнику Александру Скарлатовичу Стурдзе (ум. в 1854), представителю древнего молдавского рода. В марте 1848 года Григорию Евгеньевичу было дозволено принять фамилию князя Гагарина-Стурдза, унаследовав имение деда в Бессарабской губернии. Но князь сыновей не имел, и потому род Гагариных-Стурдза, не успев начаться, угас.
Из младшей линии третьей ветви рода Гагариных происходил князь Гавриил Петрович Гагарин (1745 — 1808), действительный тайный советник, сенатор, при Павле I член Государственного Совета, главный директор Государственного заёмного банка, затем президент Коммерц-коллегии, а при Александре I — член Непременного совета. Владелец винокуренных заводов, князь поставлял казне вино, но из-за его не слишком высокого качества («с дурным запахом и подозрительною пеною») одно время при Екатерине II Гагарину запретили являться «ко двору и в публику». В 1770-х годах Гавриил Петрович занял ведущее положение среди петербургских масонов, получив высшие степени шведской системы. В 1780 году назначен председателем Великой национальной ложи и префектом капитула ложи «Феникс», почётный член ложи «Гармония», основанной Н. И. Новиковым, в 1783 году возглавил ложу «Сфинкс». Последние годы жизни князь провёл в Москве и своём имении Богословском (Могильцах) Дмитровского уезда.
В истории масонства оставил след и сын Гавриила Петровича — князь Павел Гаврилович (1777 — 1850). В молодости он служил адъютантом у Суворова, отзывавшегося о нём с похвалой, прошёл военными дорогами Итальянского похода, в 1799 году был произведён в генерал-адъютанты. В феврале 1800 года Павел Гаврилович женился на фаворитке Павла I Анне Петровне Лопухиной (1777 — 1805), чем упрочил своё положение. При Александре I князь выполнял ряд дипломатических поручений, в начале 1810-х годов являлся директором Инспекторского департамента Военного министерства, а в декабре 1814 года вышел в отставку в чине генерал-майора. В Петербурге Гагарин состоял почётным членом многих масонских лож, активно участвуя в деятельности таких из них, как «Астрея» и «Орёл Российский». В молодости опубликовал несколько поэтических сочинений, а в 1811 году издал сборник «Эротические стихотворения». Современники удивлялись странному образу жизни князя в петербургский период: его дом населяло множество птиц и собак. В то же время он собрал обширную и богатую библиотеку. В 1831 году Павел Гаврилович женился на балерине М. И. Спиридоновой.
Среди Гагариных подобный брак был не единственным. Князь Иван Алексеевич Гагарин (1771 — 1832), обер-шталмейстер, сенатор, масон и коллекционер произведений искусства, долгое время состоял в любовной связи с великой трагической актрисой Екатериной Семёновой (1786 — 1849). Они узаконили свои отношения только в 1827 году. Дети князя Гагарина и Семёновой носили фамилию Стародубских (в память о происхождении этого княжеского рода). Законные потомки Ивана Алексеевича (шесть сыновей) родились от его первого брака с Елизаветой Ивановной Балабиной.
Из них нужно упомянуть о генерал-лейтенанте князе Александре Ивановиче (1801 — 1857). Долгое время он служил на Кавказе: воевал с горцами, сражался против турок в Крымскую войну (проявил себя при штурме Карса), был градоначальником Дербента и военным губернатором Кутаиса. Немало содействовал развитию в Грузии садоводства и виноградарства. В 1857 году князя назначили кутаисским генерал- губернатором. На этом посту он начал вводить российские административные порядки на грузинских территориях, вошедших в состав Российской Империи на правах автономии. Сложности возникли в княжестве Сванетия, где правила семья князей Дадешкелиани, две линии которой вели между собой кровавую борьбу. Стремясь водворить порядок, князь Гагарин вызвал владетеля Сванетии князя Константина Дадешкелиани в Кутаис и объявил ему об аресте. В ответ Константин убил одного из солдат и смертельно ранил самого Гагарина, который пять дней спустя скончался. За это преступление Дадешкелиани был после военного суда (он числился на русской службе в лейб-гвардии Казачьем полку) расстрелян, а княжество Сванетия окончательно упразднено.
Печально завершилась жизнь и другого князя Гагарина, представителя четвёртой ветви этого рода. Правда, в отличие от Александра Ивановича, честно служившего России, Матвей Петрович сам своими действиями подписал себе смертный приговор. Начальник Сибирского приказа, при образовании губерний в 1708 году он стал сибирским губернатором. На этом посту князь составил себе крупное состояние, укрывая доходы от торговли с Китаем. Подобными махинациями он занимался, ещё когда в конце XVII века был воеводой в Нерчинске. Но тогда дело замяли, теперь же, в 1717 году, началось следствие. Матвея Петровича обвиняли в казнокрадстве и превышении власти. В начале 1719 года его арестовали и привезли в Петербург. Имения Гагарина были конфискованы, а сам он подвергся пыткам и по приговору Сената в марте 1721 года был повешен перед окнами Юстиц-коллегии. Нити следствия вели к А. Д. Меншикову, известному