Родился в 1792 году в Карасубазаре, происходил из армянских дворян и был армяно-католиком. Взял фамилию Серебряков, что является переводом армянской фамилии Арцатагорцян, означающей «серебряных дел мастер» или ювелир.

Свою военную карьеру начал в 1810 году как волонтёр на Черноморском флоте. В 1814 году стал гардемарином, в 1815 году, мичманом, в 1820 году, лейтенантом, а в 1828 году, капитан-лейтенантом, при этом был назначен на службу при начальнике Главного морского штаба.

Участвовал в Русско-турецкой войне 1828-1829 годов. В 1828 году отличился при взятии Анапы и блокаде Варны, за что получил орден Св. Владимира 4-й степени с бантом. В 1829 году участвовал в захвате Месемврии и Мидии и был зачислен в Гвардейский экипаж за заслуги против турок.

В 1832 году получил чин капитана 2-го ранга и служил в экспедиционном отряде генерала Муравьёва под Константинополем и в Египте. В 1834 году командовал кораблём «Полтава» и плавал у Кавказских берегов Чёрного моря, участвуя в столкновениях с горцами. В 1836 году награждён орденом Св. Георгия 4-й степени. В 1837 году стал капитаном 1-го ранга и дежурным штаб-офицером по морским делам, а в 1838 году произведён в контр-адмиралы и награждён орденом Св. Владимира 3-й степени. Также получил золотую полусаблю с надписью «За храбрость».

На службе Серебряков отвечал за морскую логистику: доставку войск, эвакуацию раненых, снабжение и артиллерийскую поддержку. Он также участвовал в сухопутных боях с горцами.

В 1839 году стал командиром 1-го отделения Черноморской береговой линии и начальником Новороссийского порта, где руководил строительством укреплений. У него возник конфликт с комендантом Анапы полковником Ротом, который обвинил его в покушении. После переговоров конфликт был улажен, и Серебряков остался в Новороссийске, а Рот был переведён в Дагестан.

В 1840 году награждён орденом Св. Станислава 1-й степени, в 1842 году, орденом Св. Анны 1-й степени, а в 1844 году получил императорскую корону к этому ордену. В 1848 году стал вице-адмиралом и получил орден Св. Владимира 2-й степени, в 1850 году, орден Белого Орла. В 1851 году назначен начальником Черноморской береговой линии и в 1852 году удостоен ордена Св. Александра Невского.

Во время Крымской войны возглавлял береговую оборону на Черноморском побережье Кавказа. После затопления Черноморского флота Нахимовым, Серебряков руководил разбором укреплений и эвакуацией в Новороссийск. При переносе боевых действий к Карсу он отбивал укрепления, занятые турками в Грузии. В 1856 году был отставлен, произведён в адмиралы и стал членом Адмиралтейств-совета.

Серебряков погиб в результате несчастного случая. В 1861 году, находясь в своём крымском имении, он повредил ногу при спуске с горы и после простуды в Петербурге скончался 28 февраля 1862 года. Похоронен в Карасубазаре в фамильном склепе.

Хотя Серебрякову пришлось эвакуировать укрепления Черноморской береговой линии, это не помешало русским войскам завершить покорение Кавказа менее чем через десять лет. Брошенные укрепления стали основой будущих курортных городов России и Абхазии.