Пам'ятник археології «Усть-Шексна» знаходиться при впадінні Шексны в Волгу, на її правому березі. Він стоїть на місці великого торгово-ремісничого поселення 11-16 ст., які було попередником Рибінська.

З 1991 р. тут ведуться археологічні охоронні розкопки силами Рыбинской археологічної експедиції. У 2005 р. тут побудували сторожову вежу з частоколом, в якій відкрито першу чергу інтерактивного археологічного музею. У 2006 р. було встановлено пам'ятний знак, який являє собою зображення давньоруського воїна. З 2007 р. тут проводять екскурсії. У 2009 р. була зведена каплиця.

Імовірно, заселення земель в районі нинішнього Рибінська відноситься до часів правління Ярослава Мудрого. Християнізація російського півночі проходила в напрямку до вододілу Волга – Шексна, а потім йшла вище – до Белоозеру до Білого моря.

Близько 1071 р. відбулося повстання смердов під проводом двох волхвів. Вони рухалися по Волзі і Шексні від Ярославля до Белоозера, нападали на людей і вбивали жінок, які зберігали харчі в голодний час. В цей час сюди прийшов від Святослава Ян, син Вышаты, для збору данини. Білозерці розповіли йому про безчинства двох волхвів. Приходячи в поселення (до їх числа входило, ймовірно, і поселення в місці злиття Волги і Шексны), волхви вбивали жінок з сімей старійшин. Ян Вышатич зробив спроби схопити волхвів, але це йому не вдалося. Але все-таки у нього вийшло умовити бєлозерцев віддати йому волхвів. Ян віддав їх родичам загиблих жінок, і вони повішали їх. Про це говориться в «Повісті тимчасових років». При цьому передбачається, що при описі цих подій згадується рибінська Усть-Шексна. Це вважається першою згадкою про поселення, що розташоване на місці сьогоднішнього Рибінська.

Але згідно археологічним розкопкам виходить, що люди в місці впадання Шексны в Волгу жили і в більш ранній час. Час виникнення поселення відносять приблизно до 9 ст. Про це свідчать знайдені артефакти 9-10 ст.: срібні арабські монети, кулясті і золото-скляні намиста з сердоліку, трубчасті игольники та ін.

У 11-13 ст. отримав значний розвиток торговому шляху Волга-Шексна-Балтика поселення виглядало як великий ремісничо-торговельний центр, в якому жило кілька тисяч жителів. Основний дохід приносили металургійне, ювелірне, ковальське, гончарне, косторізне виробництва, які обслуговували «міжнародну» торгівлю.

Знайдені археологами написи-графіті, книжкові застібки, писала, свідчать про грамотність населення. Городяни до того ж були досить заможними. Про це говорять предмети з позолотою і емаллю. Про професіоналізм воїнів, що захищали місто, можна судити по знахідках обладунків (знайдені фрагменти пластинчастого обладунку і кольчуги) і зброї (бойові сокири: чекани і сокири, списи, сулицы, кистени, «часник»).

У південній частині археологічного пам'ятника розташовані фрагменти будівельних комплексів: частоколи, 5 зрубних будівель, дощата вимостка двору. Вдалося відновити план декількох будівель, інші будівлі були реконструйовані з плям заповнення припечных, підпільних ям, розвалам печей. На площі майже в 700 кв. м. знайдені залишки п'ятнадцяти будівель. Вони були рознесені по відповідним будівельним ярусах. Основний тип споруд стародавнього поселення – наземні будинки. У житлових будинках були глинобитні печі-вогнища. Є будинки великих розмірів і двокамерні будови.

Планування центральній частині поселення – в кілька рядів, розташована паралельно Шексні. Знайдені сліди огорож між садибами: до середини 12 ст. тут були характерні тини, потім – частоколи, в т. ч. і подвійні. У північній частині археологічної пам'ятки про будовах можна здогадуватися лише за материковим ямах, скупченням фрагментів кераміки та індивідуальних знахідок.

Інтерес представляють підлогові плитки і фрагменти грубоформованных цеглин. Наявність саме цих «міських ознак» підтверджує високий статус даного поселення.

Занепад Усть-Шексны стався в 14-15 ст. Цьому сприяло татаро-монгольська навала, епідемії чуми. У 14 ст. була втрачена північна, а в 15 ст. центральна частина міста. Але поселення не згасало: за джерелами 15 ст. воно описується як адміністративний центр уділу Шехонских князів з промисловими та митними функціями.

В кінці 15 ст. Усть-Шексна перейшла у володіння Андрія Углицького. Доходи знаменитих Шехонских рибних «вилов» і митних зборів стали причиною «нелюбові» до нього Івана III, старшого брата. Це суперництво стало причиною заснування Іваном III правобережної Рибної слободи, яка має пільгове оподаткування. Загибель Андрія Углицького і реквізиція на користь слобідських ловців рибних ловів поставили усть-шекснинцев перед злиднями перейти на службу великому князю Московському.

Таким чином, Усть-Шексна стала першопричиною появи Рибної слободи, яка прийняла функції і поглинула населення найдавнішого що існував на протязі 500 років міського центру.