Більшість жителів були саме фінами та шведами, а чи не російськими.
1802 року Виборзька губернія стала Фінляндською, а 1811 року отримала колишню назву, але вже у складі Великого князівства Фінляндського. Надалі, до XX століття, історія Виборга майже немає великих подій: у ньому стоїть російський гарнізон, розвиваються торгівля і промисловість.
13 (24) червня 1710 р. в ході Північної війни між Росією та Швецією 1700-1721 р.р. російські війська на чолі з Петром I переможно вступили у шведську фортецю Виборг. Петро I надавав великого значення взяттю Виборга, оскільки володіння містом закріпило за російською державою вихід до Балтійського моря
За результатами Ніштадтського світу 1721 місто повернули Росії і знову назвали Сердоболем. 1783-го Сердоболь включили до складу Великого князівства Фінляндського у складі Російської імперії, визначивши його подальшу долю і у складі незалежної Фінляндії 1918–1940 років.