В 1293 году шведы в ходе Третьего крестового похода возвели замок на побережье Финского залива и дали ему название Выборг, что в переводе означает «святая крепость». В течение многих лет Выборгский замок служил в качестве пограничной крепости Швеции и резиденции наместника короля.

Выборг завоеван войсками Петра I в 1710 году. Облик, известный нам сегодня, замок получил после реставрационно-строительных работ в 1891‒1894 годах. С 1970 года в здании располагается Выборгский краеведческий музей.