La torre de San Olav es la antigua torre de Castillo de Vyborg. Es un símbolo y un hito arquitectónico de la ciudad de Viborg.

La fortaleza fue concebida por Torkel Knutsson, el condestable de Suecia, quien dirigió en 1290 una cruzada a Carelia, la Tercera Cruzada de Finlandia, que en realidad dirigida contra la Novgorod de Rusia.

Él eligió la ubicación de la nueva fortaleza en la Bahía de Viborg, que era un sitio de comercio ya los lugareños usaron por mucho tiempo. Desde la bahía, había un río que lleva hacia el interior, en última instancia, el lugar de conexión a varios distritos, los lagos, y también, indirectamente, a los ríos van al lago Ladoga.

A mediados de siglo 16 el rey sueco Gustavo Vaza reconstruyó una fortaleza para la expansión de las fronteras del Estado en el este. En 1525 el alemán conde Johan von Hoya, hermano de la ley de Gustav Vaza, se convirtió en diputado del castillo. En lugar de tomar acciones para fortalecer el castillo como una fortaleza militar, comenzó a organizar bailes y torneos que exige gastos considerables. El rey Gustavo envió un ejército para la conquista de Vyborg y el conde Johan von Hoya huyó a Lübeck.

En 1555, cuando Gustav Vaza se estaba preparando para su próxima guerra con Rusia visitó Vyborg y pasó algún tiempo viviendo en el castillo.  Tras la Segunda Guerra Mundial el territorio en el que la torre se pasa bajo la jurisdicción de la Unión Soviética.

El castillo de la zaga como una instalación militar y después de 1964 fue transferido al Museo del Estado de Viborg de la tradición local. El Castillo de Vyborg y ahora es visto como un monumento único de la arquitectura militar de Europa occidental que fue moldeado por los acontecimientos del 13 a través de siglos 19. Desde 2000, el museo ha sido conocido como el Museo del Estado «Vyborg Castillo».