Il castello venne costruito nel 1341 per ordine di Luchino Visconti in seguito alla conquista del borgo. Fino al 1513, anno in cui la famiglia milanese lasciò il controllo della regione comprendente il Lago Maggiore, l'edificio funse da alloggiamento per le guarnigioni oltre che da fortificazione di difesa. Nel corso dei secoli successivi subì numerose ristrutturazioni e venne anche distrutto più volte. È sede del Museo civico e archeologico di Locarno, famoso per la vasta collezione di vetri romani.