Kastelholma Castle esmakordselt mainitud kroonikas 1388 kui "House Kastelholma." Täpne kuupäev asutamisest lossi, kuid ei ole teada. Kuna lõpuks XV sajandi loss oli administratiivne keskus ja saarestikus on mänginud olulist strateegilist rolli, samuti jahilossiks Rootsi kuninganna.

Käesoleval kujul loss on keeruline arhitektuurilist ehitada ja laiendada ajavahemikul lõpuks XIV keset XVII sajandil. Aastal 1745 lossi oli laastav tulekahju. Ainult kahekümnendal sajandil, see taastati ja avati avalikkusele.

Near loss kaks muuseumid on avatud. Üks - State Prison Museum Vita Björn, mis asub vana vangla hoone. Vtooy - vabaõhumuuseum Jan Karlsgordena, kus saab näha enam kui kakskümmend Aland traditsioonilisi maju ja veskid XIX sajandil. Vanades inn külastajad töödeldud rahvustoite.