1370. aastatel täiendati linnust lõunapoolse eeshooviga, mille nurkades oli kaks torni: edelas sihvakas Pikk Hermann ja kagus alt nelinurkne, ülevalt kaheksatahuline Stür den Kerl (alamsaksa Tõrju vaenlast). 1561. aastal läks Toompea Rootsi valdusesse. Rootslased ehitasid Pika Hermanni kõrvale ja konvendihoone vahelisele alale läänemüüri äärde Riigisaalihoone. 1583. aastal Tallinna ehitustöid juhtima Poola päritolu ehitusmeister Antonius Poliensis. Riigisaalihoone fassaadi keskel paiknes kuulidele toetuvate obeliskidega kahepoolne paraadtrepp, eeskuju võeti toonasest Stockholmi kuningalossist. Teisel korrusel asus suur palklaega saal ning selle lääneseina välisküljel lahtine fanfaaripuhujate rõdu. Saali valgustamiseks raiuti linnuse läänemüüri avad, mis alates 1999 on taas õhtuvalgusele avatud. Konvendihoonet kasutati Rootsi ajal ametiruumidena.
1696 Ingeri ja Rootsi bastion. Põhjasõja järel seisis linnus tühjana, kuni 17671773 rekonstrueeriti selle idatiib kubermanguvalitsuse esindushooneks (arhitekt J. Schulz). Ümberkujundused jätkusid ka 19. ja 20. sajandil. Konvendihoonesse toodi vangla, mis 1917. aastal revolutsiooni käigus maha põletati. 19201922 ehitati konvendihoone kohale Riigikogu hoone. Riigisaal Riigisaal rajati 15831590 (arhitektid A. Poliensis, H. von Aken) vastu kastelli läänemüüri Pika Hermanni ning konvendihoone vahele. Suure saali valgustamiseks raiuti lääne kaitsemüüri kolm kõrget akent, mis alates 1999 on taas õhtuvalgusele avatud. Läänemüüri taha järsaku kohale eendub trompeetri rõdu. Kahekordne renessanss-stiilis esinduslik hoone oli hoovi poolt kolmeosaline: eenduvale saaliosale liitusid otstes kõrvalruumid. Kahepoolne paraadtrepp oli kaunistatud kuulidel seisvate püramiidjate obeliskidega
väljapääsud läänes, põhjas ning hilisemates ümberehitustes lammutatud peavärav idamüüri lõunaosas. Kastelli piiras põhjast ja idast sügav, kuid kuiv vallikraav. 1561 läks Toompea Rootsi valdusesse. Rootslased ehitasid Pika Hermanni kõrvale läänemüüri äärde Riigisaalihoone. 25 meetrit pika ja 11 meetrit laia riigisaali rajamiseks saadeti 1583 Tallinna ehitustöid juhtima Poola päritolu ehitusmeister Antonius Poliensis. Konvendihoonet kõrgendati korruse võrra ja muudeti selle ruumide planeeringut. Peale Riigisaali ja kuninglike eluruumide valmimist kohtusid siin 1589. aasta augustis-septembris Rootsi kuningas Johan III ja tema poeg Sigismund - Poola kuningas ja Rootsi troonipärija. Sellest suurejoonelisest riigisaalist on säilinud kolm kinnimüüritud aknaavaust lossi läänefassaadis, Pika Hermanni kõrval müüris. 17