Здание Панорамы возведено на Историческом бульваре, бывшем 4-м бастионе Севастополя. Заказ на создание картины "Штурм 6 июня 1855 г" получил основоположник отечественной школы батальной и панорамной живописи Ф.А Рубо. 14 (27) мая 1905 года панорама была открыта. Так в России ознаменовали 50-летие трагической и героической обороны города.
25 июня 1942 года, во время второй обороны Севастополя из-за налета фашистской авиации и артобстрела здание панорамы загорелось. При спасении художественное полотно разрезали на части, удалось спасти 86 фрагментов – 2/3 картины, на лидере эсминцев "Ташкент" их вывезли в Новороссийск, впоследствии доставили в Новосибирск и Москву.
К 100-летию 1-ой обороны города было принято решение воссоздать панораму, основой стали спасенные фрагменты. Панорама, получившая название "Оборона Севастополя 1854–1855 гг.", открылась 16 октября 1954 года в восстановленном здании. Капитального ремонта здания с тех пор (до нынешнего момента) не проводилось.
"Жить полотну и предметному плану оставалось недолго, если бы не реставрация" - прокомментировал директор музея героической обороны Севастополя Михаил Смородкин ситуацию с кровлей исторического здания Панорамы. Деревянные несущие конструкции кровли полностью сгнили. Сейчас идет их ремонт.
Реставрация исторического здания панорамы ведется с 2022 года, ее планируется завершить в 2024 году. Стоимость работ (включая работы с фундаментом, фасадом, окнами, кровлей, инженерными сетями) составляет 711 миллионов рублей. По окончании работ начнется реставрация самого полотна Рубо, ее завершат в 2025 году.
