Вскоре после завершения Крымской войны (1853–1856) в России возникло движение за увековечивание памяти героев обороны. По всей стране начался сбор средств на строительство памятников. Особенно активная работа проводилась в период подготовки к празднованию 50-летия обороны Севастополя.

В местах расположения бастионов и батарей были установлены памятники и мемориальные доски. 14 мая 1905 года на месте бывшего 4-го бастиона была открыта панорама «Оборона Севастополя» — замечательное произведение мастера батальной живописи Франца Рубо, сразу получившее широкую известность.

Огромное полотно длиной 115 метров и высотой 14 метров изображает отражение русскими солдатами генерального штурма англо-французскими войсками Малахова кургана и укреплений Корабельной стороны 6 июня 1855 года.

Во время Великой Отечественной войны, в июне 1942 года, здание панорамы было частично разрушено в результате бомбардировок и обстрелов. Большая часть полотна сгорела. 86 спасённых фрагментов были эвакуированы на корабле «Ташкент» на Кавказ, а затем переправлены в Новосибирск и Москву.

Почти десять лет потребовалось художникам студии имени Грекова, чтобы, опираясь на эскизы, фотографии и словесное описание полотна, восстановить его. Руководили этой масштабной работой академики живописи В. Яковлев и П. Соколов-Скаля.

16 октября 1954 года состоялось второе открытие панорамы.