Действие фильма разворачивается в американском городе Балтимор в 1954 году. Только что была отменена расовая сегрегация в американских школах, но общественное сознание все еще не ушло от данных стереотипов. Семейство Курцманов сполна ощущает на себе разделение по национальному и расовому признаку. Отец семейства скрывает, что ведет дела с чернокожим Марвином, старший сын Вэн пытается стать своим в студенческом сообществе, а младший Бен влюбляется в чернокожую девушку Сильвию. «Высоты свободы» — полуавтобиографический фильм Барри Левинсона.