В 1956 году Правительством СССР было принято решение о строительстве на Крымской набережной нового здания Третьяковской галереи в комплексе с Выставочным зданием Союза художников СССР. Проект был выполнен в 1962-1963 гг. авторским коллективом мастерской И.В. Жолтовского (архитекторы Ю.Н. Шеведряев, Н.П. Сукоян, В.В Васильева, М.Н. Круглов, П.И. Скокан) и принят к осуществлению в марте 1964 года.
Осуществленный проект представляет собой наиболее целесообразное, экономически обоснованное и функционально оправданное объединение в одном комплексе картинной галереи (нового здания Третьяковской галереи) и выставочных залов для временных выставок (Центральный дом художника).