上海音乐学院前身是伟大的民主革命家、杰出的教育家、思想家蔡元培先生和音乐教育家萧友梅博士于1927年11月27日共同创办的国立音乐院。首任院长为蔡元培先生。1929年9月更名为国立音乐专科学校。中华人民共和国成立后，于1956年定名为上海音乐学院。自1949年至1984年，著名作曲家、音乐理论家、音乐教育家贺绿汀担任院长（后任名誉院长），为学校的建设及发展做出了卓越的贡献。1984年后，桑桐、江明惇、杨立青教授曾先后任院长。学院现任党委书记：林在勇，现任院长：许舒亚。

学院面向全国招收本专科生、硕士研究生、博士研究生，并招收外国留学生。学院设有14个系（部），即作曲系、指挥系、音乐学系、民族音乐系、钢琴系、声乐歌剧系、管弦系、音乐教育系、音乐戏剧系、艺术管理系、音乐工程系、现代器乐与打击乐系、公共基础部、研究生部等。涉及6个专业(作曲与作曲技术理论、音乐学、音乐艺术表演、录音艺术、公共事业管理、音乐科技与艺术)、近20个专业方向，既包括了具有雄厚根基的传统专业，也有若干新建的新兴学科与交叉学科。