Musée d'art consacré prpincipalement aux oeuvres d'Henri de Toulouse Lautrec. Le musée est situé dans l'enceinte du Palais de la Berbie, forteresse datant du XIIIe siècle et ancienne résidence des évêques d'Albi, en plein coeur de la cité épiscopale classée au Patrimoine Mondial de l'UNESCO.
À la mort de Lautrec, en 1901, ses parents, dépositaires de son œuvre, cherchèrent à en faire donation à un musée. Devant le refus des musées parisiens, sa mère, la comtesse Adèle de Toulouse-Lautrec, proposa ce don à la ville d'Albi. Nourrissant depuis plusieurs années l'idée de fonder un musée, et disposant des locaux désormais désaffectés du palais, la mairie accepte la donation. Mais, avec la Première Guerre mondiale, le projet prend du retard et c'est finalement le 30 juillet 1922 que s'ouvrent les premières salles d'exposition.