O Museu de Alberto Sampaio localiza-se num edifício plurissecular, em pleno Centro Histórico de Guimarães, que é, desde 2001, Património Cultural da Humanidade.

Trata-se de uma construção de elevado valor patrimonial, com vários níveis de classificação, o que impõe limites a intervenções de caráter estrutural. O Museu não possui, por isso, por enquanto, nem rampas de acesso nem elevadores, fazendo-se o acesso à entrada principal e às salas de exposição apenas através de escadas.