O Museu-Biblioteca Condes de Castro Guimarães encontra-se instalado no edifício inicialmente conhecido por “Torre de S. Sebastião”. Foi mandado construir em 1900 por Jorge O’Neill segundo projeto do pintor Francisco Vilaça. Este edifício inserido na designada arquitetura de veraneio, de acentuado ecletismo, combina chaminés a recordar as dos palácios medievais, torres fortificadas, janelas ogivais, “arcadas manuelinas”, cúpulas de feição bizantina, varandas italianas e os nossos tão característicos alpendres minhotos. Esta combinação, de formas e estilos, recorre a elementos decorativos neo-góticos e neo-árabes, próprios do revivalismo Oitocentista de marcado gosto romântico. Em 1910 o edifício foi adquirido pelos Condes de Castro Guimarães que, em 1924, legaram em testamento ao povo de Cascais a sua casa, a “Torre de S. Sebastião”, os objetos de arte e livros, para nela se instalar um Museu Municipal e Biblioteca Pública para usufruto da população. O edifício está enquadrado pelo Parque Marechal e pela Capela de S. Sebastião que faz parte integrante do património edificado do Museu. O Museu abriu oficialmente em 1931 e, desde essa data, tem-se mantido regularmente aberto ao público, realizando diversas atividades de índole cultural e lúdico/pedagógicas destinadas a diferentes tipos de público.