Fundada por el escritor y político catalán Víctor Balaguer i Cirera, esta biblioteca museo fue inaugurada el 26 de octubre de 1884. Es uno de los primeros edificios construidos de nueva planta en Cataluña con la finalidad específica de mostrar colecciones al público y facilitar el acceso a la cultura.
La estructura arquitectónica inicial estaba formada por dos alas simétricas: una destinada a biblioteca y la otra, a museo. A pesar de las sucesivas ampliaciones que han aumentado el espacio expositivo modificando la planta, la fachada todavía conserva el aspecto de un templo ornamentado con diferentes elementos decorativos de inspiración egipcia y griega.
La colección original estaba formada por el conjunto de libros y objetos artísticos que el fundador había reunido a lo largo de su vida, junto con numerosas donaciones que, desde el primer momento, la enriquecieron. En la planta baja se sitúan la biblioteca histórica y las salas donde se exhiben las colecciones que ingresaron en vida de Balaguer, y en el primer piso se exponen los legados artísticos que llegaron a la ciudad de Vilanova i la Geltrú en el transcurso del siglo xx.