Het herenhuis van het landgoed Hartenlust is in 1847-1848 gebouwd naar ontwerp van de Amsterdamse architect M. G. Tétar van Elven. De opdrachtgever was Jan Borski (18071891) gehuwd met Olga E.Sillem (1814-1899). De bouw van het witgepleisterde neoclassicistische huis werd gegund aan de Bloemendaalse aannemer Lambert Rouwens, kleinzoon van de stichter van het bedrijf Rouwens in de 18e de eeuw.
Bij de aankoop van Hartenlust door Jan Borski bestreek het landgoed in het centrum van Bloemendaal ruim 34 hectaren. Kort voor de aanvang van de bouw van het nieuwe huis werd het oude 17de eeuwse herenhuis afgebroken.
