Het grote, dubbele witgepleisterde oude pand, kan al gebouwd zijn begin 18de eeuw. In de Franse tijd, zo omstreeks 1800, is het een herberg met stalhouderij onder de naam van Huis Ter Kleef. Het pand is dan eigendom van de Bloemendaalse aannemer Lambert Rouwens en de huurder is herbergier Jacob Looye. In het midden van de vorige eeuw ratelden er de machines voor het weven van textiel.
