Villaen i Oscars gate 31 ble oppført i 1860 av fideikomissbesitter Valentin Wilhelm Hartvig Huitfeldt-Kaas etter tegninger av arkitekt G. A. Bull. Bygget tilhørte senere sønnen, riksarkivar Huitfeldt-Kaas, og har tilhørt samme familie siden det ble oppført.