Den vestlige del af huset er opført i 1878 til butik og beboelse.
Mod øst lå tidligere en bindingsværksbygning, der formentlig oprindeligt var to selvstændige bygninger. Den blev i midten af 1800-tallet ændret til en grundmuret bygning.
Ud mod Byskriverstræde var der fra begyndelsen af 1900-tallet en købmandsforretning. Den blev i mange år drevet af Albert Mortensen og efter hans død af hans enke Mary Mortensen.
Byskriverstræde 4 – Husets beboere i 1700- og 1800-tallet