Knihovna vznikla za podpory svitavského mecenáše Oswalda Ottendorfera (1826 - 1900). Jeho dary přinesly městu Svitavy nejen nemocnici (1883) a sirotčinec (1884), ale i budovu veřejné knihovny a čítárny.
Oswald Ottendorfer zadal v New Yorku rakouskému architektovi Germano Wanderleyovi z Brna stavbu, která měla být důstojným reprezentantem města Svitav. Stavební práce začaly v roce 1891 a v roce 1...