Den Gamle Krigsskolen slik vi ser den i dag var knyttet til en rekke ulykkelige eierhistorier før den tilslutt ble gitt til Krigsskolen av Bernt Anker i 1802. Hans bror Jess Anker var nest siste eier og holdt et stort og selskapelig hus fra 1785 til han gikk konkurs i 1798. Samme år ble eiendommen solgt til Pascal Paoli Essendrop, som året etter ble tatt for svindel og pengeforfalskning. Salget til svindleren endte i mildest talt uoversiktlige forhold, og Bernt Anker overtok brorens bo og betalte gjelden hans.