Bute House har adresse 6 Charlotte Square, i Edinburghs New Town, og er det midtre huset på nordsiden av plassen, designet av Robert Adam.