竜頭山を取り込んだ広大な敷地には館主屋、開市大庁(交易場)、裁判庁、浜番所、弁天神社のような神社や東向寺、日本人(対馬人)の住居があった。