Ibu kota Bizen berada di lokasi yang sekarang menjadi kota Okayama. Sejak zaman dulu, Bizen merupakan tempat berkumpul pandai besi yang memproduksi katana terbaik di Jepang. Di zaman Muromachi, Bizen diperintah klan Akamatsu yang berkedudukan di Mimasaka. Memasuki zaman Sengoku, Bizen diperintah klan Urakami yang menjadi penguasa kota Okayama. Kekuasaan klan Urakami tidak berlangsung lama akibat ditumbangkan klan Ukita yang dipimpin Ukita Hideie (salah seorang anggota dewan Go-Tairō yang ditunjuk oleh Toyotomi Hideyoshi untuk membantu Toyotomi Hideyori). Setelah klan Ukita kalah dalam Pertempuran Sekigahara, Tokugawa Ieyasu memberikan Bizen kepada Kobayakawa Hideaki.