એવું કહેવાય છે કે આ કિલ્લાનું બાંધકામ પીળા પથ્થર અને માટીથી કરવામાં આવ્યું હતું જેને લીધે જ્યારે સૂર્યનાં કિરણો આ કિલ્લા પર પડે તો એવું લાગે જાણે આ કિલ્લો સોનામાંથી જ બન્યો હોય.