Justitieminister Ken Clarke sa att regeringen också skulle samråda om axing 54 länsdomstolar.
Omkring 300 domares domstolar behandlar mindre brott, domstolsbeslut och tillståndsansökningar.
Magistrates' Association säger att det är oöverträffat av planer på att stänga underutnyttjade domstolar men varnade ministrarna för att erodera lokal rättvisa.
Charles Clarke meddelade också att det kommer att göras en översyn på hösten av lagförslaget om rättshjälp på 2 miljarder pund, där det sägs att mer måste göras för att minska kostnaderna.
Att stänga domstolarna kommer att spara regeringen minst 15 miljoner pund per år i löpande kostnader, plus en extra 22 miljoner pund i underhåll av byggnaderna. Domstolarna som är öronmärkta för nedläggning utgör 30 % av de 540 i England och Wales.
I en skriftlig ministerförklaring till parlamentsledamöter sade Clarke: "Jag kommer att se till att vi håller domstolar på de mest strategiskt viktiga platserna, samhällen fortsätter att ha tillgång till domstolar inom en rimlig restid, att mål prövas i domstolar med lämpliga faciliteter och att det finns en övergripande minskning av kostnaderna."
Charles Clarke sade att antalet och placeringen av alla domstolar inte längre återspeglade hur befolkningen hade förändrats och hur lätt eller svårt det var för människor att nå dem.
Även om samrådet kommer dagen efter budgeten har regeringen försökt sänka kostnaderna för domstolarna under en tid.
Under det senaste årtiondet har en allt större andel av de mindre brotten behandlats utanför domstol, t.ex. genom fasta böter. Vissa domstolar bara sitta en halv dag i taget, men kräver personal för längre timmar.
Domstolarna har också indirekta kostnader för transport av advokater, poliser och svarande till och från byggnaderna.
"När de offentliga finanserna är under press, är det viktigt att eliminera avfall och minska kostnaderna", säger Charles Clarke.
"Samtidigt bör vi också ta tillfället i akt att tänka om kring hur vi kan tillhandahålla modernare domstolstjänster.
"Vi använder allt mer internet och e-post för att kommunicera och få tillgång till tjänster och vi reser vidare till jobbet, för fritid och för att göra vår veckoshop. Att ge tillgång till rättslig prövning innebär inte nödvändigtvis att tillhandahålla en domstolsbyggnad i varje stad eller stad."
John Thornhill, ordförande för Magistrates' Association, sade att tjänsten hade upplevt tre års nedskärningar, vilket innebär att offren väntade längre på att rättvisa skulle skipas.
Han sade: " Magistracin har fortfarande ett mycket viktigt bidrag att ge. Föreningen har redan föreslagit innovativa och kostnadseffektiva förfaranden för att skapa rättvisa i samhället.
"Vi ser fram emot att diskutera sådana förslag med regeringen för att utveckla ett sammanhållet rättssystem där avgörande beslut om att ta itu med dem som förolämpar medborgare."
Det finns nästan 29 000 domare i England och Wales, frivilliga från lokalsamhället och de behandlar nio av tio mål som kommer inför domstol.
De flesta fall hörs av tre domare som endast får utgifter och ersättningar för att täcka inkomstbortfall. Distriktsdomare framträder också vid domarnas domstolar för att behandla mer komplicerade mål som inte behöver ställas inför rätta i full domstol.
Länsdomstolarna handlägger de flesta ärenden som anhängiggjorts enligt civilrätten. Det gäller bland annat skilsmässor och familjetvister, affärsärenden, bostadsfrågor, olycksfallsanspråk och mindre skadeståndsanspråk.
Justitieministeriet planerar att stänga 103 domstolar i England och Wales.