I ett brev till Daily Telegraph sa de att tidig skolgång orsakade "djupa skador" på barn.
De efterlyser större tonvikt i läroplanen på att lära sig genom lek.
Den engelske utbildningsministern Elizabeth Truss sade att det senare skulle skada försöken att överbrygga klyftan mellan rika och fattiga.
Undertecknarna av brevet, inklusive akademiker, lärare och vissa författare och välgörenhetsorganisationer, sade att det nuvarande systemet fokuserade för mycket på formell utbildning, såsom "tre Rs", i för tidig ålder.
De sade att nationell politik borde omprövas för att göra dem mer lika utbildningssystemen i Skandinavien.
I Nordirland är den lagstadgade åldern för inträde i skolan fyra år.
I England, Skottland, Wales, Cypern och Malta är åldern fem år.
Den lagstadgade åldern är sex i Österrike, Belgien, Kroatien, Tjeckien, Danmark, Frankrike, Tyskland, Grekland, Ungern, Island, Norge, Portugal, Rumänien, Irland, Italien, Liechtenstein, Luxemburg, Nederländerna, Norge, Portugal, Rumänien, Slovakien, Slovenien, Spanien, Schweiz och Turkiet.
Åldern är sju år i Bulgarien, Estland, Finland, Lettland, Litauen, Polen, Serbien och Sverige
(Figurer från den nationella stiftelsen för utbildningsforskning (NFER))
Dina kommentarer
I brevet stod det att barn som gick i skolan vid sex eller sju års ålder "på ett konsekvent sätt uppnår bättre utbildningsresultat såväl som högre nivåer av välbefinnande".
Det undertecknades av 127 experter inklusive Lord Layard, chef för Well-Being-programmet vid London School of Economics; universitetslektor i psykologi vid Cambridge University Dr David Whitebread, och chef för Play England Catherine Prisk.
En annan av undertecknarna, före detta barnkommissionären för England Sir Al Aynsley-Green, sade: "Om man tittar på ett land som Finland börjar man inte med formell, fullskalig utbildning förrän de är sju år gamla.
"Dessa extra år utgör enligt min mening en avgörande möjlighet, när de stöds av välutbildad, välbetald och välutbildad personal, för barn att vara barn."
Brevet skickades av kampanjgruppen Save Childhood Movement, som har lanserat en kampanj som heter Too Much, Too Soon.
Gruppstiftaren Wendy Ellyatt sade: " Trots att 90 procent av världens länder prioriterar socialt och känslomässigt lärande och börjar skolan vid sex eller sju års ålder, tycks vi i England vara fast beslutna att hålla fast vid den felaktiga uppfattningen att det förr betyder bättre resultat senare.
"Det är inget fel med att söka höga utbildningsstandarder och ansvarsskyldighet, men det är säkert något mycket fel om detta kommer på bekostnad av naturlig utveckling."
För närvarande går de flesta barn i England till förskola vid tre eller fyra års ålder innan de börjar skolan i september efter sin fjärde födelsedag och tillbringar ett år i mottagningsklassen.
Lagligt sett måste alla barn i England vara heltidsutbildade efter sin femte födelsedag.
Utbildningsminister Elizabeth Truss avvisade uppmaningar om formell skolgång för att börja senare i England, säger att detta skulle skada livs chanserna för barn från fattigare hem.
"Jag tror att kampanjen är felheaded," berättade hon för The World at One på BBC Radio Four.
– Just nu har vi en av de största klyftorna mellan låginkomsttagare och höginkomsttagare. Och om skolgången skulle bli försenad, skulle det betyda att det var ännu senare som vi började arbeta på att överbrygga den klyftan. Och jag tycker att det är ett enormt problem."
Tidigare hade en källa nära utbildningssekreterare Michael Gove sagt till telegrafen att brevförfattarna var "missriktade".
"Dessa människor representerar den mäktiga och dåligt missriktade lobbyn som är ansvariga för devalveringen av examen och kulturen av låga förväntningar i statliga skolor," sade han.
Från Angela Harrison Education korrespondent, BBC News
Den ålder vid vilken barn bör börja sin formella skolgång har debatterats intensivt i många år.
Denna kampanj och brev till telegrafen har ökat styrkan eftersom det kommer som regeringen i England samråder om huruvida man ska föra in en ny bedömning av barn så snart de börjar i mottagningskurser.
För närvarande kontrollerar lärarna barnens förmågor inom en rad olika områden under sitt mottagningsår, men enligt de föreslagna ändringarna kommer denna kontroll att genomföras tidigare och användas som riktmärke.
Det flöt som en idé av chefen för Ofsted, Sir Michael Wilshaw, som sade att det fanns ett behov av en mer tillförlitlig bedömning av barn när de började skolan så att deras framsteg kunde mätas bättre när de flyttade upp och lämnade skolor.
Samtidigt finns det krav på större flexibilitet när det gäller skolans startålder i Nordirland, där eleverna börjar vid fyra.
De som stöder en övergång till en senare start pekar på skillnaderna runt om i världen och i synnerhet på Sverige och Finland, där den lagstadgade åldern för att börja skolan är sju år.
Barn i dessa länder går vanligtvis i formell skolgång senare än de i Storbritannien, men de har vanligtvis varit i en förskola eller förskola där de har lärt sig genom lek och lek.
Tidigare i veckan uppgav Nordirlands utbildningsminister John O'Dowd att han var villig att införa nya regler för att tillåta flexibilitet i skolans startålder.
Forskare sade att Nordirland hade den lägsta lagstadgade inträdesåldern i Europa, vid fyra års ålder.
I England samråder regeringen om huruvida man ska föra in vad den kallar en "enkel baslinjekontroll" i början av mottagandet, från vilken barns framsteg kan mätas för ligatabell och Ofsted inspektionsändamål.
Det skulle också visa föräldrar vilka framsteg deras barn gjorde under de första åren av grundskolan, sägs det.
För närvarande bedöms barnen av sina mottagningslärare någon gång under året, men resultaten används inte formellt i redovisningsåtgärder som ligatabeller.
De framsteg som barnen gör i grundskolan mäts för närvarande formellt från resultaten av nationella (Sats) tester på engelska och matematik som tas av barn vid sex eller sju års ålder och deras lärares bedömning av deras förmågor.
Regeringstjänstemän säger att en övergång till en tidigare "baslinjekontroll" bara är ett alternativ de samråder om.
Fem- och sexåringar har också en falsk kontroll av sin läsförmåga i slutet av år 1.
Barn bör inte börja med formella skollektioner förrän de är sex eller sju år gamla, har en grupp utbildare sagt.