Alltför många över 65 år hamnar i olyckor och nödsituationer i onödan, säger NHS Confederation Commission on Improving Brådskande vård för äldre människor.
Gruppen sade att detta berodde på brist på hjälp när de blev sjuka.
Det krävde radikala åtgärder, bland annat brådskande vård i hemmet och att läkarna skulle genomföra "framstegsrundor" i vårdhemmen.
Enligt kommissionens rapport var äldre människor "dåligt betjänade" och "alltför ofta tvungna att åka till A&E".
Och när de väl låg på sjukhus, fick de längre vistelser och förlorade en del av sin självständighet.
I rapporten sades det att äldre människor behövde mer hjälp med att navigera i komplexiteten i hälso- och sjukvårdssystemet.
Det pekade på ett brittiskt ålderssystem i Cornwall, där de svagaste människorna hade samordnare som hjälpte till att organisera sin vård.
Det sades också att allmänläkare kunde identifiera och arbeta med patienter som löper störst risk att läggas in på sjukhus.
I rapporten betonades också ett system i nordöstra London, där sjukhus- och ambulanspersonal arbetade tillsammans för att tillhandahålla akutvård i människors hem.
Sjuksköterskor och sjukvårdare bedömer och behandlar äldre människor som har fallit men inte drabbats av en fraktur.
Utrustning, till exempel gångramar, kan ordnas.
Och från april till juli förra året hade sju av tio av de patienter som hade setts stannat hemma.
Ett annat projekt som lyftes fram var i Hertfordshire, där allmänläkare regelbundet besökte vårdhemsboende, med snabba svarsteam påkallade för att ta hand om boende som behövde akut hjälp.
Källa: Kommissionen för att förbättra den brådskande vården av äldre personer
Doktor Mark Newbold, som är ordförande för kommissionen, sade: " Äldre människor behöver ibland tillgång till A&E, och de bästa sjukhusen skräddarsyr sin service för att tillgodose deras behov.
"Men alltför ofta tvingas äldre människor att gå till A&E eftersom de alternativa tjänster som skulle hjälpa dem att vårdas i hemmet inte är tillgängliga när de behöver dem."
En talesman för hälsodepartementet i England sade att regeringen var fullt stöd för de idéer som lagts fram.
Hon påpekade att en pott med pengar som kallas fonden för bättre vård - som uppgick till 5,3 miljarder pund i år - hade avsatts för att finansiera program som till stor del var inriktade på att hålla människor borta från sjukhus.
Visionen att förbättra äldreomsorgen var att "uppnå", tillade hon.
Samtidigt har kommunförbundet efterlyst mer att göra för att ta itu med ensamheten, som nu är ett "stort folkhälsoproblem".
Rådet Izzi Seccombe sade att det i allt högre grad rapporterades som en fråga bland äldre personer som hänvisades till råd för vård.
Hon sade att lösningen var att stödja vänskapssystem och sådana som hanterade social isolering, varav många drevs av frivilligsektorn.
"Ensamhetens inverkan kan vara förödande", tillade hon.
Äldre människor som behöver akut hjälp misslyckas av NHS, säger en grupp engelska och walesiska hälsoledare.