Sachverhalt: A. Die Eheleute X._ und Z._ sind die Eltern einer am 7. Mai 2007 geborenen Tochter. Mit Gesuch vom 28. Mai 2010 um Eheschutzmassnahmen beantragte Z._ beim Gerichtspräsidium Zofingen, das Getrenntleben zu bewilligen, die gemeinsame Tochter der Parteien unter die Obhut der Mutter zu stellen und X._ zu Unterhaltsleistungen für sie und die Tochter zu verpflichten. Mit Urteil vom 27. Oktober 2010 stellte die angerufene Instanz fest, dass die Parteien zum Getrenntleben berechtigt seien. Sie stellte die gemeinsame Tochter unter die Obhut von Z._ und regelte das Besuchsrecht von X._ gegenüber seiner Tochter. Im Weiteren verpflichtete das Gerichtspräsidium X._, Z._ an den Unterhalt der Tochter ab dem 15. März 2010 monatlich vorschüssig einen Beitrag von Fr. 500.-- zu bezahlen, wobei die Kinderrente von monatlich Fr. 216.-- direkt an Z._ ausbezahlt werde und sich der effektiv zu leistende Unterhalt für die Tochter daher auf Fr. 284.-- belaufe (Ziff. 4.1). Des Weiteren verpflichtete das Präsidium X._, an den Unterhalt von Z._ mit Wirkung ab dem 15. März 2010 monatlich vorschüssig mit Fr. 400.-- beizutragen (Ziff. 4.2). B. Gegen dieses Urteil gelangten beide Parteien an das Obergericht des Kantons Aargau. Mit Urteil vom 28. März 2011 verpflichtete diese Instanz X._ in Abänderung der Ziffern 4.1 und 4.2 des erstinstanzlichen Urteils, Z._ an den Unterhalt der Tochter monatlich und vorschüssig einen Unterhaltsbeitrag von Fr. 550.-- zu leisten; das Obergericht stellte fest, dass die Kinderrente derzeit direkt an Z._ ausbezahlt werde (neue Ziff. 4.1) und verpflichtete schliesslich X._, Z._ monatlich vorschüssig einen persönlichen Unterhaltsbeitrag von Fr. 675.-- mit Wirkung ab dem 15. März 2010 zu bezahlen (neue Ziff. 4.2). C. X._ hat gegen dieses Urteil mit Eingabe vom 4. Mai 2011 (Postaufgabe) beim Bundesgericht Beschwerde in Zivilsachen erhoben. Er beantragt, das obergerichtliche Urteil aufzuheben; es sei von seiner Bereitschaft Vormerk zu nehmen, Z._ (Beschwerdegegnerin) die Kinderrente von Fr. 260.-- direkt zukommen zu lassen. Für das bundesgerichtliche Verfahren ersucht er um unentgeltliche Rechtspflege. Es wurden keine Vernehmlassungen eingeholt.