Sachverhalt: A. Z._ (Ehefrau; geb. 1979) und X._ (Ehemann; geb. 1971) heirateten am xxxx 2001. Sie sind die Eltern der unmündigen Kinder R._ (geb. 2001), S._ (geb. 2003) und T._ (geb. 2005). Der Ehemann reduzierte seine Erwerbstätigkeit "im Jahr 2003 oder 2004" - anfänglich wegen des Sports - auf 80%. Im Jahr 2007 eröffnete die Ehefrau ein Blumengeschäft, in dem sie in einem Pensum von rund 25-30% tätig war. Während der arbeitsbedingten Abwesenheit der Ehefrau übernahm der Ehemann die Betreuung der Kinder. Im April 2011 zog der Ehemann aus der ehelichen Wohnung in A._ aus und mietete eine Wohnung in der unmittelbaren Nachbarschaft. Am 7. Juni 2011 stellte die Ehefrau beim Bezirksgericht Baden ein Gesuch um Eheschutz. Ihre Erwerbstätigkeit im Blumenladen gab sie in der Folge auf. Mit superprovisorischer Verfügung vom 9. Juni 2011 verpflichtete das Bezirksgericht Baden den Ehemann zur Zahlung von Ehegatten- und Kindesunterhalt für die drei Söhne. Mitte Juni 2011 kam es zu Problemen mit Sohn R._, und zwar einerseits in der Schule, anderseits mit der Mutter. Daraufhin vereinbarten die Eltern, dass der Vater einstweilen, d.h. bis zum 1. Juli 2011, die Obhut über R._ erhalten solle. Ende Juni 2011 stellte sich heraus, dass R._ fortan nicht mehr zur Mutter zurückkehren würde. Während seiner arbeitsbedingten Abwesenheiten kann der Vater die Betreuung durch verwandtschaftliche Netzwerke sicherstellen. Mit Entscheid vom 29. Juli 2011 stellte das Bezirksgericht Baden das Kind R._ in die Obhut des Vaters, die Kinder S._ und T._ in diejenige der Mutter. Des Weiteren passte das Bezirksgericht die einstweilen angeordneten Unterhaltszahlungen entsprechend an und regelte die jeweiligen Besuchsrechte. Beim Vater ging die Vorinstanz - entsprechend einer von ihm geäusserten Absichtserklärung - von einem 60% -Arbeitspensum aus. Einem solchen geht er denn auch seit August 2011 nach. Zur Obhutsfrage führte das Bezirksgericht Folgendes aus: Beide Eltern verfügten über die nötige Erziehungsfähigkeit. Sodann hege der zum Anhörungszeitpunkt 10-jährige R._ den starken Wunsch, in der Obhut des Vaters zu bleiben, während das Verhältnis zu seiner Mutter gestört zu sein scheine. Die Söhne S._ und T._ seien demgegenüber in ihrem Aussageverhalten zu unsicher bzw. zu jung. Zwar gelte an sich der Grundsatz, dass Geschwister nicht zu trennen seien. Zudem seien alle drei Kinder im Dorf A._ stark verwurzelt. Da jedoch der Vater im gleichen Dorf in unmittelbarer Nachbarschaft wohne, sei es unter dem Gesichtspunkt der Stabilität der Verhältnisse vorliegend sachgerecht, dem Vater die Obhut über R._ und der Mutter die Obhut über S._ und T._ zuzuteilen. B. Gegen diesen Entscheid erhoben beide Ehegatten am 15. August 2011 Berufung an das Obergericht des Kantons Aargau. Seit dem Besuchswochenende vom 3./4. September 2011 sind die Kinder S._ und T._ nicht mehr zu ihrer Mutter zurückgekehrt und halten sich - entgegen gerichtlicher Anordnung - beim Vater auf. Gemäss der Vormundschaftsbehörde A._ scheiterten die Versuche, die Kinder der Mutter zu übergeben am Widerstand der Kinder. Mit Entscheid vom 12. Dezember 2011 bestätigte das Obergericht des Kantons Aargau die erstinstanzliche Obhutszuteilung und regelte den Kinder- und Ehegattenunterhalt sowie das Besuchsrecht neu, wobei es das Besuchsrecht des Vaters vorübergehend (d.h. bis Ende Mai 2012) einschränkte (und zwar auf einen vierwöchentlichen Turnus). C. Mit Beschwerde in Zivilsachen vom 23. Dezember 2011 gelangt X._ (nachfolgend: Beschwerdeführer) an das Bundesgericht und verlangt im Wesentlichen die Zuteilung der Obhut auch über die Kinder S._ und T._ (unter entsprechender Anpassung der Besuchsrechts- und Unterhaltsregelung); weiter ersucht er um Feststellung, dass die Parteien sich mit Wirkung ab 1. August 2011 keine Ehegattenunterhaltsbeiträge mehr schulden; eventualiter, d.h. im Fall der Bestätigung der geltenden Obhutsregelung, verlangt der Beschwerdeführer eine Anpassung des Ehegattenunterhalts, und zwar Fr. 1'139.-- vom 1. Juni 2011 bis zum 31. Juli 2011, Fr. 0.-- vom 1. August 2011 bis zum 31. März 2012 sowie Fr. 1'400.-- ab April 2011 [recte: 2012]. Mit Eingabe vom 12. Januar 2012 beantragte die Vormundschaftsbehörde von A._ die Einsetzung eines Kindesvertreters im Sinne von Art. 299 ZPO. Mit Verfügung vom 23. Januar 2012 erteilte die Präsidentin der II. zivilrechtlichen Abteilung der Beschwerde die aufschiebende Wirkung und trat auf das Gesuch um Einsetzung einer Vertretung gemäss Art. 299 ZPO nicht ein. Die von der Beschwerdegegnerin im Anschluss daran gestellten Erläuterungsbegehren betreffend die aufschiebende Wirkung wurden bereits mit Schreiben vom 30. Januar 2012 bzw. 1. Februar 2012 beantwortet und erweisen sich mit dem vorliegenden Endentscheid als gegenstandslos. Mit Eingabe vom 12. März 2012 hat die Beschwerdegegnerin neue Urkunden eingereicht. Es wurden die Akten, in der Sache aber keine Vernehmlassungen eingeholt.