Art. 9 BV (Nachbarrecht), hat sich ergeben: A.- Die Parteien sind Eigentümer benachbarter Parzellen. Gegenseitig, die Eheleute A._ und B._ mit Klage, die Eheleute C._ und D._ mit Widerklage, beklagten sie sich auf Entfernung bzw. Zurückschneiden von Pflanzungen. In teilweiser Gutheissung von Klage und Widerklage verpflichtete das Bezirksgericht Baden u.a. die Eheleute C._ und D._, ihre beiden Apfelbäume auf einer Höhe von maximal 3 m unter der Schere zu halten. Mit Appellation beharrten die Eheleute A._ und B._ u.a. auf der Beseitigung der Apfelbäume. Diesbezüglich wurde ihre Appellation durch das Obergericht am 23. August 2001 abgewiesen. B.- Mit staatsrechtlicher Beschwerde vom 15. Oktober 2001 verlangen die Eheleute A._ und B._ die Aufhebung des obergerichtlichen Urteils, soweit die Appellation abgewiesen wurde, und Rückweisung der Sache zur Fällung eines neuen Entscheides. Die Eheleute C._ und D._ und das Obergericht beantragen die Abweisung der staatsrechtlichen Beschwerde.