Compuesta por "Rachel Proctor", "Victoria Banks" y producida por "Brett James" y "John Shanks" fue lanzada el 29 de septiembre de 2008 como segundo sencillo de "Do You Know" por el sello Columbia Nashville, sucediendo del éxito moderado de «Come On Over» Aunque la canción «Pray Out Loud» había sido ideada para ello, los ejecutivos de la disquera escogieron a «Remember That».