У дорослому футболі дебютував 1967 року виступами за команду клубу «Рейнджерс», в якій провів п'ятнадцять сезонів і за цей час взявши участь у 306 матчах в усіх турнірах, в яких забив 30 голів. Восени 1970 року він виграв свій перший титул з командою, фінал Кубка шотландської ліги. Втім під час тренерства Віллі Воддела Міллер був переважно гравцем запасу, тому в одному з найбільших успіхів історії клубу, тріумфу у фіналі Кубка володарів кубків 1972 року, Міллер на поле не виходив. І лише після приходу на тренерський місток Джока Воллеса Міллер став основним гравцем.