Протягом 2010—2013 років очолював тренерський штаб команди «Клівленд Кавальєрс». Перед приходом Скотта, команду залишив лідер Леброн Джеймс. 2011 року клуб отримав право першого вибору на драфті та вибрав Кайрі Ірвінга. Однак протягом перебування Скотта на чолі команди її часто супроводжували травми провідних гравців, тому результати були слабкі.