Con trưởng của Viễn là Tư lục tham quân Lý Thực tham dự âm mưu chống lại quyền thần Vũ Văn Hộ. Hộ phát giác, đẩy Thực ra làm Lương Châu thứ sử. Sau khi Hộ phế truất Hiếu Mẫn đế, gọi Viễn cùng Thực về triều. Viễn sợ nguy hiểm, nghĩ ngợi hồi lâu, nói: "Đại trượng phu thà làm trung quỷ, sao có thể làm bạn thần chứ!" rồi quay về kinh sư. Hộ cho rằng công danh của Viễn cao trọng, muốn bảo toàn cho ông, bèn mời gặp mặt, nói rằng: "Con của ngài có mưu khác, không chỉ giết hại một mình Hộ, mà còn khuynh đảo tông xã. Bạn thần tặc tử, theo lý sẽ cùng chịu tội, ngài hãy sớm lo liệu đi!" rồi giao Thực cho Viễn. Viễn rốt cục không nỡ, Thực lại biện bạch rằng mình không dự mưu từ đầu, Viễn tin là thật. Sáng sớm hôm sau, Viễn đưa Thực đến phủ đệ của Hộ, Hộ thấy Thực chưa chết, giận lắm, nói: "Dương Bình công bất tín với ta rồi!" Hộ đòi cha con ông vào gặp, cho Viễn ngồi cùng với mình, ép Thực đối chất với Hiếu Mẫn đế. Thực không thể chối cãi, đành nói: "Lý do mưu tính việc này, là muốn an định xã tắc, làm lợi cho đấng chí tôn. Hôm nay đã đến nước này, còn nói nữa làm gì!" Vì thế Hộ sát hại Thực, ép Viễn tự sát.