妻不娶，鳏居三十年。天宝十五年（756年），安禄山攻占长安，王维被安禄山胁迫投降，作了他的官员。但是他并不愿意，长期居住于辋川别墅。王维一度被安禄山软禁在雒邑菩提寺，听到唐明皇的御用乐师雷海青哭泣不愿为安禄山演奏，而在凝碧池被凌迟，心情非常难过，曾向裴迪作《闻逆贼凝碧池作乐》表达了心迹：「万户伤心生野烟，百官何日再朝天？秋槐叶落空宫里，凝碧池头奏管弦。」当安禄山兵败后，王维本以六等定罪，必须流放远州，其弟王缙请削己职以赎兄罪，唐肃宗得知了《闻逆贼凝碧池作乐》，王维因而得到了赦免，并任太子中允，加集贤殿学