门声称绿原是国民党特务，并认为牛汉了解内情，牛汉却为绿原辩诬，称绿原从没去过中美合作所，牛汉还说阿垅也不是特务，而是为中共工作。牛汉被捕后，家中被抄家，文稿、笔记本、书信都被拿走。1955年11月，由于北新桥幼儿园开始收孩子，牛汉便被迁到顶银胡同的人民文学出版社宿舍继续看管。1956年夏，公安部以及人民文学出版社的王任叔等人来看他，让他先回人民文学出版社。王任叔和他谈话，还握手问好。后来牛汉得知，同时期曾卓、王元化也受到类似处理。此后，牛汉便迁居梯子胡同原人民文学出版社古典部编辑杜维沫曾经住的房子，和现编室