のちに喫茶店事業も展開するようになり、神楽坂店の横に「カフェーオザワ」を出店した。もともと神楽坂には著名な喫茶店として田原屋があったが、カフェーオザワはその真向かいに位置しているため、その出店は驚きをもって迎えられた。田原屋はこじんまりとした店舗で料理が評判だったのに対し、カフェーオザワは2階が食堂になっており広く開放的であったことから、自ずと棲み分けができていった。結果的に神楽坂の高級喫茶店では田原屋とカフェーオザワが双璧を成すようになり、小説家の加能作次郎は「神楽坂のカッフェといえば田原屋とその向うのオザワとの二軒が代表的なものと見なされている」と評している。しかし、1923年（大正12年）9月1日に発生した関東地震により関東大震災が引き起こされ、カフェーオザワも大きな被害を受けた。罹災の様子について、小説家の浅見淵は「老舗の尾沢薬局が、そのころ、隣りにレストランを経営していた。このレストランの二階が潰れていた」と描写している。なお、1922年（大正11年）12月18日には、カフェーオザワに評論家の島中雄三、青野季吉、ジャーナリストの鈴木茂三郎、高橋亀吉、政治活動家の赤松克麿、福田秀一らが来店し、店内で会合が開かれている。これが政治問題研究会の第1回会合とされており、これをきっかけに無産政党の結成に向けた動きが加速していった。