東京府湯島に佐藤一斎晩年の門人で、昌平坂学問所の助教や、御書院番兼御納戸を勤めた儒者・吉川辰夫(忠苞、号・澹斎)の三男として生まれる。家は吉川元春の末流で、七代前に江戸幕府に召されて御家人になったとされ、霊華の祖父・大江忠尚は勘定組頭まで出世して旗本になっている。父は維新後、一時深川八幡社の神官を務めた後、「橘香塾」という私塾を開き、子弟を教育していた。弟子に、塚本霊山、山田紫紅、岡田華郷、森田菁華らがいる。霊華の書.幼少の頃から習っていた書にも霊華独特の味わいがあり、しばしば画中に流麗な仮名書で和歌や物語の一節を添えている。書は、初め半嶺から当時流行していた中国の六朝時代や初唐の楷書や、明清の書法を学び、ついで上代様などを広く学んでいる。霊華自身は、『元永本古今集』『筋切』『通切』は、文学史上貴重な遺品なのは言うまでもないことで骨董好きは珍重するが、「二流の書」で自分は取らず、伝小野道風の「新楽譜七徳舞」の木版本を愛好していたという。他にも「香紙切」や、「亀山切」の影響が指摘されている。明治以降、西洋近代の芸術観が日本に入ってきた影響で、それまで「書画」と呼ばれ一体だった書と画は次第に切り離される傾向にあったが、霊華は自分の好みに従い、こうした流れとは無縁であった。代表作.神龍図.離騒.後年、霊華夫人の回想によると、「離騒」の製作期間は一週間ほどだった。普段は訪問者があると長く歓談をするのが常の霊華も、この時ばかりは夫人が玄関で断り、五日間ほとんど寝ずに記憶にある小下絵だけで一気に描き上げた。線は肘や手だけでなく体全体で引き、長い線を引いた時は汗びっしょりで、一筆ごとに夫人が汗を拭い、完成した時には霊華の端正な顔はすっかりやつれ、病人のようだっという。