幕内力士の北勝力を「英樹」と呼び、弟分のように可愛がっている。同年代であるノア所属の杉浦貴と大変仲が良く、杉浦を「スギ」「スギ様」「おすぎ」などと呼んでいる。それぞれライバルに「試合以外での杉浦貴」「夜の高山善廣」を挙げている。強面で、基本的にはヒールな立ち位置であるが、たとえ自分より年下でも、大森、垣原賢人、鈴木みのるなどの先輩選手には「さん」付けで呼ぶ常識人でもある。ただし、大森との喧嘩別れ以後は「あんな奴」とか「隆男ちゃん」と言ったこともある。三沢光晴は「社長（もしくはエロ社長）」、田上明は「田上のおっさん」、武藤敬司は「タコ社長」と呼ぶ。同年齢でキャリアは上の小橋建太は「小橋建太」、年下だが高山が敬語を使う大森と同期の秋山準は「準」、永田裕志は「裕志」、などと呼び、さん付けをしないが、「〜選手」と敬称を付けることが多い。最近は鈴木に対して「みのるちゃん」と呼んでおり、同年齢の佐々木健介にも40歳になった記念として「健ちゃん」と呼ぶようになった。健介は、その後、咄嗟に高山を「高ちゃん」と呼び、鈴木からは、ノア中継放送内や自身のブログなどで「金髪の大男」と呼ばれることが多い。2004年9月26日に「ウチくる!?」にゲスト出演した。その際に馬場・猪木（猪木はVTR出演）とのエピソード・湘南での思い出を披露し、ライフセイバー時代の友人、宮戸、後輩の桜庭和志らが友情出演した。2006年12月、「ウチくる!?」に安藤和津がゲスト出演した回にも友人として登場している。
2007年1月31日、第1子（男児）が誕生した。奇しくもこの日は、師であるジャイアント馬場の命日でもある。名前は同じ「ヨシヒロ」（善弘）であり、「善まで決めていて、姓名判断で『弘』が良かったため、妻に『同じヨシヒロでいいんじゃない？』と言われて決めた」という。
複数のドラマ、バラエティー番組に出演している。2006年のNHK大河ドラマ「功名が辻」に蜂須賀小六役で出演していたが、本人は自身の日記で「あまりの大根役者ぶりに自分でもびっくりしている」とコメントしている。番宣で「スタジオパークからこんにちは」に出演した際、永田からIWGPを取った試合が放送され、NHKでは珍しいプロレス映像のオンエアとなった。フジテレビのOUR HOUSEに出演した際は金髪を黒髪に戻して出演した。聖闘士星矢の声優を演じたこともあり、この時、高山は自身が乙女座ということもあり「乙女座のシャカ」のTシャツを着てスタジオに現れた。
名古屋市名東区の東部に位置する。北で富が丘、東で朝日が丘、南で藤見が丘、南西の道路上の一点で小池町、西で明が丘・高柳町、北西の道路上の一点で豊が丘と接する。長久手市との市境も近い。名古屋市名東区の東部には東山丘陵や八事丘陵といった標高100m前後の丘陵が連なっており、藤が丘が位置する一帯を東部丘陵地帯と総称する。このあたりは全体的に標高が高く、藤が丘もまた、小さな丘陵によって構成されている。こうした藤が丘の起伏ある地形は、矢田川、そしてその支流である香流川・藤の木川といった藤が丘の北部を流れる庄内川水系の河川による浸食作用によって形成されたと考えられている。藤が丘駅の西にある明が丘公園のなかにある丘が標高75mとこの周辺で最も高い位置にあり、今では展望台が設けられている。かつてはこの小高い丘を富士山と見立てて富士浅間社が祭られ、そこに山岳信仰の影響を見てとることができる。一説には、現在の藤が丘という地名の由来となった「藤森」（本記事内の歴史の項を参照）は、明が丘公園の小高い丘を「富士」とみたて、そこに近隣の「森」を組み合わせた「富士森」に由来するとも考えられている。藤が丘の近辺には、農業を中心とした村落生活の名残として、灌漑のための人工的なため池が無数に存在していた。しかしそれらの多くは土地整備事業の過程で潰された結果、明徳池など比較的大きなものが現存するだけである。藤が丘駅からほど近い位置にある名古屋市立藤森中学校のある土地は、周辺よりも窪んでおり標高が低いが、これはかつてため池だったからである。その周辺は、かつての灌漑地としての記憶をとどめるために、小池町と名付けられている。藤が丘周辺の植生は、現在は猪高緑地などにその名残が見られるが、そもそもはカシ・シイ・コナラ・ハンノキといった低木類によって天然林が構成され、そこに人工的に植えられたクロマツ・スギ・ヒノキが加わえられ、丘陵地帯の風景をつくりだしていた。さらに、そうした丘陵の一帯は芝で覆われ、農民たちの貴重な燃料として伐採されていたという。しかしながら現在の藤が丘の街区ではこうした植生を目にすることはほとんどなく、都市計画に伴って整備された街路樹、とりわけソメイヨシノに代表されるサクラが多く見られる。このサクラの風景にちなんで、現在では藤が丘中央商店街によって、4月上旬には「さくらまつり」が開催されている。そのほか、地質など地形についての詳細は名東区、気候については愛知県の記事を参照のこと。現在の都市としての藤が丘は、名古屋市営地下鉄東山線および愛知高速交通東部丘陵線（リニモ）の藤が丘駅や、東名高速道路名古屋インターチェンジといった都心と郊外を結ぶ交通の結節点に位置している。このことから、名古屋市のベッドタウンとしてだけではなく、長久手市や日進市、尾張旭市、さらには瀬戸市といったさらに東の郊外地域から名古屋市の都心へと人間が移動する結節点としても重要な役割を果たしており、駅前にはマックスバリュや飲食店街を中心とした商店街が形成されている。こうして多くの人間が居住・滞留・通過するためか、藤が丘は栄、名駅、金山地区とともに、名古屋市の中で四カ所しかない路上禁煙地区に指定されている。