常楽寺の北西ほど近くに新日吉神社（現在の上戸の日枝神社）がある。永暦元年（1160年）、後白河法皇が京都東山に新日吉山王社を祀ったのにともない、河越氏がこの地を新日吉山王社に寄進、新日吉社領河越荘となった。河越重頼は京都の新日吉山王社から分祀してこの地に新日吉神社を創建、以来、河越荘の総鎮守として河越氏一族が崇敬した神社であった。明治時代の神仏分離令で「日枝神社」と名を変えて現在に至っている。（川越市小仙波の日枝神社とは別。）　河越重頼が新日吉神社に奉納した太刀は、川越歴史博物館に所蔵されている。文応元年（1260年）に河越経重が、新日吉神社に銅鐘を寄進、現在は川越市内の養寿院にある（国の重要文化財）。かつては常楽寺より新日吉神社に鎌倉街道が通っていた。
平安時代末期から南北朝時代にかけて、武蔵国で最大勢力の豪族であった河越氏が拠点としていた河越館の跡地の一角にある。常楽寺は河越氏の持仏堂が基となって発展したものとされる。応安元年（1368年）の武蔵平一揆で河越氏が滅んだあと、長享の乱の際には扇谷上杉家の河越城を攻略するため、山内上杉家の上杉顕定がここに上戸陣を置いた。後北条氏が川越を支配すると重臣の大道寺政繁が領主となったが、豊臣秀吉の小田原征伐に屈し、秀吉の命で大道寺政繁はこの地で自害した。大道寺政繁供養搭がある。また河越重頼・京姫（郷御前）・源義経の供養塔もある。京姫は義経の正室で、義経と4歳の娘と共に平泉・衣川館で最期を遂げ、重頼もそのため源頼朝に誅殺された。 境内に一遍上人の像がある。石灯篭は、かつて東京芝の増上寺の徳川家の墓所にあったもの。
父バヤズィト2世からトラブゾン知事に任命され、東方に目を光らせていたセリムは父の消極性に不満を持っていた。当初は3番目の子で上の兄コルクト・アフメトがいたため継承順位はもっとも下だったが、1511年にサファヴィー朝に同調したシャー・クルの反乱を契機として、兄達が反乱にてこずっている隙を付いてクーデターを仕掛けた。1度目は失敗してクリミア半島へ追放されたが、翌1512年にイェニチェリに擁立され兄達を排除、父を退位させて皇帝に即位したセリム1世は、父が即位時にしたのと同じように、即位後の内紛を避けるために兄弟達とその子らを次々と殺した。父もその後すぐに歿しているが、セリム1世の暗殺も疑われている。先帝までは主にバルカン半島に進出したが、西アジア方面の征服は立ち後れていた。そこで彼らとは対照的にセリム1世は東方への積極的な領土の拡張を推し進め、アジア、エジプトへと転換し、征服を推し進めていく。アナトリア半島には未だオスマン帝国に従わない豪族もいて、彼らがサファヴィー朝に通じ反乱を起こすパターンが常態化、地盤を固める国内問題の解決も狙いだった。即位後はハンガリーと和睦、アナトリア半島のサファヴィー派を探し出し粛清して背後を固め、1514年に西アジアへ出陣、8月23日にイスマーイール1世と交戦した（チャルディラーンの戦い）。この戦いは一進一退だったが、最終的に大砲・鉄砲など火力を高めたオスマン帝国が勝利する。この後サファヴィー朝の追討を目指すも冬期に入ったため叶わず引き上げるが、サファヴィー朝の妨害を排除したことは大きな進展となり、1515年にオスマン帝国とサファヴィー朝の中間地帯に当たるクルディスタン（イラク北部）、抵抗勢力が根強い南アナトリアも制圧して領土を東へ拡大した。以後もセリム1世の戦術は火力中心となり、白刃と騎兵の突撃に頼る旧態依然とした他のイスラムの王朝の軍隊に対し、セリム1世は火砲を効果的に用い、次々と勝利を収めた。また、1515年からアラブへの遠征を開始し、翌1516年にアルジェを占領、マルジュ・ダービクの戦いでマムルーク朝軍を破って翌1517年には首都カイロを落とした。こうしてマムルーク朝を滅ぼしたセリム1世はシリア、エジプト、パレスティナを併合した。さらに庇護を求めてきたアッバース朝のカリフムタワッキル3世を保護するも最終的には監禁して1543年に獄死させ、アッバース朝を完全に滅亡させた。また、シーア派のサファヴィー朝への対抗とアラブの人々の歓心を買うためにスンナ派擁護を標榜、サファヴィー朝やマムルーク朝などの外征では異端討伐を掲げて宗教の正当性を主張したが、マムルーク朝の滅亡にともない、聖地メッカ、メディナをオスマン帝国の保護下に置いたことで、オスマン帝国はスンナ派イスラム世界の盟主の地位を獲得した。これが19世紀のオスマン帝国に、スルタン＝カリフ制の伝説を生むことになった。エジプトから戻るとすぐロドス島への遠征を準備したが、病気を患い、即位から9年目にして54歳で死去。帝位は子のスレイマン1世が継承した。セリム1世の在位はわずか8年に過ぎなかったが、父から受け継いだ領土は230余万平方キロであったのを、650余万平方キロにまで増大させている。セリム1世は「冷酷者（ヤヴズ、Yavuz）」と呼ばれたが、文芸を愛し、詩を詠む文人としての一面もあった。ヤヴズには厳格で冷酷であるがために優れた者というニュアンスがあり、「卓越者」とも訳される。細心な計画と大胆な行動力を持ち合わせ、反対者には酷薄であり、同族や大臣であろうとも容赦なく次々と処刑したが、史家によっては、彼の業績は「征服者」と呼ばれた祖父メフメト2世を凌ぐと評価する者もある。