米市以外にも様々な事業を手掛け莫大な財産を築くが、その財力が武家社会にも影響することとなったため、幕府より闕所（財産没収）処分にされた。幕末になり討幕運動に身を投じ、ほとんどの財産を自ら朝廷に献上して幕を閉じた。
淀屋を創業した岡本家によるものを前期淀屋、闕所後に牧田家により再興されたものを後期淀屋と呼ぶ。
淀屋が開拓した中之島には、かつて常安町と常安裏町（現在の中之島四丁目～六丁目）が有った。屋敷は現在の大阪市の北浜にあり、中之島に掛かる淀屋橋や常安橋にその名を残している。
事業.
淀屋の事業は米市を主とした多角的経営であった。
米市.
江戸時代、米は経済の中心的な存在であった。年貢として納められた米は藩の蔵屋敷に蓄えられ、米問屋を介して現金化された。米は諸藩の財政の根幹をなし、米価の安定は経済の安定としても重要であった。しかし米の価格は仲買人によって無秩序に決められ、価格は米の質や量などを正しく反映したものではなかった。そこで淀屋は、米の質・量・価格の混乱を収めるため、全国の米相場の基準となる米市の設立を幕府に願い出て認められる事となった。
闕所.
闕所の公式な理由は「町人の分限を超え、贅沢な生活が目に余る」というものだった。しかし諸大名に対する莫大な金額の貸し付けが本当の理由であろうとされている。
鳥山石燕の妖怪画集『百器徒然袋』には、この淀屋辰五郎の逸話をもとにした鉦五郎という妖怪が登場する。
歴代当主.
前期淀屋.
初代 淀屋常安.
二代言當の父である。長子（養子）喜入善右衛門は、常安町家、斉藤町家の家祖。次子（実子）常有五郎左衛門は、大川町家の家祖となった。
山城国岡本荘の武家の出身だったが、織田信長に討たれ商人を目指すようになった。苗字を出身地の岡本、通称を三郎右衛門、名を与三郎、のちに善右衛門とした。隠居し仏門に入ってからは常安の号を名乗った。なお前期淀屋の歴代当主も三郎右衛門を名乗った。
常安請地として中之島の開拓を手掛け、大阪大学医学部跡地の旧町名である常安町、常安橋に名を残している。大坂三郷（北組・南組・天満組）のうち北組の惣年寄を担った。
墓所は大阪の大仙寺。
二代 淀屋言當.
十三人町の町年寄を務めた。
墓所は大阪の大仙寺。
淀屋言當の弟、五郎右衛門の子。
墓所は大阪の大仙寺。
四代 淀屋重當.