質問: bs(response.text, "html5lib") →パースの仕方かと思って色々試しましたが、そもそもresponse.textの状態で 抽出したい項目が入ってませんでした。 ```
回答: Pythonスクレイピングのフローチャート https://imabari.hateblo.jp/entry/2018/12/17/163722 !イメージ説明 1. User-Agentをパソコンと同じにする 2. Javascriptでレンダリングされている 3. スクレイピング対策されている 1はrequests-htmlで取得 2はrequests-htmlでjavascriptをレンダリングしてから取得 3はわかりません 以下のプログラムで確認できます Pythonでスクレイピング時にJavaScriptが必要か調べる https://imabari.hateblo.jp/entry/2018/12/11/103841 あとChromeだとタグが補完されている場合があります