Skip to content
New issue

Have a question about this project? Sign up for a free GitHub account to open an issue and contact its maintainers and the community.

By clicking “Sign up for GitHub”, you agree to our terms of service and privacy statement. We’ll occasionally send you account related emails.

Already on GitHub? Sign in to your account

301リダイレクトの際の過去ログ取得 #15

Open
onihusube opened this issue Dec 6, 2024 · 4 comments
Open

301リダイレクトの際の過去ログ取得 #15

onihusube opened this issue Dec 6, 2024 · 4 comments

Comments

@onihusube
Copy link
Owner

dat落ち(過去ログ倉庫入り?)したdatにアクセスすると、301が返ってくる。

  • アクセスするdat URL: https://hitomi.5ch.net/poverty/dat/1479785491.dat
  • 301レスポンスLocationヘッダのURL: https://kako.5ch.net/poverty/dat/1479785491.dat

LcationのURLにアクセスしても404なので無視して

  • 対応するHTMLページURL: http://hitomi.2ch.net/test/read.cgi/poverty/1479785491/
  • にアクセスするとリダイレクトされるHTMLページURL: https://kako.5ch.net/test/read.cgi/poverty/1479785491/

このkako.5ch.netのURLからHTMLを取得する必要がある

@onihusube
Copy link
Owner Author

onihusube commented Dec 6, 2024

HTMLは全8行くらい

タイトル付近(6行目

gtag('config', 'G-7NQT8916KZ');</script><link rel="canonical" href="https://kako.5ch.net/test/read.cgi/poverty/1479785491"><meta http-equiv="Content-Type" content="text/html; charset=Shift_JIS"><meta http-equiv="X-UA-Compatible" content="IE=edge"><meta name="viewport" content="width=device-width, user-scalable=no, initial-scale=1, maximum-scale=1"><base href="https://kako.5ch.net/poverty/"><title>【バカッター】給油に失敗で発火、全身火だるまの客を映した防犯カメラ映像をエネオス店員が公開→炎上 [無断転載禁止]&#169;2ch.net

datサイズ付近(7行目

<a href="[//kako.5ch.net/poverty/](https://kako.5ch.net/poverty/)">poverty</a><div class="pagestats"><span class="metastats">252コメント</span><span class="metastats">74KB</span></div></div><h1 id="threadtitle">

レス(8行目に圧縮

<div id="2" data-date="NG" data-userid="ID:dA4tenFh0" data-id="2" class="clear post"><details open="" class="post-header"><summary><span class="postid">0002</span><span class="postusername"><b><a rel="nofollow" href="mailto:sage">番組の途中ですがアフィサイトへの転載は禁止です </b>(ワッチョイ f0cc-59rY)<b></a></b></span></summary><span style="width:100%;"><span class="date">2016/11/22(火) 12:32:10.24</span><span class="uid">ID:dA4tenFh0</span></span></details><section class="post-content"> 飛び火 </section></div>
<div id="109" data-date="NG" data-userid="ID:dpf6XFiQ0" data-id="109" class="clear post"><details open="" class="post-header"><summary><span class="postid">0109</span><span class="postusername"><b><a rel="nofollow" href="mailto:sage">番組の途中ですがアフィサイトへの転載は禁止です </b>(ワッチョイ 9a4c-XpIe)<b></a></b></span></summary><span style="width:100%;"><span class="date">2016/11/22(火) 13:14:24.65</span><span class="uid">ID:dpf6XFiQ0</span></span></details><section class="post-content"> <a href="http://jump.5ch.net/?http://ame.hacca.jp/sasss/log-be2.cgi?i=373518844" rel="nofollow" target="_blank">http://ame.hacca.jp/sasss/log-be2.cgi?i=373518844</a> </section></div>

be

<div id="69" data-date="NG" data-userid="ID:3nuX/1WZ0" data-id="69" class="clear post"><details open="" class="post-header"><summary><span class="postid">0069</span><span class="postusername"><b>番組の途中ですがアフィサイトへの転載は禁止です </b>(ワッチョイW 69ae-VCMT)<b></b></span></summary><span style="width:100%;"><span class="date">2019/09/22(日) 09:04:33.78</span><span class="uid">ID:3nuX/1WZ0</span></span><span class="be rBRZ"><a href="http://be.5ch.net/user/182311866" target="_blank">?BRZ(10000)</a></span></details><section class="post-content"> <img src="//img.5ch.net/ico/nida.gif"> <br> bb2cってマイノリティだったんだな <br> iPhone使ってる層は5ちゃんにはあまり来ないってことか <br> やっぱビンボロイド使ってる底辺が集まってんだ </section></div>

AA

<div id="152" data-date="NG" data-userid="ID:hLpbltOE0" data-id="152" class="clear post"><details open="" class="post-header"><summary><span class="postid">0152</span><span class="postusername"><b>番組の途中ですがアフィサイトへの転載は禁止です </b>(ワッチョイWW 29a7-KHd9)<b></b></span></summary><span style="width:100%;"><span class="date">2019/09/22(日) 10:15:40.97</span><span class="uid">ID:hLpbltOE0</span></span></details><section class="post-content"><span class="AA"> ┌──────────────────────―─―┐ <br> │□ ■2ch BBS ..- Microsoft Internet Explorer    囗曰区|| <br> ├───────────────────────┬─┤ <br> │ファイル(F) 編集(E) 表示(V) お気に入り(A) モナー(∀)   |::田| <br> ├────────────────┬──────┴─┤ <br> | ←     →     ×     圍    合  |   Q          》| <br> | 戻る   進む   中止  更新  ホーム |  検索          | <br> ├────┬───────────┴──┬─┬───┤ <br> │アド レス(D) | □<a href="http://www.5ch.net/2ch.html">http://www.2ch.net/2ch.html</a>  |▼|⇒移動| <br> ├────┴───┬┬─────────┴─┴──┬┤ <br> │                ├┤                      ├┤ <br> |2ちゃんねる    ||                      || <br> │2chの入り口    ||                      || <br> │2ch総合案内┌───────────────────────┐ <br> │        | 2ch                                 | <br> │        ├───────────────────────┤ <br> │おすすめ   | <a href="[../test/read.cgi/poverty/1569108424/1](https://kako.5ch.net/test/read.cgi/poverty/1569108424/1)" rel="noopener noreferrer" target="_blank">&gt;&gt;1</a>は不正な処理を行いました。    ...┌───┐   | <br> │モナー    | 残念ですが<a href="[../test/read.cgi/poverty/1569108424/1](https://kako.5ch.net/test/read.cgi/poverty/1569108424/1)" rel="noopener noreferrer" target="_blank">&gt;&gt;1</a>の人生を.         .| 終了 |   | <br> │        | 終了させてあげて下さい。(推奨)    ...└───┘   | <br> │        |                                  | <br> │        └───────────────────────┘ <br> │特別企画        ├┤                      ├┤ <br> ├┬──────┬┼┼┬────────────┬┼┤ <br> ├┴──────┴┴┴┴──┬─┬─┬─────┴┴┤ <br> │□ エラーが発生しました    |  |  |●インターネット | <br> └─────────────┴─┴─┴───────┘ </span></section></div>

NGNG

<div id="1" data-date="NG" data-userid="NG" data-id="1" class="clear post"><details open="" class="post-header"><summary><span class="postid">0001</span><span class="postusername"><b>番組の途中ですがアフィサイトへの転載は禁止です </b>(プレステP 14bf-tV97)<b></b></span></summary><span style="width:100%;"><span class="date">NG</span><span class="uid">NG</span></span><span class="be rPLT"><a href="http://be.5ch.net/user/488538759" target="_blank">?PLT(13931)</a></span></details><section class="post-content"> <img src="[//img.2ch.net/ico/button1_01.gif](https://img.2ch.net/ico/button1_01.gif)"> <br>  歌手の平浩二が今年5月に発売した楽曲「ぬくもり」の歌詞が、人気バンドMr.Childrenの名曲「抱きしめたい」と酷似しているとして盗作疑惑が浮上した件で、 <br> 発売元のレコード会社・徳間ジャパンコミュニケーションズが同曲CDの回収と出荷停止を決めたことを、一部スポーツ紙が報じている。 <br>  「抱きしめたい」は92年12月に発売されたミスチルのセカンドシングルで、今やカラオケの定番のラブバラード。作詞・作曲をボーカルの桜井和寿が手がけた。 <br>  <br>  一方、「ぬくもり」はシングル「愛・佐世保」のカップリングとして収録。作詞家で歌手の沢久美が作詞を担当した。 <br>  記事によると、10日に徳間の制作ディレクター宛てに匿名でメールが届いて事態が発覚。11日午後、沢も出席しミーティングを開き、 <br> その席で沢は「ご迷惑をお掛けしています」と謝罪。「私は60を超えていて、ミスチルもよく知らないし、『抱きしめたい』は全く知らない。だから盗作はしていない」と疑惑を否定。 <br> しかし、徳間側は「まるっきり一緒なので、言い訳の仕様がない」として、その場で回収と出荷停止する意向を伝えたというのだ。 <br>  <br>  平は10日夜のライブ終了後、回収の可能性があることを関係者から聞き、大ショックを受け、椅子にガクッと崩れ落ちという。 <br> 平の関係者によれば、10日に徳間の制作ディレクター宛てに匿名でメールが届いて事態が発覚したという。11日午後に、沢も出席しミーティングを開いた <br> 。その席で沢は「ご迷惑をお掛けしています」と謝罪しつつ「私は60を超えていて、ミスチルもよく知らないし、『抱きしめたい』は全く知らない。だから盗作はしていない」 <br> と疑惑を否定。しかし、徳間側は「まるっきり一緒なので、言い訳の仕様がない」として、その場で回収と出荷停止する意向を伝えたという。 <br>  <br> 「愛・佐世保」は佐世保出身の平本人が初めて作詞を手がけたシングルで、思い入れもあり、関係者も「佐世保にも何度もキャンペーンに行って、 <br> 市長から観光大使も頼まれていた。なのにカップリング曲のせいで回収になるとは」と落胆を隠せない様子だった。 <br> <a href="http://jump.5ch.net/?http://headlines.yahoo.co.jp/hl?a=20151211-00000094-dal-ent" rel="nofollow" target="_blank">http://headlines.yahoo.co.jp/hl?a=20151211-00000094-dal-ent</a> </section></div>

@onihusube
Copy link
Owner Author

基本構造は2022年8月時点で主流の(だった)HTML形式に似ているが細部が異なる・・・

@onihusube
Copy link
Owner Author

onihusube commented Dec 6, 2024

サンプル

https://kako.5ch.net/test/read.cgi/poverty/1479785491/
https://kako.5ch.net/test/read.cgi/poverty/1449915089/
https://kako.5ch.net/test/read.cgi/poverty/1569108424/

お絵描きが分からん・・・ あった

<div id="12" data-date="NG" data-userid="ID:NURDdBir01212" data-id="12" class="clear post"><details open="" class="post-header"><summary><span class="postid">0012</span><span class="postusername"><b>番組の途中ですがアフィサイトへの転載は禁止です </b>(プレステP 317e-edyk)<b></b></span></summary><span style="width:100%;"><span class="date">2015/12/12(土) 19:25:00.02</span><span class="uid">ID:NURDdBir01212</span></span></details><section class="post-content"> ミスチルのパクリ元からパクったんだろ <br> <img src="//o.8ch.net/1kv5.png"> </section></div>

o.8ch.net -> o.5ch.net でいいっぽい

@onihusube
Copy link
Owner Author

とりあえず対応
binary_20241207.zip

Sign up for free to join this conversation on GitHub. Already have an account? Sign in to comment
Labels
None yet
Projects
None yet
Development

No branches or pull requests

1 participant