したらばTOP ■掲示板に戻る■ 全部 1-100 最新50 | |

コンソールの2chブラウザを作るスレッド

85(-_-)さん:2017/04/01(土) 03:59:29 ID:???0
まぁもともとscへのコピー対策でクローリング対策やスクレイピング対策をされてるだろうから
html文書の構成がちょくちょく変わる可能性あるね(APIじゃないと厳しいところあるのかも)

86(-_-)さん:2017/04/04(火) 17:45:17 ID:???0
> ダウンロードについては、HTTPのIf-Modified-Sinceヘッダをうまく扱えれば
> 本文のダウンロード処理を減らすことができそう

これって静的コンテンツ以外でも使えたんだっけ?
スレってサーバ側のスクリプト(read.cgi)で動的生成だろうから
read.cgiがそのヘッダをどう取り扱っているか調べないといけないね

87(-_-)さん:2017/04/04(火) 17:48:23 ID:???0
以前のdat形式は静的コンテンツだったからそのヘッダを使うことが推奨されていたのだけれど

88(-_-)さん:2017/04/04(火) 21:36:23 ID:???0
板一覧とスレ一覧は静的か
過疎板でなけりゃスレ一覧は更新頻度高いから確認する意味なさそうだけど

89ひきぷろ ◆SVQfrniSJY:2017/04/05(水) 02:00:46 ID:???0
もう調べ終わった後かもしれないけど、
動的生成のページは、If-Modified-Since対応をあえて書いてる場合しか
HTTPステータスで304とか返してくれなさそうだよね。

転送容量を減らすという機能でいうと、
2chはURLのスレIDの後に "/100-" とか書くと、途中のレスから読める機能があったよね。

90(-_-)さん:2017/08/18(金) 19:09:04 ID:RqcRcy1I0
itestのAPIを使ったらどう?
認証ないから不正アクセスじゃないし、スクレイピングでもない

91(-_-)さん:2017/10/02(月) 14:31:15 ID:xWRj2EwM0
2chは5chに変わったそうですよ

92(-_-)さん:2020/01/14(火) 19:42:45 ID:QlE6dbBA0
少し挙動が怪しいですがこうなりました

https://ux.getuploader.com/hikkyp/download/41


新着レスの表示


名前: E-mail(省略可)

※書き込む際の注意事項はこちら

※画像アップローダーはこちら

(画像を表示できるのは「画像リンクのサムネイル表示」がオンの掲示板に限ります)

掲示板管理者へ連絡 無料レンタル掲示板