したらばTOP ■掲示板に戻る■ 全部 1-100 最新50 | メール | |

テストその2

326 ◆/vmukiyuzw:2016/03/26(土) 22:07:09
>>325さん ご指摘ありがとうございます。
htmltodatByFiddlerを修正しました(ver 2.14)

意味的にはほぼ同じなのですが以下のようにしました。

oBody = oBody.replace(/<\/div><div><div class="js--ad--bottom"[\s\S]*$/,"");

327名無しさん:2016/04/09(土) 09:52:53
【悲報】サメ映画、もはやなんでもあり【画像あり】
http://bit.ly/1R5A4tS

328名無しさん:2016/04/10(日) 19:38:57
彼女がディズニーランド行きたいって言うことで大喧嘩になった
http://bit.ly/1R5A6lu

329名無しさん:2016/04/20(水) 15:32:11
本当に出会える出会い系ランキング
ttp://bit.ly/1OgYRt7

330名無しさん:2016/05/08(日) 11:21:49
本当に出会える出会い系ランキング!
ttp://deai.erosoku.top/ranking/type2

331名無しさん:2017/03/07(火) 23:35:13
bbspinkのreadcgiが更新されたので対応願います
自分用に修正した点からヒントは

readcgi06の派生である
div構造からdl、dt、dd、span構造へ変更
レス1とレス2間に広告があるのは変わらないがsectionタグで解りやすくしてある
最終レスの広告はない
一部のclass名が変更されてる

というところでしょうか

332 ◆/vmukiyuzw:2017/03/08(水) 01:58:26
>>331さん ご指摘ありがとうございます。
htmltodatByFiddlerを修正しました(ver 2.15)

ちょっとやっつけ作業ぽいのですがとりあえずbbspinkでは動くと思います。
このread.cgiが2ch.netにも導入されるようだとまた考えないといけないかもしれません。

333名無しさん:2017/03/08(水) 14:55:47
>>332
更新どうもです
申し訳ないですが再修正を願います

beID周り処理が抜け落ちてます
ageレス時(だけかな?)の名前欄にfontタグが追加されていた
バナー削除の処理で若干ゴミが残る可能性があるので以下のようにするといいと思います
<\/section>.*?<\/div><\/div> → <\/section>.*?(?=<dl class="post")

334333:2017/03/08(水) 16:10:33
fontタグに関して

通常のageレスもしくは一部の★持ち(運営)のレス場合タグ付加
通常のageレスはcolor="green"、★持ちは個々人で違う色を指定してる

除去するのであれば前者のケースのみで

335 ◆/vmukiyuzw:2017/03/08(水) 18:16:48
>>333-334さん、ご指摘ありがとうございます。

まずbeID周りですが、beIDの入ったスレを私のほうで探すことができず
(bbspinkには疎いもので)、2ch.netのbeID周りと形式が同じかどうか
わからなかったので、入れてませんでした。
beIDが入ったスレ、および★持ちさんのレスが入ったスレのURLを
いくつか教えていただけると助かります。


あと多分もっと重大な問題として、(板によるかもしれませんが)
透明あぼーんが頻発するスレが散見され、(http://mercury.bbspink.com/hnews/等)
これがブラウザによってはスレが壊れる原因となっていると思われます。
(壊れないブラウザでもどのみちレス番がずれることになるので問題なのですが)

この問題は実は前から認識はしていたのですが結構大きな修正になってしまいそうなので
先送りにしてました。が、あまりレアケースでもなくなっているようなので
今回合わせて対応しようと思います。ちょっと時間かかるかもしれません。

336333:2017/03/08(水) 22:28:19
>>335
板だとここ
http://phoebe.bbspink.com/meow/
その中でも両方同時に確認できるのはこのスレですね
http://phoebe.bbspink.com/test/read.cgi/meow/1461076454/l25

このにゃあ板はpinkで一番エロくないおとなしい板で実験板も兼ねています

pinkでスレが壊れるのは仕方ないことですよ
自動あぼーんが機能してるんで宣伝レス等があればほどなく発動、「うふ〜ん」に置き換えられます
また2chより板が少ない分に削除人が動いてくれてます
なのであまり気にする必要ないかと思います

これまでのreadcgiならスレサイズが下部に記載されてたのでそれである程度あぼーん判定の補完ができたんですが

337 ◆/vmukiyuzw:2017/03/09(木) 00:01:25
htmltodatByFiddlerを修正しました(ver 2.16)

>>333さんにご指摘いただいた部分を修正しました。
また、透明あぼーんがあった場合にスレが壊れたりレス番がずれる
問題に対処しました。
(透明あぼーんがあった場合それを補う「透明あぼーん」レスが
追加されます。なので汎用ブラウザで見た時には存在しないレスが
表示されることになります)


>>333=336さん
いろいろご指摘・情報提供いただきありがとうございます。
bbspinkでスレが壊れる事情は多分仕方ないのでしょうが
>>335で挙げていただいたスレをAPIを使う専ブラで見るとレス番10や16が
「うふ〜ん」で表示されるのですが
新しいread.cgiが吐くHTMLだと透明あぼーんになってしまうようなのです。
(以前のread.cgiではどうだったのか知らないので新read.cgiでそうなったのか
どうかはわからないんですが)

ともあれ透明あぼーんがあるとdatデータの構造上専ブラではレス番がずれちゃう
状況はやはりまずいと思い、対応することにしました。

338名無しさん:2017/03/09(木) 00:55:12
>>337
更新お疲れ様です

透明あぼーんの件、こっちの理解不足でした
と同時に以前のreadcgiで自分でも対処しようとしたけど、結局放置してたのを思い出しましたf^_^;)

以前のものは透明あぼーんがある場合レス0番が存在してました
レス0がどういった内容だったかは覚えてませんが

339 ◆/vmukiyuzw:2017/03/12(日) 00:19:23
htmltodatByFiddlerを修正しました(ver 2.17)

>>338さんにご指摘を受けた「レス番0」の件ですが
一応認識はしていて、対策もしたつもりでいたんですが
http://potato.2ch.net/test/read.cgi/software/1488358985/51
で挙げられたスレを見てバグに気付きました。

レス番0は読み飛ばすようにしたのでこれで問題ないと思ったのですが
その前にレス1(これはレス番を見ていない単に最初のレス)に
スレタイを付加する処理を入れていたので
レス番0が存在した場合スレタイも消えてしまうというアホな事態になってしまってました。

スレタイを付加するタイミングを後にずらしたので多分問題解消したと思います。

340 ◆/vmukiyuzw:2017/03/25(土) 03:05:47
なんか差分取得で壊れるスレがあるなあと思ったら、
read.cgiが若干仕様変更された模様。
一応問題点はわかったのですが
今から修正するのは時間的にしんどいんで明日の夜やります。

341 ◆/vmukiyuzw:2017/03/25(土) 22:20:26
htmltodatByFiddlerを修正しました(ver 2.18)

read.cgiの仕様が若干変更され(今のところ2ch.netの06系だけのようですが)
BeアイコンやEmoticonやお絵描き機能の画像など、html上では <img src="〜"> で表される
(dat上では sssp://〜 となる)要素について、http: が省略されるようになったため
対応しました。

342 ◆/vmukiyuzw:2017/03/25(土) 22:28:24
>>341
おっとこのレスはブラウザによっては化けてしまうかも

> (dat上では sssp://〜 となる)要素について、
         ↑実際は半角

です。

343 ◆/vmukiyuzw:2017/04/09(日) 00:57:27
htmltodatByFiddler、と呼ぶのは長くて面倒になってきたので
勝手ながらこのスレでは今後 hBF と略して呼ぶことにします(鉛筆の濃さみたいですが^^;)

で、hBFを修正しました(ver 2.19)

・itest.2ch.net/xxx/〜 へのリクエストがあったら xxx.2ch.net/〜 に飛ばすよう修正
 (itest.bbspink.com についても同様)
・https://〜 へのリクエストがあった場合への対応

今回は OnBeforeResponse.txt だけでなく OnBeforeRequest.txt も更新してますのでご注意ください。
補足があるのですが長くなるかもなので次レス以降で。

344 ◆/vmukiyuzw:2017/04/09(日) 01:14:52
>>343 補足1
まずitestへのリクエストの変換ですが。
最近 itest.2ch.net へのリンクが貼られることが多くなってきたと思うのですが、
専ブラにとっては(というより itest 以外の全ての閲覧環境にとっては、かもしれませんが)
面倒だと思ったので、本来の 2ch.net のURLに変換するようにしてみました。

ただ一つ考慮事項として、専ブラの側で itest.2ch.net へのリクエストを
2ch.net へのリクエストとして認識してくれないと、このリクエストの変換は行われないです。
専ブラによっては「このURLは自分の仕事じゃない」と
汎用ブラウザ等に投げてしまうものもあるようです(となると当然hBFの処理も通らないので
どうしようもない)。

この話はいろいろ膨らむ要素がありそうですがとりあえずこの辺にしておきます。

345 ◆/vmukiyuzw:2017/04/09(日) 02:05:53
>>343 補足2
https: へのリクエストについてですが。

Fiddler自体は元から https: に対応しているのですが
現存する専ブラでは https://xxx.2ch.net/ 〜 のようなリクエストがあっても
プロキシに https: のまま投げてくるものはないようなので、
当面あまり意味はないです。
「もし対応したものが出てきたらこうしとかないとまずいかも」
という点を直しただけです。
今後対応してくるものもでてくるでしょうからそのときまた考えます。

346名無しさん:2017/04/10(月) 21:25:36
https対応は2ch鯖-Fiddler間で対応しないとマズイのでは?
現にegg鯖がhttpsがデフォになったし。

347 ◆/vmukiyuzw:2017/04/10(月) 23:45:43
>>346さん
すみません、「2ch鯖-Fiddler間で対応しないとマズイ」とはどういう意味ですかね?
もしかして「これからは https: がデフォになるから普通の http: での通信も https: にしないとマズイ」という意味?

>>345にもちょっと書いてますがFiddler自体は元から https: には対応してますし
専ブラではない別のクライアントで https: のリクエストをシミュレートして
「もし専ブラが https: へのリクエストを投げてきたら」も確認してます。
だが実際のところ https://xxx.2ch.net/test/read.cgi/ 〜 のリクエストを
そのままプロキシに投げてくる専ブラは私はまだお目にかかったことないので
それから考えようと思ってます。
そういうことではなくマズイと思われる点があればご指摘いただけるとありがたいです。

348名無しさん:2017/04/13(木) 16:16:30
>>347
2ch(CF)側がhttpsのみに対応した場合、httpしか対応してない専ブラが通信出来なく
なるかも知れないので、現在APIモード対応の串がやってる

専ブラ(http)<->(http)Fiddler(https)<->(https)2ch(CF)

という通信にも対応しておく必要がある。って意味です。

349 ◆/vmukiyuzw:2017/04/13(木) 23:30:40
>>348
なるほど、専ブラの対応に関わらず
Fiddler - 2ch 間のやり取りは今から https にしておいた方が良いということですね。
それは納得しました。

ただ、現在のところhBFでは read.cgi とのやり取りにしか介入してないのですが
> 2ch(CF)側がhttpsのみに対応した場合、
という状況を考えると、他にも bbs.cgi とか subject.txt とかとのやり取りも
考慮しないといけなくなるように思います。
この辺は今まであまり気にしていなかった部分なので、ちょっといろいろ
確認してみます。

350名無しさん:2017/04/15(土) 22:23:30
FiddlerのSSL対応のデフォはOS依存のようで
7以降は証明書生成にCertEnrollAPIとやらを利用出来るから何の問題もない
XPの場合はご存知かと思うが原則SHA1まで、SP3ならSHA256に一部対応してるそうだがFiddlerでは使えない
Vistaは分からないけど現状問題ないだろう
Fiddler拡張としてOpenSSL等利用するラッパー作ればいいらしいけど覚えることがたくさんだろうね

351 ◆/vmukiyuzw:2017/04/22(土) 07:27:29
https対応はまだのんびりでいいかと思ってたんですが
なんかread.cgiの変更があったようですね。まだ一部サーバのみ?
今日ちょっと用事が立て込んでるんで対応は遅くなるかもです。

352 ◆/vmukiyuzw:2017/04/22(土) 23:12:12
hBFを修正しました(ver 2.20)

 ・2chの一部のサーバでread.cgiがバージョンアップ(07.0.0)されたので対応

今のところagree鯖だけですかね?
対象の鯖で既得済みのログを更新しようとするとログ破損状態になる可能性があります。

353 ◆/vmukiyuzw:2017/04/23(日) 07:18:22
hBFを修正しました(ver 2.21)

前バージョンにバグがあり変換結果のdatにゴミが入ってしまっていました。
( read.cgi 07系のみ)
申し訳ありませんが差し替えてください。

354名無しさん:2017/04/23(日) 13:19:30
2.10だったのですがecho鯖へのアクセスで
(・∀・)ナンカエラーダッテ HTTP/1.1 404 Fiddledだったので
2.21にした所正常になりました。ありがとうございます

355名無しさん:2017/04/24(月) 08:02:52
ありがとうございます!

356名無しさん:2017/04/25(火) 23:10:00
取得済みのスレに新着があった場合や更新チェックした場合の新着レスが
スレを閉じると消えてしまうのですが何が原因か分かりませんか?
最初に読み込んだ所までは残ります。
2.21を入れてすぐはこのような症状はなかったと思うのですが
どうしてこうなったか見当がつきません。
無関係でしたらすみません。

357名無しさん:2017/04/26(水) 00:49:14
今日から?下のログに
(;゚Д゚)サイズが合わない・・・
と表示されるようになりましたね
でもレスは更新されてるからとりあえずおkかなw

358 ◆/vmukiyuzw:2017/04/26(水) 01:36:11
>>356さん、>>357さん
・どの板、どのスレで発生したのか(具体的なURL)
・どのブラウザ(できればバージョンも)で発生したのか
少なくともこの辺の情報がないと確認できないです。
問題なのかどうかすらわからないのでできれば詳細を再報告願います。

359357:2017/04/26(水) 01:52:19
URL制限あるぽいですね

360名無しさん:2017/04/26(水) 01:53:22
ブラウザ:JaneDoe View α ( build date: 1507130036 )
出る
http://mint.2ch.net/test/read.cgi/pav/1466221276/
http://echo.2ch.net/test/read.cgi/av/1492956696/
出ない
http://egg.2ch.net/test/read.cgi/jisaku/1487581901/
http://egg.2ch.net/test/read.cgi/smartphone/1492258777/

361名無しさん:2017/04/26(水) 01:55:12
>>360>>357です。
それほど大きな問題ではない(と思っている)ので時間がある時にでも・・・

362 ◆/vmukiyuzw:2017/04/26(水) 02:37:13
確かに read.cgi 07.0.0 の出力形式が微妙に変更されているようですね。
(わかりにくいから 07.0.1 とかにしろよ!と文句言いたいですが^^;)
>>360 の「出ない」のほうの2スレは 06系なので影響ないようです。

ちょっと時間も遅いので本格的にはもう少し確認・様子見の上で明日対応しますが
お急ぎの方は OnBeforeResponse.txt の 80行目(07系の後ろの不要な部分をカットしているところ)を

oBody = oBody.replace(/(<br>)?(<\/div><div class="push">)?<\/div><div class="pagestats">(.|\s)*$/,""); //後ろの不要な部分をカット

にして反映してください。

363357:2017/04/26(水) 02:50:02
>>362
反映した所正常になりました
遅くにありがとうございます

364 ◆/vmukiyuzw:2017/04/26(水) 02:50:19
>>362
あーこれ取り消します、正規表現のほうを変えないとダメだ

oBody = oBody.replace(/<div class="post".*?><div class="meta"><span class="number">(\d+).*?<\/span><span class="name"><b>(?:<a href="mailto:(.*?)">)?(.*?)(?:<\/a>)?<\/b><\/span><span class="date">(.*?)<\/span><\/div><div class="message"><span class="escaped">(.*?)<\/span><\/div><\/div><br>/ig,"$1<>$3<>$2<>$4<>$5<>\n");

眠いんであんま自信ないです・・・明日ちゃんとやります

365名無しさん:2017/04/26(水) 02:51:26
>>364
あら?w
はいゆっくりで大丈夫ですのでお休み下さい

366356:2017/04/26(水) 03:05:40
事情を説明しようと拙い文章をまとめていたのですが遅れてしまってすみません。
代わりに要点をまとめてくれた357さんにもお礼を言っておきます。
原因を特定していただけたようで助かりました。
急ぎでなくても問題ないので時間のあるときにお願いします。
本当にありがとうございました。

367 ◆/vmukiyuzw:2017/04/27(木) 00:00:05
hBFを修正しました(ver 2.22)

 ・read.cgi 07系に仕様変更があったので対応

>>357さんからご指摘があり>>364で暫定対応を考えたものの正式反映です。
内容としてはレスの間に<br>タグが入ることになったことへの対応だけです。
なんかいろんなところの情報見てるとかなり無理やりというか場当たり的?な
変更みたいですね。
read.cgi 07.0.0 についてはかなり不満の声も上がってるみたいなんで
まだまだ変更はあるかもしれませんね。

ところで>>356さんのご報告はこれとは別件のように最初感じたのですが
同じ原因ということで本当に良かったのでしょうか。

368356:2017/04/27(木) 01:19:12
うまく説明できるか分からないのですが。
昨日の症状は例えば700番までレスがついたスレを開いた後
更新して新着レスがあった場合に、スレを開いている間は新着が表示されますが
一度閉じて再度開くと新着部分が消えてしまうという現象でした。
(表示されるのは最初に取得した700番までということです。)
自分の使っているブラウザはJaneXeno 161205です。
すべての板ではなく特定の板でのみ起きることを後から気づいたのですが
どの板でおきるのか調べたり説明が難しかったりして報告が出遅れてしまいました。

2.22にしてから上記の現象は起こらなくなりましたので
同じ原因だったのだと思います。
対応していただきありがとうございました。

369 ◆/vmukiyuzw:2017/05/04(木) 02:57:35
read.cgi 07.0.1 が出てるようですね。例によってagree鯖で実験中?
汎ブラでの見た目はあんま変わらないようですが、レス番のゼロサプレスはやめたみたいですね。
hBFとして影響あるのはIDの前に </span><span class="uid"> が入るようになったとこくらいか。
もう少し調べてから対応します。もし他にお気づきの点があればご報告いただけると有り難いです。

370名無しさん:2017/05/04(木) 14:10:20
そこを事前に半角スペースに置き換えるだけで問題なさそう

371 ◆/vmukiyuzw:2017/05/04(木) 20:29:24
hBFを修正しました(ver 2.23)

 ・read.cgiがバージョンアップ(07.0.1)されたので対応

修正箇所は>>369で書いた追加されたタグの除去のみです。
また修正したのは OnBeforeResponse.txt のみです。OnBeforeRequest.txt は修正してませんので
ご自分でUA等修正されてる方は上書きしないようご注意ください。


今のread.cgi 07.0.1 にはまだいろいろ不具合あるようなので近いうちにまた修正されると思われます。
私の把握してるものでは

・IDの代わりにリモホが出る板(シベリア)で投稿日・IDが「NG NG」と表示される
・嫌儲で特定のBEの投稿日・IDが「NG NG」と表示される

うーむ・・・read.cgi修正してる人、頑張れ^^;

372 ◆/vmukiyuzw:2017/10/02(月) 05:44:29
5chてのはなんなんだ?
背景を知りたいとこですがとりあえず急ぎ対処が必要でしょうね。
今日中には何とかしたいな・・・。

373 ◆/vmukiyuzw:2017/10/02(月) 23:53:22
hBFを修正しました(ver 2.24)

一応 5ch.net への暫定対応ということになりますが本当に暫定でしかないです。
"2ch.net"とハードコーディングしていた部分を"[25]ch.net"として
どちらが来ても一応対応できるようにしただけです。

今後、読みも書きも 5ch.net に移っていくことになると思われるのですが
まだ現状では書き込みは 2ch.net に対してはできるようですし
読み込みはAPI経由では 2ch.net に対してもできるようです。
(read.cgi での 2ch.net の読み込みはもう無理みたいですが)

であれば、専ブラとしてはまだ 2ch.net にアクセスしてるつもりで
(板一覧はまだ 5ch.net に対応してないものを使う、Replace.str等で5chを2chに読み替える)
hBFとしては読み込みだけ 5ch.net にすり替える手が当面使えるかもしれません。
そのための処理をコメントにしてますが一行仕込んでます。
現状私はこの形でXenoで読み書きできるようにしました。

もう一つ、読み込みは 5ch.net に対して行うとしても
書き込みは 2ch.net に対して行うという手も当面使えるかもしれません。
JaneXenoとかはクッキーの問題で 5ch.net には書き込めないけど
2ch.net には書き込める(書き込むスレの実体は同じ)ことがあるようで
このための処理もコメントにしてますが一行仕込んでます。

いずれにせよ明日にでもはしごを外されても不思議はない状況かなと思います。
正直言うと専ブラ側で何らかの対処がないと今後厳しいかなと思います。
("2ch.net"をハードコーディングしてる部分は山ほどあるでしょうから)

374名無しさん:2017/10/03(火) 00:42:10
JaneDoe View α ( build date: 1507130036 )
の環境で2.24を試してみましたが、下記のログが出てNGでした
Doe Viewはさすがにもうダメかなぁ… 上手く出来てる人いるかな?

(・∀・∀・)
(・∀・)サテオシゴト ε三三(; ・∀・)鯖マデオツカイ
HTTP/1.1 302 Moved Temporarily
HTTP/1.1 302 Moved Temporarily
HTTP/1.1 302 Moved Temporarily
HTTP/1.1 302 Moved Temporarily
( ・∀・)(・∀・ )オツカイオワリ 三三3
(・∀・∀・)
(・∀・)ナンカエラーダッテ HTTP/1.1 302 Moved Temporarily
(・∀・)カンリョウ!!

375名無しさん:2017/10/03(火) 00:43:52
Fiddlerのログでは下記のように感じです

http://egg.2ch.net/test/read.cgi/jisaku/1487585295
http://egg.2ch.net/test/read.cgi/jisaku/1487585295
http://egg.2ch.net/test/read.cgi/jisaku/1487585295
http://egg.2ch.net/test/offlaw2.so?shiro=kuma&amp;bbs=jisaku&amp;key=1487585295&amp;sid=sid

376374:2017/10/03(火) 00:53:31
すいません、いつものようにお気に入りから開こうとしたのがまずかったです
ボード一覧取得URLを5chに変えて、板一覧の更新をして
それから新規に板とスレを取得に行ったらOKでした

作者さんありがとう

377名無しさん:2017/10/03(火) 21:34:06
すりかえ行のコメントを外したら2chのままで取得できてます
ありがとう

378 ◆/vmukiyuzw:2017/10/12(木) 21:42:07
5chのread.cgi 7系のバージョンが上がったようで
差分取得時にログ破損が発生するケースが出ているようです。
まだ詳しくは調査中ですが、とりあえず<title>タグでのスレタイトルの表現が
若干変わっているようなので、当面以下の様なのでしのげると思います。

//スレのタイトルを取得

このコメントを検索
その下の一行を

var title = oBody.match(/<title.*?>(.*?)\n?<\/title>/mi);

var title = oBody.match(/<title.*?>(.*?)\s*?<\/title>/mi);

に書き換える。

379名無しさん:2017/10/12(木) 22:27:05
しのげるようになりました㌧クス

380 ◆/vmukiyuzw:2017/10/14(土) 22:40:34
hBFを修正しました(ver 2.25)

今回は>>378の分の反映のみです。
なので自力で書き換えて対応済みの方は取り込む必要はないと思います。

381 ◆/vmukiyuzw:2018/02/13(火) 21:55:30
bbspink.com の一部鯖(今のとこmercuryのみ?)が 5ch.net の read.cgi 07系に変わったようですが

read.cgi ver 07.2.0 2018/01 Walang Kapalit ★
Cipher Simian ★

と独自のバージョンアップがされているようで、専ブラによってはログ破損するケースが出ているようです。
もう少しテストしてから修正版をリリースします。

382 ◆/vmukiyuzw:2018/02/14(水) 01:45:18
hBFを修正しました(ver 2.26)

 ・bbspinkのread.cgiがバージョンアップ(07.2.0)されたので対応
  (バナー広告の除去)

今回の修正はOnBeforeResponse.txtのみです。
影響は今のところ多分bbspinkのmercury鯖でログの取得がおかしい
ケースだけだと思われます。

なんか泥縄的対応でイマイチだなあというのはわかっているのですが
精進します。

383名無しさん:2018/02/15(木) 03:21:05
乙です
pink見てないので放置してますがw

384 ◆/vmukiyuzw:2018/04/01(日) 23:52:40
5chの一部鯖(今のとこagreeのみ?)で read.cgi のバージョンアップが行われたようです。

read.cgi ver 07.2.1 2018/04 Walang Kapalit ★
Cipher Simian ★

今のとこ影響あるのは、>>1 みたいなレスアンカーの前に付くアンカータグの内容が
<a href="../test/read.cgi/operate/1507551280/8" rel="noopener noreferrer" target="_blank" class="reply_link">
みたいに、最後に class="reply_link" の部分が追加された点のようです。
この class=ほにゃらら の部分はAPIで取得したdatには含まれないようなので
htmltodat変換の結果をできるだけ元datに近づけようと思うと対応すべきなんでしょうが
多分多くの専ブラでは表示上特に影響はないと思われるんです。
もちろんdatサイズは変わってきてしまうので、既得ログの差分取得をしようとすると
破損する可能性が高いのですが。

のでちょっと様子見。
もし対応が必要となれば、後処理の最後くらいで

oBody = oBody.replace(/(target="_blank") class="reply_link">/g,"$1>");

こんな感じのを入れてやればいいかな。

385名無しさん:2018/06/02(土) 14:54:17
Fiddler公式にLinux版Fiddlerがあるのですが、これに対応したhtmltodatbyFiddlerを作っていただけないでしょうか?
CustomRulesを見ると微妙にWindows版と違ってて、そのままhtmltodatbyFiddlerのソースを貼ってもスレが読めません。
ちなみに当方のLinux環境(Ubuntu18.04LTS使用)では、JaneXenoをWineで動かしています。

386 ◆/vmukiyuzw:2018/06/03(日) 00:23:24
>>385さん
これは「自分のところにLinux環境を作って検証しろ」という案件かと思って一瞬頭がくらっとなったのですが・・・

Linux版Fiddlerをダウンロードして見てみるとCustomRules.csはJScriptではなくC#で書かれてるようです。
スクリプトのコメントを見ると

//注:これはC#版のスクリプトで、WindowsおよびMonoで使用できます。
// Windows上でのみ使用できるJScript.NETスクリプトとは異なります。 使用するために
// MonoのJScript.NETスクリプトをC#で書き直す必要があります。

とあります。(googleの翻訳)
(Monoってのは.NET環境をWindows以外でも動かすためのものらしい)
C#はコンパイルして動かすだけじゃなく最近ではスクリプトとして動かすことができるようになった
らしいので、それが取り入れられたんですかね。
気づいてなかったんですが、Fiddlerのオプションにも、スクリプトをJScriptかC#かを選べるのが
いつの間にか追加されてますな。

ということで、これは「htmltodatByFiddlerをC#に移植する」という案件だと理解しました。
面白そうなのでやってみますが多分時間かかると思います。
C#はやったことないですがオブジェクトの扱い方とかそんなに変わらないかなと思いましたが
キモの正規表現の部分で互換性の問題とか出ないかなと少し気になったりします。

387名無しさん:2018/06/03(日) 21:45:49
>>386
ありがとうございます。

一応、当方の環境
Windows7 home 64bitにVmware Workstation14Playerインストールして
VmwareのゲストOSでUbuntu18.04LTSを使用。

その後、UbuntuにmonoとWine、Fiddler(Linux版)を入れて
$ mono Fiddler.exeでFiddler起動
$ wine Jane2ch.exeでJaneXeno起動
です。

FiddlerとJaneXenoは確実に動いてます。
(JaneXeneは文字化けするのでwinetricksっていうのインストールしないとだめらしいです。)

JaneXenoからプロクシ設定127.0.0.1:8888で確実にFiddlerを通してくれます。
ただ、FiddlerがCustomRules.csを読み込みません。
これがCustomRules.csを読み込んでいないのか、
そのまま.jsのhtmltodatbyFiddlerをコピペしたからなのかは私にはわかりません。)

時間は気にしませんのでよろしくお願いいたします。!
ご苦労おかけしまして申し訳ありません。

388 ◆/vmukiyuzw:2018/06/20(水) 01:10:18
C#への移植はほぼできたと思うのですが、テストが十分でない部分がいくつかあります。

元々最初作ったころ2chのread.cgiのバージョンが06系で、過去ログは05系という状況
だったと思うのですが、その後07系が現れたり、bbspinkの独自形式が現れたりして
4パターンに分岐していたのです。
でも現状、ライブな板は(5ch,bbspink含め)全て07系のようです(07系の中でも違いはあるので
注意は必要なのですが)。
過去ログを探そうとしてもほぼ05系です。06系、bbspinkの独自形式にはなかなか出会えないので
今のところ動くかどうかテストできてないのです。
でもまあ「テスト出来たら教えてください」とユーザさんに投げるのもどうかと思うし
まあ見つかってから考えるしかないか。

389名無しさん:2018/06/23(土) 19:47:17
>>388
お疲れ様です。
C#版の公開はいつになるでしょうか?
公開してくれると嬉しいです。
5chでも公開して欲しい人いるみたいですし、ぜひお願いいたします!

390 ◆/vmukiyuzw:2018/06/23(土) 21:19:46
>>389さん
ubuntu+monoの環境で最低限の動作確認くらいはしておきたいと思ったので
今日環境構築やってたんですが、まだ時間かかりそうなんで先にC#版出すことにします。
導入手順が若干変わります。その他にもいろいろあってう〜ん明日中にはなんとか。

391 ◆/vmukiyuzw:2018/06/24(日) 20:21:52
hBFをバージョンアップしました(ver 3.00)

 ・スクリプトを JScript.NET から C# に移植
 ・一部サーバでread.cgiがバージョンアップ(07.2.1)されたので対応
  (タグ、要素の追加)
 ・書き込みの処理を見直し

>>386からやってたC#版です。
上にも書いてますが導入手順が若干変わります。
readme.cs.txt に書いてますのでお読みください。
大雑把に言うと
・Fiddlerの設定でスクリプトをC#に切り替える必要がある
・スクリプト中に取り込むファイルが2つ増える
ということになります。

あと、今日の18:00頃に一旦新バージョンを公開したのですが
バージョンアップの手順をミスってテスト版を公開してしまいました。
20:00頃に正式版を公開しなおしたので、申し訳ないですが
それ以前にダウンロードされた方はダウンロードしなおして
差し替えてください。

392 ◆/vmukiyuzw:2018/07/01(日) 23:35:49
まあ今更感もあるのですが、動作確認してみたかったので>>387さんの情報を参考に
ほぼ同等の環境 Windows8.1にVmware+Ubuntu+Mono+Fiddler+hBF(+Wine+JaneXeno)
を作ってみました。
一番手こずったのはWineの文字化け対応ですかね。

で、肝心のFiddler+hBFの動作ですが。
読み込みに関しては特に問題なくWindows版と同様に動作するように感じました。
書き込みも試してみると、なぜか私の環境ではXeno自体がエラーで強制終了してしまう。
Fiddlerのログを見ると、書き込み自体はうまくいっているようなのですが、
書き込み後のリロード処理でレスポンスを受け取った時点?で何故かお亡くなりになる。
うーん、これはFiddler+hBFの問題からは離れるかもなのでどこまで踏み込んだものか...
時間を見つけて調べてみますが、何か情報をお持ちの方がいれば教えてください。

393名無しさん:2018/12/01(土) 19:57:08
5chのread.cgiがver0.7.2.3にアップしました
新たな広告がレス間に入りました (id="horizontalbanners○○")
AA用classの追加 (class="AA")
返信アンカー(レスポップアップ)用classの追加 (class="reply_link")

bbspink read.cgi(ver0.7.2.0)
新たな広告がレス間に入りました (id="announcement")

以上の対応お願いします

394 ◆/vmukiyuzw:2018/12/02(日) 02:19:31
>>393
すみません、その辺の問題はver 3.00(C#版)で解決できたと思っていたのです。
「新たな広告」問題は「広告をカットするのではなくマッチするものだけ抜き出す」ように変更して対応したし、
「AA用class」は>>391時点で判明していたんで対応していたつもりです。
「対応がうまくいってない」「JScript版じゃないと嫌だ」とかいう話ならまたご相談ください。

395名無しさん:2018/12/02(日) 11:24:02
JScript版からC#版3.00に移行してみましたが、
どのスレも取得しようとすると302 Moved Temporarilyになってしまいます。
Fiddlerはエラーを出していません。

396名無しさん:2018/12/02(日) 11:35:54
2chへの読み込みリクエストを5chへの〜
がコメントアウトされていたのが原因でした。
失礼しました。

397名無しさん:2018/12/02(日) 12:34:34
余談ですが、コメントアウトされている
『5chへの書き込みリクエストを2chへの書き込みリクエストに変換』
のところに謝りがあるようです(ダブルクオーテーションの不足)

398名無しさん:2018/12/02(日) 14:48:32
別人ですが何とか上手く行きました
今までは「Jscript.NET」で運用
<環境>
win10 pro 1709
.NET Framework 4.7.1
Fiddler v5.0.20182.28034 for .NET 4.6.1
JaneDoe View α ( build date: 1507130036 )

<貼り付ける時にやったことと気づいた点>
1.readme.txtに
 ・メソッド
  public static void OnBeforeResponse(Session oSession)
  の最後(次の public static 〜 に直近の } の上)に OnBeforeResponse.cs.txt を挿入
 と記載されているが、
  の最後(次の static void 〜 に直近の } の上)に OnBeforeResponse.cs.txt を挿入
 でした。
2.>>397さんが指摘してますが、以下修正
   oSession.url = oSession.url.replace(@".5ch\.(net)/,".2ch.$1");
   oSession.url = oSession.url.replace(@".5ch\.(net)",".2ch.$1");
3.>>396さんと同様に
   //2chへの読み込みリクエストを5chへの読み込みリクエストに変換 5ch対応の板一覧を使っていれば多分不要
   //oSession.url = oSession.url.replace(@".2ch\.(net)",".5ch.$1");
   //5chへの書き込みリクエストを2chへの書き込みリクエストに変換
   //oSession.url = oSession.url.replace(@".5ch\.(net)",".2ch.$1");
 この2行のコメントアウト//を削除
4.janeで以下エラーが出るけど、ログを削除すれば正常に動作(削除が面倒だけどw)
 ( ・∀・)(・∀・ )オツカイオワリ 三三3
 (・∀・∀・)
 (・∀・)ソンナニナガクナイッテ HTTP/1.1 416 Fiddled
 (・∀・)カンリョウ!!

作者さんありがとう

399 ◆/vmukiyuzw:2018/12/03(月) 01:09:20
>>397さん、>>398さん
ご指摘ありがとうございます。
指摘いただいた点(readmeの記述とOnBeforeRequestの記述)を修正し
アップしました。
バージョンUPというほどのものではないのでバージョン番号は3.00のままです。

>  public static void OnBeforeResponse(Session oSession)
>  の最後(次の public static 〜 に直近の } の上)に OnBeforeResponse.cs.txt を挿入
> と記載されているが、
>  の最後(次の static void 〜 に直近の } の上)に OnBeforeResponse.cs.txt を挿入
> でした。

これは私の思い込みで間違えました。申し訳ありませんでした。
「次の関数の開始の直前の」という意図で「次の public static 〜 に直近の」と書いたのですが
現状では次の関数の開始は
static void OnReturningError(Session oSession)
という行なのですが、ここはプログラム上はコメントになってる部分なんです。
( /* と */ で囲まれている)
自分の開発環境ではコメント部分は色が変わって表示されるので
脳内で無いもの扱いしてしまい、その後プログラム上有効になる
public static void Main()
を意図して「次の public static 〜 に直近の」と書きました。
でもこういう書き方をした以上、素直に読めばご指摘の通りなのです。

なんかバージョンアップのたびにこういうあれこれでご迷惑をおかけするのも
心苦しいので、更新をある程度自動化できないかといつも考えるんですが
単純な差分ツールとかでは難しそうで。何かいいアイデアあれば教えてください。

400398:2018/12/04(火) 23:09:58
他の人は分かりませんが私は迷惑と思ったことは一度もなく感謝しかないです
プログラムやスクリプトは20年以上まともに触ってないから今更触れませんしw
人間は間違える生き物だと認識してますからこの程度なんてこと無いと思ってます
お役に立てず申し訳ない

401 ◆/vmukiyuzw:2019/09/01(日) 22:45:31
hBFをバージョンアップしました(ver 3.01)

 ・一部サーバでリクエストURLの末尾が"/"でないとエラーになるケースが
  出てきたので対応

http://xxx.5ch.net/test/read.cgi/yyy/1234567890

のようなURLは410等のエラーになり

http://xxx.5ch.net/test/read.cgi/yyy/1234567890/

のように最後に"/"がないといけなくなった、という状況のようです。


修正箇所は OnBeforeRequest.cs.txt の中の

oSession.url = v.g(1) + "/test/read.cgi/" + v.g(2) + "/" + v.g(3);



oSession.url = v.g(1) + "/test/read.cgi/" + v.g(2) + "/" + v.g(3) + "/";

にしただけなんで、わざわざ最新バージョンをダウンロードして通常のメンテナンス手順を
とっていただくよりも CustomRules.cs を直接修正していただく方が多分楽だし
間違いも少ないかもしれません^^;

402名無しさん:2019/09/01(日) 23:00:54
>>401
ありがとうございます

403名無しさん:2020/04/05(日) 22:37:46
書けるかな?

404 ◆/vmukiyuzw:2020/05/23(土) 01:19:56
なんか壊れるスレがあるなあと思って調べてみたら
名前欄に<img src タグが(これはどうやったら書き込めるのかまだわからないのですが)
入れることができるようになっていて、これがhBFの潜在バグに引っかかったようです。

もうちょっと調べますがとりあえず

// お絵かき機能やEmoticonのimgタグを除去。dat上では除去されてるのでそれに従ったがブラウザによってはなくてもいいかもしれない
oBody = oBody.replace(@"<img src="".*?(//.*?)"">","sssp:$1");

と記述した oBody = の行はコメントアウト(先頭に // を付ける)したほうがいいと思います。

405 ◆/vmukiyuzw:2020/05/23(土) 21:29:10
>>404
> と記述した oBody = の行はコメントアウト(先頭に // を付ける)したほうがいいと思います。
とか書きましたが、

// お絵かき機能やEmoticonのimgタグを除去。dat上では除去されてるのでそれに従ったがブラウザによってはなくてもいいかもしれない
oBody = oBody.replace(@"<img src=""[^/>]*?(//.*?)"">","sssp:$1");

とするほうがよさそうです。もう少しテストして確認後リリースします。

406 ◆/vmukiyuzw:2020/05/25(月) 00:09:51
401 ★自分 名前: ◆/vmukiyuzw[sage] 投稿日:2019/09/01(日) 22:45:31
hBFをバージョンアップしました(ver 3.02)

3.02 (2020/05/24)
 ・5chの仕様変更?により名前欄にimgタグが入るようになり、それに伴い
  一部の正規表現が不具合を起こしてスレが壊れるケースが出てきたので対応

結局、修正したのは OnBeforeResponce の

// お絵かき機能やEmoticonのimgタグを除去。dat上では除去されてるのでそれに従ったがブラウザによってはなくてもいいかもしれない
oBody = oBody.replace(@"<img src=""[^/>]*?(//[^""]*?)"">","sssp:$1");

の部分のみです。(>>405よりさらに用心しました)

修正前は <img src="".*?(// としていた正規表現に対し、名前欄に入るようになった imgタグは
<img src="/images/susu-16px.png">
のようになっていて、これにはマッチせず、同じレス中にURL等が含まれるとそちらの http:// の // に
.*? が意図せぬ長さでマッチしてしまい変換がおかしくなっていたようです。
(もともとマッチさせるのを意図していたのは <img src="//o.5ch.net/1kbww.png"> みたいなものだった)

.*? て正規表現は便利なパターンでついつい使ってしまいがちですが
こういう罠?もあるんで気を付けないといけないなと思いました。

407 ◆/vmukiyuzw:2020/05/25(月) 00:24:38
>>406
一行目はコピペのゴミです^^;気にしないでください

408名無しさん:2020/05/25(月) 22:08:58
更新ありがとうございます。

409名無しさん:2020/06/04(木) 01:33:34
なんか調子が悪いなと思ってスレを覘いたら更新来ていました。
いつもありがとうございます、更新お疲れさまでした。

410 ◆/vmukiyuzw:2020/06/08(月) 21:08:15
とりあえずまだ調べ中ですが多分今までhttp://でのリクエストを許していたのを
https://にリダイレクトするようになって不都合が出ているようです。
(対象は多分subject.txtとread.cgと,bbs.cgi)

まあ対処としてはOnBeforeRequestに

oSession.oRequest.headers.UriScheme = "https";

こういうのを入れることになります。
どういう条件で入れるか検証中。

411 ◆/vmukiyuzw:2020/06/08(月) 22:49:41
hBFをバージョンアップしました(ver 3.03)

3.03 (2020/06/08)
 ・5chの仕様変更により http:// によるリクエストが全て https:// にリダイレクト
  されるようになったので、5chに対するリクエストは最初から https:// にするよう変更

修正したのは OnBeforeResponce の最後(//ここまでの直上)に

//5chへの読み書きは全てhttpsになったので対応
if (oSession.url.ismatch(@"(?:\.[25]ch\.net|\.bbspink\.com)/(test/|[^./]*?/subject\.txt)")){
oSession.oRequest.headers.UriScheme = "https";
}

を足しました。>>410で書いた対象を https 対応にするものです。

これは前から>>346さんとかに指摘されてたことなんですよね。専ブラ - Fiddler 間だけでなく
5ch鯖 - Fiddler 間はデフォで https にしておくべきだと。
現実に問題になってやっと対処したという感じです。

412 ◆/vmukiyuzw:2020/06/09(火) 02:07:50
こういうときに限って(かどうかわからないけど) ribbon.to 繋がらないな・・・
あと、今でも 2ch.net のアドレスじゃないとアクセスできない専ブラもあるので
そこも対応しないといけないのかも

413名無しさん:2020/06/12(金) 19:31:04
ここの掲示この板をみつけたときからずっとアク禁だったのが初めて書きこめました。
まずは公開してもらってずっと更新してもらってありがとうございます。

早速不具合報告で申し訳ないですが
板一覧の更新に対してhttps対応が上手く行ってないようです。

私の設定の問題か何かの勘違いなら申し訳ないですが無視してくださっても大丈夫です。

414 ◆/vmukiyuzw:2020/06/12(金) 21:31:09
>>413さん
板一覧の更新!完全に失念してました。
個人的に、公式じゃない板一覧を使ってたり自動追尾に頼ったりしてたもので・・・
menu.5ch.net/bbsmenu.html へのhttps対応ができてないということですよね。

>>411での対応は対象を subject.txt と読み書きのcgiに限ったものでしたが
これに bbsmenu.html を加えるのも一案だと思いますが、いっそ
5ch.net , bbspink.com のサーバについては対象を限らず全部 https にしてしまっても
問題ないように思えてきました。その方向でもう少し検証してみます。

ただ、あくまでこれを書いている今の状況ですが、
menu.5ch.net/bbsmenu.html は http でも https でもアクセスは可能なようです。
http://mercury.bbspink.com/test/read.cgi/erobbs/1490249679/527- あたりから
話題に上がってますが、全 https 化したが対応できない専ブラがあったので
とりあえず一旦戻した(http でのアクセスも有りにした)という話のようです。

ので、不具合の状況(どの専ブラで、どういう設定をしてどういう不具合が
起きたのか)がわかると修正の参考になるかもしれませんので、
差支えない範囲で教えていただけると幸いです

415413:2020/06/13(土) 00:41:42
レスありがとうございます。
先に環境を書くべきでした。申しわけないです。

windows7 64bit

JaneDoe View α build date: 1507130036
(最新版は181014βのようですが公式サイトが閉鎖で手に入れられてません)

ボード一覧取得URLの設定は http://menu.5ch.net/bbsmenu.html です。
ちなみに https://menu.5ch.net/bbsmenu.html にしても同じ結果になります。

一覧を取得すると
ステータス欄は「HTTP/1.1 200 OK」の場合と「ボード一覧更新無し」の場合があるのですがどちらの場合も板一覧は空になります。

http://mercury.bbspink.com/test/read.cgi/erobbs/1490249679/527-についてですが
ボート一覧の不具合に気づいたのが6月11日ですので6月9日の「httpでもアクセス可能に戻した」という発言後での現象となります


現在以下の方法で回避できていますので全く急ぎませんが、もしよろしければ対応お願いします。
(リンク先はJane StyleのスレですのでJane Styleでもバージョンによっては同じ現象が起きているようです。)
http://egg.5ch.net/test/read.cgi/software/1590427365/679


余談ですが、久々に丁寧な文体で文章を書いたので何か慇懃無礼な感じになってる気が…なってたらすみません。

416413:2020/06/13(土) 01:49:50
追記
どうやらこれがjaneのボード取得の挙動らしいです。
http://egg.5ch.net/test/read.cgi/software/1590427365/680

417 ◆/vmukiyuzw:2020/06/13(土) 03:15:36
なるほどー、色々テストしてもfiddlerからはまともなhtmlが返ってくるのに
なんで何で専ブラ側で表示できないんだろう?と思っていたら、
専ブラ側の表示(というか解析力?)に問題があったわけですね。
(専ブラ(View)はbbsmenu.html を解析して jane2ch.brd の形式に変換してるのだが
https:// の形式のURLは多分対応していないので変換できない)
Styleでも起きてるのならXenoでも起きるんだろうな。。

・・・うーむ、となると話はかなり違ってきて、hBFとしては
「bbsmenu.html 内の https// :は全部 http:// に変換しとけば当面はうまくいくのかな?」
を検討しろって話になりますね。5ch側や専ブラ側の対応も今後どうなるのか
わかりませんが。

418名無しさん:2020/06/13(土) 06:18:33
一応JaneDoeView181014βはWebarchiveから落とせます

原因は同じだと思うのですが
httpsの掲示板に対応しているJaneDoeView181014βではmenu.5ch.net/bbsmenu.htmlでjane2ch.brdは作成されますが
板のURLがhttpsになっているのでjane2ch.brdのhttps://を削除しないとFiddlerを通らず読めないという問題があります

419 ◆/vmukiyuzw:2020/06/13(土) 21:59:19
>>418さん、ご指摘ありがとうございます。

私が検証用に入れてたViewも>>413さんと同じ 150713 だったので、
JaneDoeView181014βをwebarchiveから落として使ってみたところ、
menu.5ch.net/bbsmenu.htmlからjane2ch.brdは生成されることを確認しました。
(http://でもhttps://でも)

で、ウチの環境では生成されたままのjane2ch.brdからでもスレ一覧に飛べるし
そこからのスレ表示にも動作は問題ないように思います。
(もちろんhBFは>>411の対応をした状態で)
つまりViewを181014βにしたらとりあえず>>413さんがご指摘くださった問題は
クリアされて普通に使えるようになってしまったのではないかという状況です。

ので、>>418さんの

>>板のURLがhttpsになっているのでjane2ch.brdのhttps://を削除しないとFiddlerを通らず読めないという問題があります

の「問題」に私はたどり着けていません。うーむ、もう少し状況を
教えていただけると何かできるかもしれないですが。

ちなみに、Xenoでも(今使ってるのは 200505 で最新ではないですが)
板アドレスにhttps://を含むbbsmenu.htmlでも問題なく動作するのは確認しました。

420名無しさん:2020/06/13(土) 23:34:41
ギコナビで板のURLがhttpsになっているボード一覧を取得すると
板移転扱いされるのにスレ一覧とログが見えなくなり、
さらにキャビネットのカテゴリから板を開けなくなるので
置換の必要がありました
(とりあえず自力で暫定対策済)

421420:2020/06/13(土) 23:39:38
JScript.Net版暫定対策

if (oSession.url.match(/(?:menu\.[25]ch\.net\/bbsmenu\.html)/)) {
oSession.utilDecodeResponse();
oSession.oResponse["Content-Type"] = "text/plain; charset=Shift_JIS";
if (!oSession.oResponse["Last-Modified"]) {
oSession.oResponse["Last-Modified"] = oSession.oResponse["Date"];
}
var oBody = oSession.GetResponseBodyAsString();
//oBody = oBody.replace(/<A HREF=\"(\w*?)\"/ig,"<A HREF=$1");
oBody = oBody.replace(/https\:/ig,"http:");
oBody = oBody.replace(/\.5ch\.(net)/ig,".2ch.$1");
oBody = System.Text.Encoding.GetEncoding("shift-jis").GetBytes(oBody);
oSession.ResponseBody = oBody;
}

422413:2020/06/14(日) 03:30:42
181014βをダウンロードして試したところ
>>418さんと同じ状況になりました。

そしてこの時点で
「hBFとは関係なく専ブラの種類やバージョンによってボード一覧取得の挙動が大きく変わってしまう」
ということが明らかとなったので、hBF側での一律の対応は非常に面倒という判断から
勝手ですが私からの「ボード取得問題への対応」という要望は取り下げとさせて下さい。

もちろん作者様の負担の問題もありますが、
バージョンアップ時などに「○○を使ってる人はこの行のコメントアウトを外して〜」という運用よりも
非公式の板一覧を使ったほうがスマートだという私側の事情です。

お騒がせした上に勝手でまことに申し訳ないです。
ごめんなさい。




以下は何も新しい情報はないですが、一応試したことを書きます。
>>411は適用済みです

上書きインストールした場合と
新規インストールで「プロキシ設定」と「ボード一覧取得URL」のみを変更した場合のどちらも同じ動作でした。

jane2ch.brdの中身が

----------------------------------------------------------------
地震 0
headline.5ch.net bbynamazu 地震headline
egg.5ch.net namazuplus 地震速報
----------------------------------------------------------------

となるはずのところが

----------------------------------------------------------------
地震 0
https://headline.5ch.net bbynamazu 地震headline
https://egg.5ch.net namazuplus 地震速報
----------------------------------------------------------------

という形式になっています。
スレ一覧の取得までは問題ないのですがスレッドを取得しても表示は空白になりました。

423 ◆/vmukiyuzw:2020/06/14(日) 06:48:12
まずJane2ch Viewを新しいフォルダにインストールする。
Programs Filesの下とかは絶対ダメ。適当でいいけど新しいフォルダを作る。
そこにJaneなんたら.zipの内容を全部解凍する。
そしてJane2ch.exeを起動する。多分「ボード一覧がないから取りに行っていいですか?」
てメッセージが出るが「いいえ」を選ぶ。
で、何もない画面がでるがメニューの「設定」から「プロキシを使う」をチェックして
プロキシの「鯖」に「localhost」、ポートに「8888」を入力。
ボード一覧取得URLには「http://menu.5ch.net/bbsmenu.html」 (httpd://でもOK)
このときFiddlerも起動しておく。(hBFも仕込んでおく)
でメニューの「板欄」から「板一覧の更新」を選べば板一覧は取得できるはずなんだけどなあ

424 ◆/vmukiyuzw:2020/06/14(日) 06:52:55
>>423
>> (httpd://でもOK)
https:// や!何でこんなあほな間違いするんや

425418:2020/06/14(日) 08:06:09
FiddlerのDecrypt HTTPS trafficはどうなっていますか?
自分はオフなのですがもしかしたら復号しているので
View-https-Fiddler-https-5chでも読めているのかなと
>>421の対策(https→http)が気になりますが自分はC#版で試せていないです

426 ◆/vmukiyuzw:2020/06/14(日) 21:22:35
>>425
私のとこではオンにしてます。多分ご指摘の通りの理由で読めているのでしょう。
これまで「できます」と書いていたのはここがオンのため環境が違ってたということ
になるのか・・・
確かそれをオンにするとFiddlerが生成する証明書を認証させるための若干の手続きが
必要になったような記憶があります(詳細は忘れてしまいましたが・・・)
でも、httpsが全盛の現状ではオンにしておいたほうがFiddlerをトラブル少なく
使っていけるのではと勝手に思うのですが。

>>420-421さんの対策(httpsをhttpに変換する)は、いずれにせよ
httpsを含むbbsmenuに対応してない専ブラがある以上はやる必要があると
思うので、C#版で対処したものを出します。ちょっと検証する時間を下さい。

427 ◆/vmukiyuzw:2020/06/14(日) 22:27:51
あと、>>420-421さんにいくつかご質問したいのですが
よろしかったら教えてください。

・https→http 変換だけじゃなく 5ch→2ch 変換も入れてますよね。
これはギコナビが5ch.netのurlを認識しないということだと思うんですが
OnBeforeRequest のほうにも2ch→5chの変換が多分必要になりますよね。
どう対処されてるのか教えていただければと思います。

・ギコナビって、Jane系やV2C系にあるようなReplaceStr的な機能が
ないじゃないですか。
(dat自体は書き替えず、表示されるテキストのみを置き換える機能。
今回の件で言えば、表示上 https→http や 5ch←→2ch も可能。
これがあると、スレ上でhttpsのスレへのリンクが張られていても
専ブラとして有効なリンクとして認識できないので飛べない、という
状況を解決できる)
その辺をもしかしてhBF使って何とかされてるなら参考にさせて頂きたいと
思います。

428420:2020/06/14(日) 23:16:00
ご本家の方に晒すには恥ずかしいコードですがこんな感じです

・OnBeforeRequest
if (oSession.url.match(/(?:\.[25]ch\.net|\.bbspink\.com)\//)) {
oSession.oRequest.headers.UriScheme = "https";
oSession.url = oSession.url.replace(/\.2ch\.(net)/ig,".5ch.$1");
oSession.oRequest["User-Agent"] = "Mozilla/5.0 (Windows NT 10.0; Trident/7.0; rv:11.0) like Gecko";
if (oSession.url.match(/bbs.cgi$/)) {
oSession.oRequest["Accept"] = "text/html";
oSession.oRequest["Accept-Language"] = "ja";
//ギコナビだとPOSTの末尾に付く改行を削除。これが原因の書き込み拒否への対応
oSession.utilSetRequestBody(oSession.GetRequestBodyAsString().replace(/(\r|\n)/ig,""));
//これも↑の書き込み拒否への対応だったかも知れない
var headers = oSession.oRequest.headers;
headers["Referer"] = headers["Referer"].replace(/test\/read\.cgi\/.*?/ig,"test/bbs.cgi");
}
}

・ReplaceStr的機能
//ギコナビのreplace.iniだと正規表現が使えなかったのでここでリンクになっているものだけ書き換えるようにしたはず
oBody = oBody.replace(/ttps*:\/\/(\w*?)\.[25]ch\.net/ig,"ttp://$1.2ch.net");

こういった付け足しをしていったらC#版hBFへの移行が大変になったので、
C#版hBFを参考にさせていただいてJScript.NET版を修正しています

429 ◆/vmukiyuzw:2020/06/16(火) 00:13:57
hBFをバージョンアップしました(ver 3.04)

3.04 (2020/06/16)
 ・bbsmenu.html内のURLの記述で「https://」や「5ch.net」の記述に対応していない
  ブラウザへの対応。
  OnBeforeResponse で、 bbsmenu.html からのレスポンス内容を
  https:// → http:// 、5ch.net → 2ch.net に変換する処理を入れた。
  (デフォルトではコメントにしているので適宜コメントを解除してください)
  OnBeforeReqest では 2ch.net への リクエストは全部 5ch.net へのリクエストに
  変換するようにした。


とりあえず>>413から始まった bbsmenu.html の取得に対しての対応です。
bbsmenu内でURLがhttps://で記述されているとそもそもbbsmenuの解析に失敗して
板一覧の生成ができない(ギコナビ、View150713等?)、または
板一覧の生成はできるがbbsmenu内のhttps://に対応できてない?ため
そこからスレ一覧やスレに飛べない専ブラに対する一応の対処です。

OnBeforeResponse のほうは、最初の方に420さんが>>421さんが書いてくださったものを
ほぼそのままC#に書き替えたものを入れています。
現状うまく動いてる環境には影響が出るので、該当の処理はコメントにしています。

// bbsmenu内のurlの記述が「https://」に対応していない場合は次の行のコメントを外す
//oBody = oBody.replace(@"https:","http:");
// bbsmenu内のurの記述が「5ch.net」に対応していない場合は次の行のコメントを外す
//oBody = oBody.replace(@"\.5ch\.(net)",".2ch.$1");

の部分です。必要に応じてコメントを外してください。

OnBeforeReqest のほうは、>>428のご指摘も参考になったのですが
とりあえず現状2ch.netへのリクエストは全部5ch.netに飛ばして問題ないかと
以下のようにしました。

//2ch.netへのリクエストはとりあえず全部5ch.netに向ける v3.04
if (oSession.url.ismatch(@"(?:\.[25]ch\.net/)")){
oSession.url = oSession.url.replace(@".2ch\.(net)",".5ch.$1");
}

あと、>>425-426のFiddlerのオプションDecrypt HTTPS traffic は
どうなの?って問題があるのですが、自分はずっとオンで運用してきたので
オフにすると何ができなくなるか、オンにすると何が問題なのか、
この辺は時間不足で検証できていません。

430 ◆/vmukiyuzw:2020/06/16(火) 01:25:44
>>420さんのようにJScriptで頑張ってる方もサポートしていくべきなんでしょうが
ちょっと現状では両方やるには力不足で・・・ごめんなさい

431418:2020/06/16(火) 20:04:00
>>429
更新ありがとうございます
無事https://の無いjane2ch.brdが出来ました
念のためにmenu.5ch.net/bbsmenu.htmlのhttps強制に備えて
「5chへの読み書きは全てhttpsになったので対応」の部分を
if (oSession.url.ismatch(@"(?:\.[25]ch\.net|\.bbspink\.com)/(test/|[^./]*?/subject\.txt|bbsmenu\.html)")){
にしてDecrypt HTTPS trafficはオフのままで問題なく使えています

432 ◆/vmukiyuzw:2021/10/03(日) 00:16:19
htmltodatサポートスレッドを久々にレスをしたので、ついでにと言っては何ですが
ByFiddlerのほうの現況も報告しておこうかと思います。
結果だけ言うと、何も進展していません^^;

春ごろからですか?5chで理由不明のエラーで書き込み不可になり同時にBBx(?)
送りになってしまう状況になりました。この状況になった方は多いのでは?
で、そもそも書き込めないので原因を調べることもなかなかできず、しばらく何も
できませんでした。
そのうちいきなりBBx送りというのはなくなったようですが「PROXY変ですよん」とか
「余所でやってください」とかの意味不明のエラーエラーで書き込めないことが
多くなりました。
「プロキシ変ですよん」は大体理由がわかってそれの改善をしようかといろいろ
試したりしてたのですが、「余所でやってください」は理由が分からず今でも出ます。
その状況で下手に修正とかしても事態を悪化させるかもしれないので当面何もしない
ことにしました。

現在、自分では大丈夫そうなUAを使って書き込みはしてます。でもそれでも
「余所でやってください」は時々出ます。

433 ◆/vmukiyuzw:2023/06/23(金) 23:26:53
行きがかり上、先に向こうに書いてしまったのですが、
hBFをバージョンアップしました(Ver 3.05)

http://jbbs.shitaraba.net/bbs/read.cgi/computer/1929/1038588508/1088-1089

まあまあご無沙汰になってしまったのですが、その間
5chの書き込みに結構シビアな縛りがかかるようになってしまい、
hBFで対応するのはちょっと面倒すぎるかなと思ってあきらめて
いました。個人的には今でも書き込みには別のプロキシ通してます笑
ここは今後改善される望みはないので、書き込みには別のプロキシ
使ってください。申し訳ない。

434 ◆/vmukiyuzw:2023/07/13(木) 22:57:11
ここ数日いろいろありましたがとりあえずざっくりまとめると

・JaneStyleが5chのサポートをやめて、talkという掲示板専用になった
・5chはJaneStyleが仕切ってたAPIが使えなくなるので、APIの使用を
 中止(廃止?)した。
・結果、APIに対応しておらずプロキシ通さなければ使えなくなっていた
 専ブラが、元の仕様で使えるようになった。

これはある意味、APIに対応してないブラウザを救済するための手段だった
プロキシソフトの終焉なのかもしれません;;
まあ2ch←→5chとかhttp←→httpsとかの読み替え等は今でももあるので
全く不要になることもないような気もしますが。
私は、現行ログと過去ログをシームレスにアクセスできるのを便利に感じて
るので(それを意図して作ったわけではないのですがw)、
htmltodatByFiddlerを使い続けたいなと思ってます。

435 ◆/vmukiyuzw:2024/04/05(金) 00:55:08
hBFをバージョンアップしました(Ver 3.06)

3.06(2023/04/04)
 ・5chの read.cgi の変更に対応

htmltodatサポートスレッド
https://jbbs.shitaraba.net/bbs/read.cgi/computer/1929/1038588508/1104-

からのread.cgi変更への対応です。修正したのはOnBeforeResponse.csのみです。
修正箇所は</summary>の前に.*?を足しただけです。

前回更新で「これからの更新はGitHubでやります」と言ってしまったのですが
さぼってたせいか更新のアクセスができなくなってます^^;
のでとりあえず元の
http://mukiyu.g.ribbon.to/
で公開します。


新着レスの表示


名前: E-mail(省略可)

※書き込む際の注意事項はこちら

※画像アップローダーはこちら

(画像を表示できるのは「画像リンクのサムネイル表示」がオンの掲示板に限ります)

掲示板管理者へ連絡 無料レンタル掲示板