【自動巡回DLソフト】祭り用うｐデータン

ほっしゅほっしゅ

>903

ご苦労様です。
使ってみたところ、登録拡張子はjpg;jpeg;gif;zip;lzh;になっているのですが
ttp://wow.bbspink.com/test/read.cgi/hneta/1059263461/921
ttp://wow.bbspink.com/test/read.cgi/hneta/1059263461/949
ttp://wow.bbspink.com/test/read.cgi/hneta/1059263461/950
ttp://wow.bbspink.com/test/read.cgi/hneta/1060205825/92
これらキューとして送られてました。
あと、起きたらエラーでてたんですがよく確認しないで閉じちゃったので詳細わからず^^;
それとできれば次スレも自動登録して欲しいけどそれは難しいでしょうか。

>>937
バグ報告ありがとうございます。テスト&修正してみますです。
えーと、「"h"抜きの状態のURLが、しかも"2chスレ"がIrvineに送られてしまう」
というバグだと認識してよろしいでしょうか?　（´・∀・`）

さらにエラー時のダイアログをやめて、エラーは全て無視しログを取るように改良中です。
現在は巡回中何かエラー　→　その後強制的に巡回停止したり、たまに落ちたり。^_^;
それに対処する例外処理をさぼってたので、今書いてます。

次スレ登録は、どういう基準でそれを次スレと決めつけるか、
それさえﾊｯｷﾘしてればわりと簡単そうです。
関係ないスレをひっぱる可能性大だと思いますが…。

もういいかげんそういう負荷与えるもの作るのやめれや

>>938
申し訳ないない、説明がわかりにくかったですね^^;
h"抜きの状態のURLが送られるんじゃなくて、実際のスレ見てもらった方がいいかと
思ってURL張りました。
見てもらうとわかりますが下記のものがそのまま送られてます。
http://noichigo.hp.infoseek.co.jp/cgi-bin/imgboard.cgi
http://www.39001.com/cgi-bin/cpc/gateway.cgi?id=phime
http://virgins.sexlola.com/cgi-bin/top.cgi?in=1051
http://plaza.rakuten.co.jp/hagisan2003/

たしかに確実に次スレってわかる方法がないので難しいですよね。
データンでは同じ板の拾ってたみたいですけど、どうしても関係ないスレもひろっちゃて
たしなぁ。

>>940
なるほど、そういう意味でしたか。
その2つのスレに対して抽出処理だけ行ってみましたが、
ちゃんと動いてました。。。(・д・ )
jpg;jpeg;gif;zip;lzh;で試したところ
1060205825→17のjpeg画像。
1059263461→16のjpeg画像、8のzip書庫。
が抽出されました。
コードにも誤りがなかったので、、、もう少し試してみます。
次スレ自動登録は判断が難しいですね。

>>941
次スレ判定難しいですよね。
無難なのが以前出ていたあるレス数以降で現在のスレッドよりも
新しく出来た同一板無いのスレッドを登録ですよねぇ

で、普通新スレには前スレのアドレスを貼るので登録したスレの
上位何レス目までに現在監視中のスレのアドレスが含むとか
激しく大変そうですが、結構しぼれるかもしれません

できればそこらへんの処理で取りこぼしたく無い人用に
スレッド判定の具合をオプションでどの程度厳密にするか
等を選べたらステキかもしれません

今後も開発がんばってください

作者様、ありがたく使わせていただいております

アドを登録して巡回後にソフトを終了→再起動すると
登録したアドが消えます。

私の所だけの不具合でしょうか？
WinXP_proSP1

>>942
そうですねー、ちょっと考えてみますね。

>>943
それはバグです、すんませんm(__)m
巡回中(タイマーが動いてない間)に巡回停止したり
終了させてしまうと、登録リストの一番上しか保存されません。
現時点では手動でバックアップとっといて、もらうことくらいしか
できません。
まとめてバク取りしたものを、もうすぐ置いときますので。。。

ちょっと教えて！
ふたばはデータンで落とせないの？？？

ttp://www.geocities.co.jp/SiliconValley/3645/upmini022.zip
登録アドレスが消えてしまうバグ修正しました。
その他いろいろ改善しました。
ログをいちいち取ったりします。ログは設定のタブで見れます。
↑項目の次にカッコが表示されますが、リストの何番目の項目
かを表してます。
エラーダイアログはよっぽどの事が起きないとでないようにしました。
大概のエラーは無視します。

次スレ誘導判定も大体構想ができました。
まず　自動で次スレを探し、登録するかどうか　を選ぶ。
するとしたら、　何レス以降から次スレを探し始めるか　。
さらに　・同板内のスレ　・現スレより新しく作成されているスレ
をピックアップするように絞り込めます。
おまけで　・次スレのタイトルに指定ワードが入っていたら登録
するようにもしようかと思ってます。

これが一番面倒くさそうなんですが、新スレの最初の方のレスを探って、
前レスへの誘導があるか　も確かめられるようにします。
要は相互に誘導リンクが貼られてるかという事ですね。
今のところこんな構想ですが、できる限り実装してみたいと思います。

1つのレスの中に、URLが2つあると片方しか登録されません
対処おねがいします

>>948
ご指摘ありがとうございます。
ところが、レス単位では無くスレ全体で検索をかけているので、
そういう事は無いはずなんですが…。
ひょっとすると差分の時のがおかしいのかもしれませんね〜。
もうすこし詳しく状況が分かるといいのですが。

hoshu

ご苦労様です。

要望なのですが、
1000に達したスレやdat落ちしたスレを自動で削除できるようにはできませんでしょうか？

dat落ちしたスレを巡回するとエラーで止まってしまうので…＾＾；

>>951
同意
また、次ｽﾚ誘導時のｱﾄﾞに　/150　がない場合も
ｽﾄｯﾌﾟしてしまいます。

よろしくお願いします。

>>951,>>952
どのツールへの要望?

>>953
申し訳ない・・・「うｐﾃﾞｰﾀﾝ」です。　　　ｽﾏｿ

うｐデータンminiも止まりますね。

作者の方々、よろしくお願いしますm(_ _)m

ちはーっ。
>>955
dat落ちスレはスルーするはずですが、
どこらへんで止まってしまいますか?
　もしエラーダイアログが表示された場合は、
デバッグコードというものも表示されるので、
それも教えていただけると助かります。
それともエラーも出ずに固まっちゃうのかな? (ｶﾞｸｶﾞｸ

>>956
955じゃ無いですが、エラー無しで固まるのとデバックコード３（PS撮っっておいたのですが消しちゃったので違うかも
しれません）で止まるのが半々くらいです。
ただ原因が1000いったスレのせいなのか、他にあるのかはわからず。

あと要望としてはURLだけじゃなくてスレ名表示してくれると、削除するのとかわかりやすくて助かります。

>>957
コード3は内部処理(例えばURLなど文字列の処理)時のエラーです。
そして多分、固まるのは巡回時だと思うのですが、サーバーからの返事が
ずっと返ってこない場合　固まります。(今のところテストで固まったことはありませんが)
これはもうちょっと先になると思いますが、タイムアウトとリトライ回数を
設定できるようにする事で改善されると思います。
また、スレ名やレス数も取得するようにしますね。

もしよければエラーがでたり、固まった時の
・登録していたスレの数(おおよそで○)
・動かしつづけた時間
・巡回のインターバル
なども教えていただけると、もっと正確に状況が把握できると思いますm(__)m

>>958
ありが�d　参考にします。

>>958
スレの数は大体4くらいで、1や2だとあまり固まった覚えないです。
インターバルは2分で、時間は早い時ですと巡回20回目あたりで
止まってる事がありました。
テストで固まらないということは、何かこちらの環境に駄目な所があ
りそう。

>>960
テストでは36ほどのスレをインターバル5分で
半日ほど動かしましたが、とりあえず動いてました。
40分で固まりますか･･･（；´Д｀）
それが巡回中(モナーがくるくる回っている状態)だとすれば、
やっぱりタイムアウト関係だと思います。
まず1巡以上しているようなので、URLが正しくないということではなさそうですね。
(巡回直後にデバッグコード3が出るときはリストが
http://サーバー/test/read.cgi/板/dat番号
のフォーマットで正しく登録されてるかチェックしてみてください。)

(´-`).｡ｏO(それとアプリケーションタイトルが切り替わらないバグは修正します)

(´-`).｡ｏO( 2chへのアクセスを防ぐ串もあるなぁ )

>>903@名無し�V
がんがって下さい

ﾎｼｭ

ぬぉぃ　河井よ

miniもやっとβが取れそうな感じになってきました。
忙しくてまだ、upしてないんですが…。

その代わりといっては何ですが、ちょっとしたツール作りました。
画像をｶﾞﾝｶﾞﾝ落としていると、蓮やグロなどの糞画像も沢山
落ちてきますが、そういうものをリストに追加し、以後中身が全く
同じファイルがあれば消すツールです。
自分用に使ったんですが、意外と便利だったので公開します。
URLが違うがファイルの内容は一緒という場合有効かもしれません。
ttp://www.geocities.co.jp/SiliconValley/3645/file/sfc01.zip

>>967
ﾍﾟｰｼﾞが見つかりません　と出ます・・・＿|￣|○

>>968
スイマセン。
アホみたいなバグがあったので、01は公開中止しました。
修正したです(中身のバージョン表示はそのまま)↓
ttp://www.geocities.co.jp/SiliconValley/3645/file/sfc011.zip

うpデータン miniを久々にアップデートしました。(0.23β)
ttp://www.geocities.co.jp/SiliconValley/3645/other.html
改善点
・アイコンを表示するようにした。
・スレのタイトル・レス数を取得するようにした。
・URIの正規表現で抽出の取りこぼしをほぼ無くした。
・タイトルがタイマー処理時も切り替わらないのを修正。
変更点
・登録タブ、禁止タブ→リストの項目クリックでURLをURL欄に表示。
・履歴タブ→ダブルクリックでそのURLをブラウザ表示。
・DL処理時の表示を明確化(モナーが回っている時がDL、抽出中)
注意点
・以前のバージョンからアップデートする時。
　既に一度でも巡回しているスレのタイトルは取得されません。
　その場合、レス数表示もその巡回時からのカウントになります。
・DL処理時(モナーが回っている時)に巡回停止すると、そのスレは
　未取得スレとなります。要は次回は最初から取得しなおすことになります。

スレタイ、レス数を取得するには、スレが未取得である必要があります。
またバグ等ありましたら報告お願いします。

それと、DL中固まったようになる状態がテスト中に確認されました。
固まる原因のほぼ100%が、DL時のタイムアウトが設定できないため
なので早く修正したいと思っています。
↑の対策としては放置が一番だと思います。。。
それと串は2chからdatを落とす際はあまり関係ないかな、と思って
実装したんですが、凍結してあります。
よければ人柱テストお願いします。(｀・ω・´)

追加です。
巡回ごとスレ毎にdupminixxx.txtが作成されます。
抽出したURLがすべて書かれてます。
デバグ用なので捨ててしまって構いませんが、
不具合がおきたときはこのファイルも参考になるかも^^;

たまに時間のカウントがおかしくなりますた。。。

最近祭りもないなぁ。
だめぽ。。。

>>974
祭りもないし、スレにlink張らなくなっちゃった所多いので、折角のバージョンupも
なかなか試す機会に恵まれない。。。。

>>975
禿同･･･＿|￣|○

このさいうｐろだ巡回にしちゃお

>>976
でも2ch鯖にとってはいい傾向だよね。
どうせまた休みになったら人が増えて
ﾃﾞｰﾀﾝの需要が上がると思う。

といってみるテスト。

梅

最近巡回ソフトではダウソ出来ないようにしてるうｐロダがあるよ

>>984
それを攻略するんですよ



ガンバレ