ミッションUD:白血病・がん患者を救え!Target:53

このエントリーをはてなブックマークに追加
86camel@hirune
>>60
ウチを始め、集計を行っているところは大概ココ↓のデータを取り込んでから
昨日データとの差分を計算したりしています。
http://www.grid.org/services/teams/team_members.htm?id=270E60B7-EC7B-4389-BA40-8C473D6C5A5B&ord=NAME&rsps=250

このデータは250人分で150KB前後(html形式)あり、それが117ページあります。
この全データを取り込むのに今までは早くて2〜30分、遅くても1時間で完了して
いました。

それが、ここのところ1ページを取り込むのに5分から下手をすると30分以上
ビジー状態になってしまうため、集計にとても時間がかかっているのです。

ちなみに、UD集計鯖が過負荷になっているときは特定の文字列("An error
occurred〜")を含むhtmlファイルを返してきます。最近はほとんどこのパターンで
蹴られます。

ということで、いくら速いマシンで自宅鯖を立てても、UD集計鯖がデータをとっとと
返してくれない限り集計は速くならんです。