ruby-list

なひです．

> From: TAKAHASHI Masayoshi [mailto:maki@inac.co.jp]
> Sent: Tuesday, June 01, 1999 12:46 PM

> # というわけで、ruby-listで振り直しです(^^;

わざわざ振り直して頂いたのに，お返事が遅くてすいません．^^;

> ええっと、WWWページの更新時刻を取得するエージェントが
> ほしいと思いまして……とりあえずPerlのLWP::Simpleで
> 書いてみたものの、
> 
> ・やっぱ並行でエージェントとばしたい。
> (結構時間がかかる。遅い時だと現在49ドメインで3分くらいかかったりする。
>  HEADリクエストだけなのに)

ネットワークへの負荷を考えると，どのくらい平行に動かすのが
最適なのかは，悩みどころですよね．
「Linkavailable: Ruby」http://www.jin.gr.jp/~nahi/link-Ruby.html
のエイジェントは現在6プロセスが平行に動いているんですが，
約170ドキュメントの更新時間チェックに，平均90秒くらいです．
単純に6倍すると．．．9分ですか．

> ・同じホストへのリクエストは一回の接続でまとめて取得するべき。

そう思います．HTTP/1.1で接続しておきながら
毎度セッションを張り直すのは，非常にかっこわるいです．俺だ（涙

> そこで、Connection: Keep-Alive (というかHTTP/1.1)に対応した
> HTTPクライアントのRubyライブラリを試してみました。試したのは
> 二つです。
> 
> 1.http-access (前橋さん作成、contribにあります)
> 2.KNClient (なひさん作成、「るびゐ、あり□」
>   ( http://www.jin.gr.jp/~nahi/Ruby/ruby.shtml#KNClient )
>   にあります)

えーと，KNClientは，それを目指して作り始めたものの，
Persistent Connectionsには対応してません．
現時点で対応済みなのは，前橋さんのhttp-accessだけじゃないでしょうか．

さらに言えば，KNClientは，複数行にまたがるHTTPヘッダにも
対応してません（http-accessは対応してます）．
ちゃんと書いてなくてごめんなさい．

というわけで，現時点では，
http-accessを（必要なら）修正して使うのがベストだと思います．

> 最初はhttp-accessを使ってみたのですが、どうもコネクションを張った
> ままrequestするのがうまくいきませんでした(毎回closeしてopenしなおせば
> OKでした)。

以前のスレッドをちゃんと追いかけてなかったのですが，
どういう現象なんでしょうか．
一応中は眺めた（はず ^^; な）ので，現象の発生する
スクリプトとか見せてもらえれば，調査できるかもしれません．
できないかもしれません．

> で、KNClientでは、どうやら私の使いたいのはKNSession クラスのようなの
> ですが、それは「# not implemented. ^^;」ということらしい(^^;;のでした。

はいその通りなんです．^^;

	/	/	/

以後，いいわけです．^^;

Keep-Alive対応を考えていたんですが，
ちょっとあのままでは具合が悪いことに気づき，
一から設計し直したりしてました．
現在作成中のモノでは，

  include 'Inet::Constants'
  userAgent = 'KinofingerCLIENT'
  proto = Protocol.new( 'HTTP/1.1' )
  accepts = Accepts.new( 'text/html', 'img/gif', '*/*' )
  proxy = Proxy.new( 'localhost', 8080 )
  cache = Cache.new()
  cookies = Cookies.new()
  anAgent = Inet::Client.new( userAgent, proto, accepts, proxy, cache, cookies )

  flag = Connection::CONNECTION_REUSE | Connection::FORCE_RELOAD |
    Connection::NO_CACHE
  extensionHeader = "If-Modified-Since: Sat, 15 May 1999 19:56:42 JST\n" <<
    "Content-Transfer-Encoding: 7bit\n"

  uri = 'http://www.jin.gr.jp/~nahi/'
  aFile1 = anAgent.get( uri, flag, extensionHeader )

  site = 'http://www.jin.gr.jp/'
  relativePath = [ '/~nahi/', '/~nahi/Ruby/' ]
  aConn = anAgent.open( site, flag, extensionHeader )
  aConn.get( relativePath ) do |aFile2|
    p aFile2
  end

  anAgent.close()

なんて呼び出せるようになるといいなぁ，なんて夢想してます．
CacheやCookiesの実装方法なんて，現時点では全然考えてませんが．^^;

本業で使うつもりだったんですが，そちらで用がなくなって
中断したまま．．．Linkavailableでも使いたいんですが．．．
「いやまぁ既に動いてるものもあるし」なんて弱気．^^;

Thread

Prev Next

In This Thread

Prev Next

[#14708] ruby-gtk-0.18 — "Dai.K." <MAP2303@...>

[#14713] ruby/gtk 0.18 — matz@... (Yukihiro Matsumoto)

[#14715] HTTP Client with Ruby — TAKAHASHI Masayoshi <maki@...>

[#14736] RE: UNIX-based OS on PC-98x1 (Re: [BUG] def foo; foo end; foo) — "Takehiko Ueki" <takehiko@...>

[#14737] Re: [BUG] def foo; foo end; foo — "Takehiko Ueki" <takehiko@...>

[#14739] manual bug — kikutani@...

[#14740] Re: nkf(NKF::JIS, str) — 助田 雅紀 <masaki.suketa@...>

[#14746] gsub("'", "\\'") — Toshihiko SHIMOKAWA / 下川俊彦 <toshi@...>

[#14747] Ruby-gtk の Text Widget について — Takano Naoki <takanon@...>

[#14756] Re: ちっちゃい Ruby — 中村暁史 <anakamur@...>

[#14761] CGI.rb — Wakou Aoyama <wakou@...>

[#14763] do end + do end — Wakou Aoyama <wakou@...>

[#14765] ruby 1.3.4 with ipv6 — Yasunari Momoi <momo@...>

[#14766] ruby 1.3.4 on BSD/OS 3.1 — Yasunari Momoi <momo@...>

[#14790] Microsoft Perl ? — ARIMA Yasuhiro <fit0298@...>

[#14804] telnet.rb(0.20) — Wakou Aoyama <wakou@...>

[#14821] Re: UNIX-based OS on PC-98x1 (Re: [BUG] def foo; foo end; foo) — "Takehiko Ueki" <takehiko@...>

[#14822] Re: [BUG] def foo; foo end; foo — "Takehiko Ueki" <takehiko@...>

[#14826] Re: UNIX-based OS on PC-98x1 (Re: [BUG] def foo; foo end; foo) — "Takehiko Ueki" <takehiko@...>

[#14827] ruby-gtk-0.18 — Kenji Horikoshi <k-horix@...>

[#14833] Regacy scripts depend the ruby old version. — ARIMA Yasuhiro <fit0298@...>

[#14842] texinfo document for ruby-1.3 — Koji Arai <JCA02266@...>

[#14843] Ruby/Tk TkText#dump — Tomoyuki Kosimizu <greentea@...2.so-net.ne.jp>

[#14846] Re: Microsoft Perl ? — 助田 雅紀 <masaki.suketa@...>

[#14854] Rubyfaq-990607 — Akira Endo <akendo@...3.rim.or.jp>

[#14860] CVSup server — Yasuhiro Fukuma <yasuf@...>

[#14863] OO Software Construction by Meyer — Akira Endo <akendo@...3.rim.or.jp>

[#14874] ruby-gtk trouble — Jun Adachi <adachi@...>

[#14891] Re: extension library for mutual exclusion — SHUDO Kazuyuki <shudoh@...>

[#14898] font-lock on ruby-mode — Koji Arai <JCA02266@...>

[#14900] Rubyfaq-990608 — Akira Endo <akendo@...3.rim.or.jp>

[#14908] [Q] finalizer — gotoken@... (GOTO Kentaro)

[#14917] Ruby/Tk and Threads — Tomoyuki Kosimizu <greentea@...2.so-net.ne.jp>

[#14951] Missing tag in Reference Manual — Hiramatsu Yoshifumi <hiramatsu@...>

[#14953] 男親なら誰でも思う — 中村暁史 <anakamur@...>

[#14957] textarea with CGI.rb — HATTORI Masashi <hattori@...>

[#14970] thread with curses — HATTORI Masashi <hattori@...>

[#14980] 初期化メソッドの追加 — ARIMA Yasuhiro <fit0298@...>

[#14984] rd2html — TAKAHASHI Masayoshi <maki@...>

[#14993] Rubyfaq-990611 — Akira Endo <akendo@...3.rim.or.jp>

[#14994] FreeBSD port kit for Ruby/Gtk — Yasuhiro Fukuma <yasuf@...>

[#14995] HUP シグナルを受けとってファイルの読み込みがうまくいかないのですが — Keisuke Minami <keisuke@...>

[#14996] HUP シグナルを受けとってファイルの読み込みがうまくいかないのですが — Keisuke Minami <keisuke@...>

[#14997] ruby-1.3.4-990611 bug? — a-shigi@... (A.Shigihara)

[#15001] [BUG] File のサブクラスのインスタンス変数 — "Takehiko Ueki" <takehiko@...>

[#15003] 文字列から数値への変換失敗を検出したい — ARIMA Yasuhiro <fit0298@...>

[#15005] extention for faster scan — Minero Aoki <aamine@...>

[#15012] ext ML の過去ログはいずこ？ — 中村暁史 <anakamur@...>

[#15035] [Bug] Rubyfaq-990611 — Akira Endo <akendo@...3.rim.or.jp>

[#15039] Re: [BUG] File のサブクラスのインスタンス変数 — "Takehiko Ueki" <takehiko@...>

[#15042] Ruby for Debian GNU/Linux — akira yamada / やまだあきら <akira@...>

[#15043] UDPsocket bind — HATTORI Masashi <hattori@...>

[#15044] CGI.rb — Norihito Shinzan <kabbalah@...>

[#15045] mail library — Minero Aoki <aamine@...>

[#15053] ruby 1.2.6 is out! — matz@... (Yukihiro Matsumoto)

[#15056] mod_ruby 0.1.2 — Shugo Maeda <shugo@...>

[#15057] 複雑？な構造体の定義方法 — Koichi Shigematsu <shige@...>

[#15064] hako-iri — Masatoshi SEKI <m_seki@...>

[#15067] Re: [BUG] File のサブクラスのインスタンス変数 — "Takehiko Ueki" <takehiko@...>

[#15068] command not found — 助田 雅紀 <masaki.suketa@...>

[#15074] Re: command not found — 助田 雅紀 <masaki.suketa@...>

[#15093] String#rindex with arbitrary starting point — kjana@... (YANAGAWA Kazuhisa)

[#15098] Re: HUP シグナルを受けとってファイルの読み込みがうまくいかないのですが — "NAKAMURA, Hiroshi" <nakahiro@...>

[#15101] ruby-1.3.4-990611 [BUG] Segmentation fault — Yuji Shigehiro <sigehiro@...>

[#15104] delegate.rb — Wakou Aoyama <wakou@...>

[#15107] (?: ) in regexp — Yoshiki Wada <wada@...>

[#15108] ruby-1.3.4-990611 can not compile on alphaev56-osf4.0e — Yuji Shigehiro <sigehiro@...>

[#15111] attr makes a strange name method — Yoshinori Toki <toki@...>

[#15112] pty on NeXTSTEP3.3J — SHIROYAMA Takayuki <psi@...>

[#15113] description in links.html — kjana@... (YANAGAWA Kazuhisa)

[#15116] irb & ruby — Takashi Nishimoto <g96p0935@...>

[#15117] 他のプリンタで印刷したい — Takashi Nishimoto <g96p0935@...>

[#15121] ruby-gtk-0.19 released — Hiroshi Igarashi <igarashi@...>

[#15127] RE: face mark(Re: mail library) — 助田 雅紀 <masaki.suketa@...>

[#15128] telnet.rb and using it — matz@... (Yukihiro Matsumoto)

[#15131] game of life: ruby/gtk version — Takahiro Maebashi <maebashi@...>

[#15160] undefined method `-@' for Fixnum (NameError) — Tomoyuki Kosimizu <greentea@...2.so-net.ne.jp>

[#15168] [Q] Thread and Queue — kazuo@... (Kazuo DOI)

[ruby-list:14834] Re: HTTP Client with Ruby

Thread

[#14740] Re: nkf(NKF::JIS, str) — 助田　雅紀 <masaki.suketa@...>

[#14846] Re: Microsoft Perl ? — 助田　雅紀 <masaki.suketa@...>

[#15068] command not found — 助田　雅紀 <masaki.suketa@...>

[#15074] Re: command not found — 助田　雅紀 <masaki.suketa@...>

[#15127] RE: face mark(Re: mail library) — 助田　雅紀 <masaki.suketa@...>