ruby-list

大島＠北陸先端科学技術大学院大学です。

現在、Web用のrobotをrubyで書いています。以前一度書こうとして挫折した
ことがあるのですが、Ruby Application Archiveのnet、uriなどのライブラ
リの充実のおかげで、今回は何とか作り上げられそうです。

そのなかで、いくつかの不具合が出てきたので、報告・質問いたします。


1. rubyの正規表現について

robots.txtのコメントを取り除く処理で
line.sub!(/\s*\#.*/, "")
としている部分でSegmentation faultが起きたので気づいたのですが、
以下のように非常に長い行で、正規表現がらみの処理をしようとすると、
Segmentation faultが起きてしまいます。

% ruby -ve '("#" * 245760).sub(/.*/, "")'
ruby 1.4.3 (1999-12-08) [sparc-solaris2.7]
Segmentation fault

ruby自身のソースは読めていないので、とりあえず報告のみです。


2. Ruby Application ArchiveのLibraryであるuri(version 3.41)について

a. 以下のようにカレント・ディレクトリ(".")が連続したURLでは、カレン
ト・ディレクトリが残ってしまいます。

% ruby -ruri -e 'puts URIModule::URI.create("http://a/b/././c")'
http://a/b/./c
% ruby -ruri -e 'puts URIModule::URI.create("http://a/b/././../c")'
http://a/b/c

b. 以下のようにサイトのルートディレクトリ(?)で、カレント・ディレクト
リを明示的に指定した相対パスがあると、スラッシュ("/")が挿入されてし
まいます。(実害はあまりなさそうですが。)

% ruby -ruri -e 'puts URIModule::URI.create("http://a/", "./g")'
http://a/.//g

bの問題は、RFC2396に出てくる例に対応して、「URI.create("http://a/",
"/./g") => "http://a/./g"」とする処理のせいです。ところがRFC2396の意
図は、そもそもスラッシュで始まる相対パス(および絶対パス)の場合は、パ
スの解釈はしない(パスを一意に解決しない)ことだと思われます。したがっ
て、現在の対応方法は誤っていると思われるので、この部分は削除した方が
良いと思われます。(スラッシュで始まる相対パスおよび絶対パスを一意に
解決するかどうかは、また別問題ですが。)

以上、a、bの2点を修正したパッチが、以下のものです。

__patch for uri.rb__
diff -u1 uri_old.rb uri.rb
--- uri_old.rb  Fri Apr 28 15:13:11 2000
+++ uri.rb      Fri Apr 28 15:42:33 2000
@@ -345,7 +345,4 @@
       # remove current directories
-      apath.gsub!(%r|/\./|, sLASH)
+      apath.gsub!(%r|/(\./)+|, sLASH)
       apath.sub!(%r|/\.\z|, sLASH)
-      if path[0..2] == sLASH_DOT_SLASH
-       apath = sLASH_DOT_SLASH + apath
-      end
__END of patch for uri.rb__
 

3. html-parser(version 19990912)について

HTMLファイルの解析に、昔のアーカイブには存在したhtml-parserを利用さ
せていただいています。しかし、現在のRubyApplication Archiveには見当
たりません。便利だと思われるのですが、もうサポートがされていないので
しょうか？それとも、他にhtmlに使えるパーサがあったりするのでしょうか？

ちなみに2つほどバグと思われる部分を見つけたので、以下にパッチを添え
ておきます。

__patch for sgml-parser.rb__
--- sgml-parser_old.rb  Fri Apr 28 16:55:29 2000
+++ sgml-parser.rb      Fri Apr 28 16:55:37 2000
@@ -53,3 +53,3 @@
   def setliteral(*args)
-    self.literal = true
+    @literal = true
   end
__END of patch for sgml-parser.rb__

__patch for html-parser.rb__
--- html-parser_old.rb  Fri Apr 28 16:51:40 2000
+++ html-parser.rb      Fri Apr 28 16:54:20 2000
@@ -249,3 +249,3 @@
       if a == 'type'
-       if len(v) == 1
+       if v.length == 1
          v = v + '.'
__END of patch for html-parser.rb__


以上です。

大島 龍之介	ryu@jaist.ac.jp

Thread

Prev Next

In This Thread

Prev Next

[#21717] patch of `Support for strings represented as a vector of ordinals' — sekita-n@... (Nobutaka SEKITANI)

[#21718] print, puts, printf — Masaki Suketa<CQN02273@...>

[#21730] Project Apollo 5.01 — Kazuhiro Yoshida <moriq.kazuhiro@...>

[#21732] GtkRadioMenuItem activate — mof <mof@...>

[#21736] OBJECTDAY 2000 — 助田 雅紀 <masaki.suketa@...>

[#21738] ruby の W3C ドラフト — KUBO Takehiro <tkubo@...>

[#21745] RubyUnit 'runit/cui/testrunner.rb' patch — Hideto ISHIBASHI <hideto-i@...4u.or.jp>

[#21749] 漢字の文字化けについて — "KAWAUCHI" <kawauchi@...>

[#21752] ruby 1.4.4.deb — akira yamada / やまだあきら <akira@...>

[#21754] — Yoshiaki Oda <oda@...>

[#21759] Q: to_str — Tomoyuki Kosimizu <greentea@...2.so-net.ne.jp>

[#21760] proposal to change uri.rb — Tomoyuki Kosimizu <greentea@...2.so-net.ne.jp>

[#21765] rdindex-1.0.0 — rubikitch <rubikitch@...>

[#21767] [Patch] ftpup: illegal timezone adjustment — "NAKAMURA, Hiroshi" <nakahiro@...>

[#21781] how to get error reason in ftplib ? — "Kikutani, Makoto" <kikutani@...>

[#21785] VB meets Ruby — arton <arton@...>

[#21787] blade again? — "Kikutani, Makoto" <kikutani@...>

[#21789] about ftplib(ftpup) — goto@...

[#21798] script language magazine? — Akihiro Yamauchi <aygoofy@...>

[#21804] blade namazu — Shin-ichiro HARA <sinara@...>

[#21808] tktext.rb BUG — nagai@...

[#21811] Ruby icon competition は？ — Kazuhiro Nishiyama <nishiyama@...1.tiki.ne.jp>

[#21813] にっき — OZAWA Sakuro <crouton@...>

[#21818] RubyToken::TkSTRING::value — Yasushi Shoji <yashi@...>

[#21821] mod_ruby から拡張モジュールがロードできない — Norihito Shinzan (Jun Kabbalah) <kabbalah@...>

[#21822] ruby1.4.3 の cgi.rb でクッキー部分でのバグ — Keisuke Minami <keisuke@...>

[#21823] ruby1.4.3 の cgi.rb でクッキー部分でのバグ — Keisuke Minami <keisuke@...>

[#21826] `require': No such file to load -- tcltklib (LoadError) — "Takuro Suzuki" <etsuzuki@...>

[#21828] Re: proposal to change uri.rb — "ta-ka-si@..." <ta-ka-si@...>

[#21829] CVF: comp.lang.ruby — Yukihiro Matsumoto <matz@...>

[#21834] How can i use mod_ruby — goto@...

[#21837] site_ruby & Linux distribution — OZAWA Sakuro <crouton@...>

[#21838] ループの中での exec の使い方 — Ko Tanikawa <agape@...14.odn.ne.jp>

[#21843] [Q]Security Check($SAFE): FileTest within mod_ruby — Hideto ISHIBASHI <hideto-i@...4u.or.jp>

[#21862] #define const — Toyofuku <toyofuku@...>

[#21870] rubyunit — rubikitch <rubikitch@...>

[#21887] psql.rb の修正 — Saitou Noboru <noborus@...>

[#21891] 誕生日おめでとう〜 — rubikitch <rubikitch@...>

[#21892] ユーザーの新規登録方法について — goto@...

[#21902] Re: #define const — toyofuku@...

[#21905] rd-draft.ja.rd — akira yamada / やまだあきら <akira@...>

[#21907] blade で — 時田幸粋 <ktokita@...>

[#21909] Ruby 1.4.4 — Yukihiro Matsumoto <matz@...>

[#21916] Ruby/Qt and Ruby/KDE — Nobuyuki Horie <horie@...>

[#21918] ANN: ActiveScriptRuby English Page — arton <arton@...>

[#21919] Re: #define const — toyofuku@...

[#21922] ruby-1.4.4 binary for BeOS 5 (Intel) — tenmei@... (Noriaki Harada)

[#21928] SomeError — Masatoshi SEKI <m_seki@...>

[#21931] ruby-mode — Yasushi Abe <yasushi@...>

[#21934] close on disk full — "Kikutani, Makoto" <kikutani@...>

[#21940] Ruby 1.4.4 binaries for Cygwin and DJGPP — WATANABE Hirofumi <Hirofumi.Watanabe@...>

[#21944] [Q] RD with CSS — gotoken@... (GOTO Kentaro)

[#21956] Thread & STDIN — Masato Toyoshima <mt@...>

[#21964] location of ruby-1.4.4.tar.gz — Yasuhiro Fukuma <yasuf@...>

[#21965] Re: [ruby-math:00257] Re: Polynomial.rb and floating point exception — kjana@... (YANAGAWA Kazuhisa)

[#21974] Re: Polynomial.rb and floating point exception — "K.Kodama" <kdm@...>

[#21981] rd2man — WATANABE Hirofumi <eban@...>

[#21990] rb.org — OZAWA Sakuro <crouton@...>

[#21998] Ruby 1.4.4 and Ruby/GTK 0.23 RPM packages for Vine Linux 2.0 (Vine Plus) — Naoki Kawakami <knao@...>

[#21999] media watch 2000.03.18 — Noritsugu Nakamura <nnakamur@...>

[#22005] Any good books for graph library? — Hideto ISHIBASHI <hideto-i@...4u.or.jp>

[#22006] Is there a standard Iterator protocol? — Hideto ISHIBASHI <hideto-i@...4u.or.jp>

[#22014] shell interactive — WATANABE Daisaku <dwata@...3.rim.or.jp>

[#22022] w3ml — とみたまさひろ <tommy@...>

[#22026] assert — "友谷 登" <ntomo@...>

[#22067] [solved] shell interactive — WATANABE Daisaku <dwata@...3.rim.or.jp>

[#22069] Re: #define const — Toyofuku <toyofuku@...>

[#22070] upload ruby-1.4.4 for OS/2 but... — kenn@...

[#22074] Ruby-1.4.3 の make に失敗 — Yasuhide Yano <yasuhi@...>

[#22075] erb-1.2.2 — Masatoshi SEKI <m_seki@...>

[#22082] ruby-1.4.4-i586-beos-socket.zip — Katsuyuki Komatsu <komatsu@...>

[#22085] Linux Conference セミナー「オープンソースのビジネスモデル」 — matz@... (Yukihiro Matsumoto)

[#22087] media watch 2000.03.24 — Noritsugu Nakamura <nnakamur@...>

[#22096] libwrap-ruby — Shugo Maeda <shugo@...>

[#22103] Please put ruby-1.4.4.tar.gz in pub/lang/ruby/1.4/ — "Akinori -Aki- MUSHA" <knu@...>

[#22112] net 1.1.16 — Minero Aoki <aamine@...>

[#22115] デフォルト付き attr_reader — tnaka@...

[#22117] StateGraph: state machine interpreter — Hideto ISHIBASHI <hideto-i@...4u.or.jp>

[#22126] (件名なし) — Toshinori Takata <takata@...>

[#22130] PostgreSQL 拡張モジュールのラージオブジェクトの対応 — Saitou Noboru <noborus@...>

[#21736] OBJECTDAY 2000 — 助田　雅紀 <masaki.suketa@...>

[#22026] assert — "友谷登" <ntomo@...>

[#22211] Web 掲示板 — 堀川　久 <vzw00011@...>