image

  • フォト Amazonギフト券
    ※この時計の時刻は、閲覧しているパソコンのものであり、必ずしも正確な時間とは限りません

検索

最近のトラックバック

無料ブログはココログ

« 2009年6月27日 | トップページ | 2009年6月29日 »

2009年6月28日

2009-06-28

web スパイダー を ruby で (その2)

- http://homepage2.nifty.com/youichi_kato/src.html
>   web スパイダー (2009-06-27)
をさらに、更新した。

リンクのネスト数での制限をできるようにした。

web スパイダー を ruby で

- http://homepage2.nifty.com/youichi_kato/src.html
>   web スパイダー (2009-06-27)
に ruby での web スパイダーを置いた。

gem で install できる simplecrawler を使って書いてみたのだが、
そのままでは上手く動作しないところがあったので、simplecrawler 自体にも手を入れた。
// リンク先を読むときに site_uril を base に解釈してしまっているみたい。
// リンクが書いてあるページを base に解釈するようにして、リンクのネットをキチンと
// 辿れるようにした。
// パッチ的に変更してみただけ。
// オリジナルのソースコードは単純ながら機能的に面白いので、
// 折りをみて 全面的に書き直してみたい。

この spider  と ferret を組み合わせようと思っている。
ferret をつかって会社のチーム内サーバーに設置した 全文検索は、おかげさまで上手く動作している。 4万ファイルほどに対して index を作成しているが、検索は
0.03 〜 0.4 秒ぐらいの処理時間。

社内の他マシンの html  公開されているファイルについても index 作成しようとおもって、スパイダーを書いたのだ。

ピックアップ:TVとインターネット, ラジコンのヘリコプターの安いやつ, etc...

- http://news.cocolog-nifty.com/cs/article/detail/domestic-200906261851/1.htm?c=app.2
> 藤川ゆりのスピーチ映像 ココログニュース:@nifty

- http://goyaku.seesaa.net/article/122369849.html
> コーヒーを淹れてくれるロボット「雛」の海外反応

- http://d.hatena.ne.jp/bingo_nakanishi_perl/20090627/1246108499
> 第127回 Ruby vs Java ダックタイピングとインタフェースで見る多態性 - bingo_nakanishiの他言語出身者のためのPerl入門

- http://blog.sohaya.com/2009/06/27/softbank-iphone3gs-launch-event/
> 孫社長、発売時囲み取材でiPhone交渉経緯を語る | iPhone 3G Wiki blog

- http://ameblo.jp/takapon-jp/entry-10288507891.html
> TVとインターネット|六本木で働いていた元社長のアメブロ

- http://builder.japan.zdnet.com/sp/iphone-3g-2008/story/0,3800087831,20395711,00.htm?ref=rss
> 待てば回路の日和あり--「iPhone 3GS」発売、しかし—— - builder by ZDNet Japan

- http://www.moongift.jp/2009/06/degino/
> MOONGIFT: » シンプルなWebデータベースシステム「Degino」:オープンソースを毎日紹介

- http://chalow.net/2009-06-26-2.html
> [を] ラジコンのヘリコプターの安いやつ

« 2009年6月27日 | トップページ | 2009年6月29日 »

mokuji

2013年12月
1 2 3 4 5 6 7
8 9 10 11 12 13 14
15 16 17 18 19 20 21
22 23 24 25 26 27 28
29 30 31        

google

  • twitter
  • __
  • _
    Googleボットチェッカー

合わせて読む

  • 合わせて読む
    フィードメーター - katoy: cocolog あわせて読みたい

リンク