組み込み型全文検索エンジンSenna (274ﾚｽ)
組み込み型全文検索エンジンSenna http://medaka.5ch.net/test/read.cgi/php/1118762053/
上
下
前
次
1-
新
通常表示
512ﾊﾞｲﾄ分割
ﾚｽ栞
1: うんこ船長 [] 2005/06/15(水) 00:14:13 ID:nYzPplAZ ないようなので立ててみました。 http://dev.razil.jp/project/senna/ http://medaka.5ch.net/test/read.cgi/php/1118762053/1
245: 242 [sage] 2009/06/20(土) 05:04:34 ID:??? 測定基準整理して計り直してみた。 OS 起動直後、インデックスがキャッシュに一切載っていない状態で 「wiki」で検索 (1万件以上ヒットする) し、応答時間を測定。 1回目 LIMIT 10: 0.643秒 LIMIT 100: 1.129秒 LIMIT 1000: 5.787秒 LIMIT 10000: 49.523秒 2回目以降 (SQL_NO_CACHE 無しの場合) LIMIT 10: 0.007秒 LIMIT 100: 0.029秒 LIMIT 1000: 0.203秒 LIMIT 10000: 1.467秒 2回目以降 (SQL_NO_CACHE 指定の場合) LIMIT 10: 0.007秒 LIMIT 100: 0.029秒 LIMIT 1000: 0.202秒 LIMIT 10000: 1.462秒 SQL_NO_CACHE 指定の有無は優位な差を生まなかった。 http://medaka.5ch.net/test/read.cgi/php/1118762053/245
246: 242 [sage] 2009/06/20(土) 05:06:04 ID:??? 搭載メモリ 2GB だったのを 512MB に減らした状態でも測定してみた。 SEN と SEN.l の合計が 800MB 強なので、明らかに物理メモリよりインデックスの方が大きい状態。 1回目 LIMIT 10: 0.634秒 LIMIT 100: 1.104秒 LIMIT 1000: 5.787秒 LIMIT 10000: 50.292秒 2回目以降 (SQL_NO_CACHE 無しの場合) LIMIT 10: 0.007秒 LIMIT 100: 0.030秒 LIMIT 1000: 0.207秒 LIMIT 10000: 42.752秒 2回目以降 (SQL_NO_CACHE 指定の場合) LIMIT 10: 0.007秒 LIMIT 100: 0.030秒 LIMIT 1000: 0.208秒 LIMIT 10000: 42.771秒 LIMIT 1000 まではメモリ 2GB の時と同じ状態。 今回も SQL_NO_CACHE 指定の有無は優位な差を生まなかった。 http://medaka.5ch.net/test/read.cgi/php/1118762053/246
247: 242 [sage] 2009/06/20(土) 05:18:28 ID:??? メモリ 512MB 環境下で LIMIT 10000 の時のみ 2回目の数値が極端に悪くなって1回目と大差なくなっているのは、 1回目検索時に読み込まれたデータが多すぎてキャッシュから溢れたためだろう。 実運用では同じ検索語が連続してくることなど希だから このキャッシュミス状態はかなり起きやすくなるはず。 なのでインデックスは全部オンメモリであることが強く望ましいのは間違いない。 が、だからといって >>235 > こいつらがオンメモリにないと単なるシーケンシャルスキャンより遅くなってもおかしくない などというアホなこともない。 きちんと LIMIT 切ってやればメモリに全く載って無い状態ですら1秒で帰ってくる。 (ORDER BY とかつけてると LIMIT 付けててもダメな予感がするがまだ試してない) また、 >>230 > 5Gのコンテンツだと、経験上インデックスサイズがだいたい5Gになるんすよ。 そういうケースもあるのかもしれんが、少なくとも今回試した Wikipeida 全文では コンテンツ 5GB 弱に対してインデックス 1GB 弱になった。 よって 2GB で十分オンメモリになる。 それにしても、今回テストした ATOM で IDE 40GB の HDD で OS 起動直後で 1万件ヒットする単語でも1分越えしなかったわけだが、 >>214はいったいどういう環境とクエリで検索したんだ? http://medaka.5ch.net/test/read.cgi/php/1118762053/247
248: nobodyさん [sage] 2009/06/22(月) 01:12:14 ID:??? 64ビットOSにしてメモリ5Gは積まないととか言ってた奴はどこ行ったの？ http://medaka.5ch.net/test/read.cgi/php/1118762053/248
249: nobodyさん [sage] 2009/08/03(月) 13:00:48 ID:??? 通常のMysqlで動作が遅かったため tritonn-1.0.12-mysql-5.0.67-win32.zip をインストールしてみたのですが、 何分かInsert Selectを連続して行っているとDBが落ちてしまい MySQLAdministratorから「Can't crete a new thread errno12」とでて ログインできなくなったり、 できてもスキーマやテーブル一覧が取得できなくなります。 この状態で.NETからSelectなどの処理を行うと 「Got error 12 from storage engine」 とでて処理できません。 Mysql6では同様の動作が問題なく継続できていました。 サービスを再起動すると復活するのですが、 同じように何分か処理を走らすと同様の状態になります。 メモリなどハードウェアはまだ余裕の状態です。 何が原因でどうしたらいいかなど八方塞になってしまいました。 どなたかアドバイスいただけませんでしょうか。 http://medaka.5ch.net/test/read.cgi/php/1118762053/249
250: nobodyさん [] 2009/08/17(月) 16:21:20 ID:ha4chuFj 人いない sennachkドキュメントないんだけどこれ使えるの？ http://medaka.5ch.net/test/read.cgi/php/1118762053/250
251: nobodyさん [sage] 2009/08/17(月) 17:48:41 ID:??? >>250 まあ今時こんな性能が悪いものは、みんあ使わんってことだ http://medaka.5ch.net/test/read.cgi/php/1118762053/251
252: nobodyさん [] 2009/08/17(月) 22:15:10 ID:a7sy8cob >>251 さんのオヌヌメ教えて！ http://medaka.5ch.net/test/read.cgi/php/1118762053/252
253: nobodyさん [] 2009/09/05(土) 21:32:55 ID:4Qwo+WsH mecabの辞書がUTF-8になってるから、 sjisのdbでは使えないと思ってたんだけど やってみたら使えてるみたい。 ngramインデックスの場合、mecabの辞書に気を遣う必要ないという認識でOKですか？ http://medaka.5ch.net/test/read.cgi/php/1118762053/253
254: nobodyさん [sage] 2009/09/05(土) 23:48:39 ID:??? そりゃngramインデックスならmecab関係ないだろ。 mecabなしでも使えるわけだし。 http://medaka.5ch.net/test/read.cgi/php/1118762053/254
255: nobodyさん [sage] 2010/03/06(土) 02:05:32 ID:??? test http://medaka.5ch.net/test/read.cgi/php/1118762053/255
256: nobodyさん [] 2010/03/25(木) 03:31:01 ID:txB00Cpn あれ、半年もレスなかったのか・・・ なにか他にいいのが出てるの？ アゲてみる、ごめん http://medaka.5ch.net/test/read.cgi/php/1118762053/256
257: nobodyさん [] 2010/04/04(日) 09:24:54 ID:f5hMLlFL tritonn使ってみようかと思ってるんですが、 将来的にDBをマシン間で引越しするとき、MyISAMは単純にファイルコピーだけ、 ダンプ→インポートしなくても引越しできるようですが、付加されたsenna関連である sen.*についても単純にファイルコピーだけでOKなんでしょうか。 http://medaka.5ch.net/test/read.cgi/php/1118762053/257
258: nobodyさん [] 2010/04/07(水) 02:19:15 ID:nn78rN3+ どんな挙動するのかは知らないけど センファイルは殲滅しておk やたらでかいし、バックアップ対象からも外してるよ インデックス張り直せば勝手に作るし http://medaka.5ch.net/test/read.cgi/php/1118762053/258
259: nobodyさん [] 2010/04/16(金) 10:09:21 ID:dbk/orQU トリトン使ってるけど 時間によって検索結果に出たり出なかったりする時があるみたい インデックスへの反映具合を確認する方法があればいいんだけど http://medaka.5ch.net/test/read.cgi/php/1118762053/259
260: nobodyさん [sage] 2010/05/16(日) 02:14:19 ID:??? Senna、Lucene、Solrなど オープンソース系検索エンジンの 性能比較をやってるHPありませんか？ http://medaka.5ch.net/test/read.cgi/php/1118762053/260
261: nobodyさん [sage] 2010/05/16(日) 16:24:02 ID:??? 以前見たような気がするからググれば出てくるんじゃね？ http://medaka.5ch.net/test/read.cgi/php/1118762053/261
262: nobodyさん [] 2010/05/31(月) 10:03:05 ID:ldCXIDLw Tritonnの2ind機能を使って、 select * from table force index(counter) where match(title,body) against("*W1,2 てすと" in boolean mode) order by counter desc limit 100,100 という使い方は出来ないのでしょうか？ 一応検索結果は得られるのですが、limit 0,100としたのと同じように、必ず先頭からの結果になってしまいます。 force index(counter)を消せば求めている結果になります。 環境はCentOSにsenna1.1.5、Tritonn1.0.12-mysql-5.0.87、 WindowsにはTritonn1.0.12-mysql-5.0.67なのですがどちらも結果は同じです。 http://medaka.5ch.net/test/read.cgi/php/1118762053/262
263: nobodyさん [] 2010/06/02(水) 00:02:33 ID:pNSVCSiw 1 ：名無しさん＠どっと混む[]：2009/12/14(月) 20:45:15 ID:unnBMLw10 高根社長のＳＭ趣味サイトＭａｓｋＲと 副業のＳＭクラブ銀座プレジス・動画配信専門リアルミストレスばかり語られるが 高根社長の本業コムラッドについても語ろう 銀座プレジス http://www.prezis.jp/top.htm ＭａｓｋＲ http://maskr.com/ 【腹黒樹里高根】銀座ﾌﾟﾚｼﾞｽ3【客の情報開示】 http://set.bbspink.com/test/read.cgi/sm/1273492895/ 【腹黒樹里】プレジスを語ろう2【周年ｲﾍﾞﾝﾄ大失敗】 http://set.bbspink.com/test/read.cgi/sm/1262702507/ プレジスを語ろう http://set.bbspink.com/test/read.cgi/sm/1246009466/ 動画配信専門リアルミストレスってどうよ？ http://set.bbspink.com/test/read.cgi/sm/1249183350/ 9 ：名無しさん＠どっと混む：2010/01/03(日) 18:27:00 ID:RSEbBiG0O 高値はもう大麻やめたの？ 10 ：名無しさん＠どっと混む：2010/01/04(月) 05:15:29 ID:A3l1qdv+O タカネ社長ってどうやってばれないように脱税してんだろ？ 億単位で脱税して億ション暮らしなんて凄いよな 監査役の奥さんもグルなのか？ http://medaka.5ch.net/test/read.cgi/php/1118762053/263
264: nobodyさん [] 2010/06/02(水) 00:03:25 ID:pNSVCSiw 18 ：名無しさん＠どっと混む：2010/01/07(木) 09:26:06 ID:5NL2jyJpO 高根はMASKRでレイプ仲間募集するのやめたんだね mixiで募集中か 21 ：名無しさん＠どっと混む：2010/01/10(日) 19:36:45 ID:FdRwgXUTO 風俗店やってるってことは高根社長は暴力団と繋がってるんだね どこの組にいくらみかじめ料払ってるんだかw 23 ：名無しさん＠どっと混む：2010/01/23(土) 03:43:12 ID:Pdcv8aq0O ﾀｶﾈ社長未成年に酒飲ませてﾚｲﾌﾟ 24 ：名無しさん＠どっと混む：2010/01/29(金) 18:16:06 ID:zMwtdkIsO 高根社長のレイプ趣味は病気だから治らない 25 ：名無しさん＠どっと混む：2010/02/01(月) 01:39:32 ID:uaH5mo2nO 前科者 26 ：名無しさん＠どっと混む：2010/02/09(火) 00:52:46 ID:JwGmN2cG0 >>25 容疑はレイプ？買春？管理売春？公然猥褻？薬物？脱税？詐欺？傷害？ 28 ：名無しさん＠どっと混む：2010/02/14(日) 22:56:30 ID:lykq8x1VO どこかのスレで人を死に追いやったと書いてあった 33 ：名無しさん＠どっと混む：2010/03/04(木) 12:49:19 ID:J8YxaRGO0 金がないって脱税がばれて追徴課税でも来たか？ せっかく脱税の隠れ蓑にプレジス営業してるのに残念だったなｗ 38 ：名無しさん＠どっと混む：2010/03/12(金) 21:09:53 ID:L0W4+sivO 首吊り首絞めプレイ大好き高根英哉 http://medaka.5ch.net/test/read.cgi/php/1118762053/264
265: nobodyさん [] 2010/06/02(水) 00:04:26 ID:pNSVCSiw 53 ：名無しさん＠どっと混む：2010/05/17(月) 13:14:06 ID:E/7OZVtz0 >>18 高根英哉blogでレイプ仲間募集中 私とともにマスクの女どもを弄ぶ仲間を募集する 急に思いついたら連絡をして、集まれるような仲間だ だから、複数名募集するし、いついつという日時があるわけでもない 条件は以下のとおりだ ・SMを実践している、または興味がある ・マスクを用意できる ・都内でイベント参加できる ・イベント内容およびこの仲間を通じて知りえた情報を口外しない ・成人男子である ・携帯電話および携帯メールアドレスを私に公開できる ・酒が好きである 希望者は私宛にメールを送ってほしい 全員が参加できるわけでもないので、こちらの選択に任せてもらう なるべく想いを書いてもらうほうがわかりやすいし 経験や顔写真も歓迎。 ｒ2007@maskr.com maskr_2008@yahoo.co.jp hide@comrade.co.jp http://medaka.5ch.net/test/read.cgi/php/1118762053/265
266: 262 [] 2010/06/02(水) 08:04:37 ID:kP3cOHz1 >>262はtritonnの仕様っぽいですね。 これはどうしようも無いことなのかな？ てっきり出来ると思ってたからがっくし。 http://medaka.5ch.net/test/read.cgi/php/1118762053/266
267: nobodyさん [] 2011/05/22(日) 12:38:20.48 ID:gdrY9aId groonga来てるから話題減ってる気がするけど、あげ。 http://medaka.5ch.net/test/read.cgi/php/1118762053/267
268: nobodyさん [sage] 2011/06/01(水) 17:59:58.68 ID:??? limit a,b 指定で b の抽出件数指定は効くんだけど、a がゼロから効かない。 100,10 や 1000, 10 と指定しても、0, 10 と同じ結果。 フルテキストインデックス再構築したけど同じ。 インストした頃はちゃんと表示されたはずなんだが…。 http://medaka.5ch.net/test/read.cgi/php/1118762053/268
269: 電脳プリオン 忍法帖【Lv=40,xxxPT】(2+0：8) 【31.3m】 [sage] 2013/02/10(日) 00:44:03.91 ID:??? >>1のリンク先が見れない http://medaka.5ch.net/test/read.cgi/php/1118762053/269
270: nobodyさん [] 2017/12/30(土) 13:38:01.64 ID:YhlYw6jg 誰でも簡単にネットで稼げる方法など 参考までに、 ⇒ 『半藤のブブイウイウレレ』 というサイトで見ることができます。 グーグル検索⇒『半藤のブブイウイウレレ』 Z25K5IFYUN http://medaka.5ch.net/test/read.cgi/php/1118762053/270
271: nobodyさん [sage] 2018/09/11(火) 09:17:33.17 ID:??? もう何とかブラジルって会社もないらしいな http://medaka.5ch.net/test/read.cgi/php/1118762053/271
272: nobodyさん [sage] 2019/02/28(木) 10:06:09.54 ID:??? senna作ってた会社ニコニコ動画に買収されたんだっけ？ http://medaka.5ch.net/test/read.cgi/php/1118762053/272
273: nobodyさん [sage] 2020/02/11(火) 15:33:52.03 ID:??? チエオクレのハゲの悲惨なツイッター https://twitter.com/aphonedollar ↑↑↑↑↑↑↑↑↑↑↑↑↑↑↑↑↑↑ この自称「ハゲ」とかいうチエオクレのブログが酷すぎる ＞「DesktopHE」 はWindows10に対応してないらしい はぁ？？？ ★★★大嘘デタラメ★★★を垂れ流すな！！！ ■「DesktopHE」 はWindows10でも、もちろん使えるわ！！！■ ■「DesktopHE」 はWindows10でも、もちろん使えるわ！！！■ ■「DesktopHE」 はWindows10でも、もちろん使えるわ！！！■ ■「DesktopHE」 はWindows10でも、もちろん使えるわ！！！■ ■「DesktopHE」 はWindows10でも、もちろん使えるわ！！！■ チエオクレのハゲが、Javaの設定を失敗してるだけじゃねえか！！！ 嘘デタラメ垂れ流しやがって、このハゲがやっていることは立派な公害じゃねえか！ hatenaとかでまで、必死こいて大嘘をばらまいているんだが https://twitter.com/5chan_nel (5ch newer account) http://medaka.5ch.net/test/read.cgi/php/1118762053/273
274: nobodyさん [sage] 2023/09/29(金) 12:01:20.21 ID:??? ｳｿｫ━━━Σ(дﾟ|||ﾉ)ﾉ━━━ﾝ!? http://medaka.5ch.net/test/read.cgi/php/1118762053/274
ﾒﾓ帳
(0/65535文字)
上
下
前
次
1-
新
書
関
写
板
覧
索
設
栞
歴
ｽﾚ情報
赤ﾚｽ抽出
画像ﾚｽ抽出
歴の未読ｽﾚ
Google検索
Wikipedia
ぬこの手
ぬこTOP
0.818s*