【全文検索】groonga【senna後継】

1 ：nobodyさん：2011/11/01(火) 15:23:37.63 ID:zBzeEu6N.net

ないようなので立ててみました

* groonga
http://groonga.org/ja/

* mysqlに組み込むgroongaストレージ(mroonga)
http://mroonga.github.com/

関連スレ
組み込み型全文検索エンジンSenna
http://hibari.2ch.net/test/read.cgi/php/1118762053/

80 ：nobodyさん：2012/06/02(土) 20:56:24.77 ID:???.net

昔はVARCHAR型プライマリキーの扱いに問題があったけど
最新バージョンでは大丈夫になってるはずだけどなぁ

81 ：nobodyさん：2012/06/03(日) 00:04:53.44 ID:???.net

最新バージョンはうまく入らなかったから戻したんだよ

82 ：nobodyさん：2012/06/03(日) 02:47:33.61 ID:???.net

>>78
yumで入れた場合MySQLとmroongaのバージョン気をつけないとそんなことになった気がする
mroongaソースから入れたらいいよ

83 ：nobodyさん：2012/06/09(土) 20:25:01.76 ID:???.net

MySQL-server のversion が 5.5.25-1.rhel5 にup されたね
おかげで、yum でmysql-mroonga が入るようになった

84 ：nobodyさん：2012/06/11(月) 17:37:37.24 ID:???.net

知っている方が居たら教えて頂きたいんですけど、
今、likeで部分一致を使って検索しているシステムを
全文検索に置き換えたいと思ってます

そこでmroongaを試して居たのですが…
「駅」とかで検索した時に、TokenBigram(デフォルト)だと引っかからず
対策としてTokenUnigramにしました

TokenUnigramにする事で、「駅」は解決したのですが、
今度は「BOX」がどうにもならず…
データにINBOXとかがあり、これが引っかからない…

mroongaで「駅」と「BOX」を両立させるうまい手は無いでしょうか

今の環境は、CentOS 6.2でmysqlは5.1.61, mroongaは2.0.3です
全部yumで入れました

85 ：nobodyさん：2012/06/11(月) 21:09:03.26 ID:???.net

ngramのがはやそげ

86 ：84：2012/06/15(金) 19:58:43.63 ID:???.net

結局、
TokenBigramSplitSymbolAlphaDigitで
?mroonga_match_escalation_thresholdを1にして
検索かけたら上手く行った

87 ：nobodyさん：2012/09/29(土) 19:02:59.77 ID:6ahxPXX9.net

WindowsServerでTritonn使ってます。
システムの移行を考えてて、groonga試したいんだけど、
MySQLのプラグインとしてgroongaを使うのはWindowsでは
できませんか?
導入手順ご存知の方がいらっしゃったら教えてください

88 ：nobodyさん：2012/10/06(土) 18:26:42.81 ID:???.net

ここ見たのか知らないけど、今ここでWindowsでも使えるように頑張ってるみたい
10月の後半ぐらいには使えるようになるんじゃね？
http://redmine.groonga.org/issues/1496

89 ：87：2012/10/07(日) 11:14:16.58 ID:???.net

>>88
現在開発中なんですね。
気長に待ちます。

90 ：nobodyさん：2012/10/23(火) 17:43:15.04 ID:???.net

debパッケージからgroonga-server groonga-server-commonがなくなっているような…

91 ：nobodyさん：2012/10/23(火) 17:46:46.15 ID:???.net

groonga-server-gqtpに名前が変わったのか

92 ：nobodyさん：2012/10/29(月) 16:07:31.55 ID:???.net

groonga-httpdに
curl http://localhost:10041/d/status
とかすると405 not allowedになるんだけどどうすりゃいいの

nginx関連で405で調べるとpostした時のことばかりだし

groonga内包のhttpの方は、shutdownで帰ってこない
gqtpの方は問題ないんだが…

疲れた

93 ：nobodyさん：2012/11/13(火) 18:26:33.67 ID:???.net

groongaをhttpで起動し、
http://localhsot
にブラウザでアクセスしたら、
groongaのCPU使用率が100%になって、
応答なし状態になるんだけど、
何が悪いんでしょうか。

以下のコマンドを順番に実行しただけです。
ttp://groonga.org/ja/docs/tutorial/network.html#hypertext-transfer-protocol-http
ttp://perl-users.jp/articles/advent-calendar/2011/casual/4

Windows8と2008ServerR2の
両方で再現...

素直にLinux使うべき？

94 ：nobodyさん：2013/03/14(木) 17:15:20.37 ID:xn34kGqY.net

mroonga2.04->3.01に変えたら
Insert時にgroonga.logに
invalid utf8 string(2) on grn_str_charlen_utf8
が出るようになった・・・
文字コード照合順序はDBも、テーブルも、全文検索用インデックス設定してるカラムも
全部utf8_general_ciにしてる

全文検索の結果も同じ単語で今まで引っかかってたものが
半分くらいしか引っかからなくなってたり、、インデックスが壊れてる？

95 ：nobodyさん：2013/03/14(木) 17:16:26.58 ID:xn34kGqY.net

mroonga2.04->3.01に変えたら
Insert時にgroonga.logに
invalid utf8 string(2) on grn_str_charlen_utf8
が出るようになった・・・
文字コード照合順序はDBも、テーブルも、全文検索用インデックス設定してるカラムも
全部utf8_general_ciにしてる

全文検索の結果も同じ単語で今まで引っかかってたものが
半分くらいしか引っかからなくなってたり、、インデックスが壊れてる？

96 ：nobodyさん：2013/05/10(金) 16:34:31.53 ID:BGsSkY8Y.net

なんか、grn::dat::Trie::open failedって出るようになってしまってgroongaエンジン系全滅なんだけど。
どうやって復帰すりゃええんですかいの？

97 ：nobodyさん：2013/05/10(金) 20:53:30.15 ID:cFx0Oq6o.net

あ、mysql上なのでmroonga使ってますた
。
結局データの復帰はならず、一時ファイル的なものなので全抹消とあいなりました。
試したこと一覧

・UNINSTALL PLUGIN、INSTALL PLUGINを実行　→　変化なし
・clearlockを実行（データファーいるの場所がわからず全体に対してclearlock）　→　変化なし
・drop table → エラーで動かず
・UNINSTALL PLUGINを実行してからdrop table　→ テーブル自体は削除OK
・同じDB上でもっかいmroongaエンジンのテーブル作成 → 同様のエラーで作成できず
・DBを変更してmroongaエンジンのテーブル作成 → OK
・現行バックアップできるテーブル（非mroongaエンジン）を退避して、drop database → OK
・DBごと再作成 → OK

もうちょっとスマートな解消方法あったんですかね？
スレチだったらごめんなさい。

98 ：nobodyさん：2013/05/10(金) 20:54:18.17 ID:???.net

oh... IDが変わってるけど>>96です。
ちなみに途中でgroonga及びmroongaは1.0.xから3.03にアップデートしますた。

99 ：nobodyさん：2013/05/10(金) 21:57:12.05 ID:cFx0Oq6o.net

続報
同名DBを作成しなおして同名テーブルを生成し直すとエラー
当然っちゃ当然ですね。

というわけで、DBをもう一回削除しなおした後、mysqlのdataディレクトリ中のmrnファイルをごっそり削除したところエラーは回避。
なんとも不安定な仕組みなもんだね。mroongaは

100 ：96：2013/05/11(土) 13:25:32.41 ID:???.net

3.03に切り替えたからか、そもそも不安定なのか、mroongaのupdateがフリーズ（？）するようになってしまった・・・。

101 ：nobodyさん：2013/05/31(金) 04:55:23.95 ID:TNUtMHtE.net

windows用のmroongaをダウンロードしたいのですが、
ファイルがnot foundになります
http://packages.groonga.org/windows/mroonga/
ここを見るとファイルが一つもありません
何故ですか

102 ：nobodyさん：2013/05/31(金) 04:59:57.68 ID:???.net

トリトン使うことにしますた

103 ：nobodyさん：2013/06/01(土) 00:02:56.00 ID:???.net

>>101
http://mroonga.org/ja/docs/install.html#windows

104 ：nobodyさん：2013/06/01(土) 00:08:19.27 ID:???.net

>>103
not foundには変わりないけど・・どういう意味ですか？

105 ：nobodyさん：2013/06/01(土) 00:22:35.73 ID:???.net

>>104
ごめんなさい。確認するの忘れてた…

106 ：nobodyさん：2013/06/01(土) 00:46:50.58 ID:???.net

MLでWin版のテスト募集されてましたよ。
http://sourceforge.jp/projects/groonga/lists/archive/dev/2013-May/001410.html

107 ：nobodyさん：2013/08/31(土) NY:AN:NY.AN ID:???.net

隔週連載groonga
http://gihyo.jp/dev/clip/01/groonga

http://qiita.com/groonga

108 ：nobodyさん：2013/09/11(水) 20:24:29.01 ID:???.net

頻発にテーブルupdateすると壊れるからマジで使えない

109 ：nobodyさん：2013/10/22(火) 16:49:55.87 ID:???.net

mroongaでカンマ区切りでインデックスさせるにはどうしたらいいすか？

110 ：nobodyさん：2013/11/22(金) 17:20:10.93 ID:???.net

>>92
64bit版にしたら全く問題なかった

111 ：nobodyさん：2014/01/05(日) 03:05:09.06 ID:???.net

mroongaとして使ってて、導入コストも低いし性能も問題ないんだけど
何の前触れもなく検索が遅くなったりするのが怖い

112 ：nobodyさん：2014/02/05(水) 10:56:52.51 ID:k8lujHJw.net

groonga のテーブル定義がさっぱりわかりません。
例えば wikipedia のデータをストアしたい場合、
どーすればいいのでしょうか？

113 ：nobodyさん：2014/02/07(金) 09:34:56.28 ID:???.net

groonga-dev のメーリングリストで教えてもらったから勝手に転載するわよ！

# <field name="id" type="string" indexed="true" stored="true" required="true"/>
# Groongaではレコードを一意に識別する値はキーとして扱う。
# 必須。required="true"相当？
table_create Articles TABLE_PAT_KEY ShortText
# <field name="title" type="text_ja" indexed="true" stored="true" required="true"/>
column_create Articles title COLUMN_SCALAR Text

114 ：nobodyさん：2014/02/07(金) 09:36:19.44 ID:???.net

# <field name="revision" type="int" indexed="false" stored="true"/>
column_create Articles revision COLUMN_SCALAR Int32
# <field name="user" type="string" indexed="true" stored="true"/>
column_create Articles user COLUMN_SCALAR ShortText
# <field name="userId" type="int" indexed="false" stored="true"/>
column_create Articles user_id COLUMN_SCALAR UInt64
# <field name="text_ja" type="text_ja" indexed="true" stored="true" required="true"/>
column_create Articles text_ja COLUMN_SCALAR Text
# <field name="timestamp" type="date" indexed="true" stored="true" default="now" multiValued="false"/>
# default="now"相当の機能はありません。
column_create Articles timestamp COLUMN_SCALAR Time

115 ：nobodyさん：2014/02/07(金) 09:37:39.49 ID:???.net

# ↓のtype="string"の転置索引用の語彙表:
# <field name="id" type="string" indexed="true" stored="true" required="true"/>
# <field name="user" type="string" indexed="true" stored="true"/>
# Bigramでトークナイズする。
table_create Terms TABLE_PAT_KEY ShortText --default_tokenizer TokenBigram --normalizer NormalizerAuto
# indexed="true"に相当。
column_create Terms articles_text COLUMN_INDEX|WITH_POSITION|WITH_SECTION Articles _key,user

# ↓用の転置索引用の語彙表:
# <field name="title" type="text_ja" indexed="true" stored="true" required="true"/>
# <field name="text_ja" type="text_ja" indexed="true" stored="true" required="true"/>
# text_jaに相当するのは--default_tokenizer TokenMecab。
table_create JapaneseTerms TABLE_PAT_KEY ShortText --default_tokenizer TokenMecab --normalizer NormalizerAuto
# indexed="true"に相当。
column_create JapaneseTerms articles_text COLUMN_INDEX|WITH_POSITION|WITH_SECTION Articles title,text_ja

116 ：nobodyさん：2014/02/07(金) 09:38:53.27 ID:???.net

# ↓用の転置索引用の語彙表:
# <field name="timestamp" type="date" indexed="true" stored="true" default="now" multiValued="false"/>
# カラムに入っている値（タイムスタンプ）そのものをトークンとして使うので
# トークナイザーは指定しない。
# キーの型をTimeにしてArticles.timestamp（トークンの型）とあわせることがポイント。
table_create Times TABLE_PAT_KEY Time
# Articles.timestamp用の転置索引の定義。indexed="true"に相当
column_create Times articles_timestamp COLUMN_INDEX Articles timestamp

117 ：nobodyさん：2014/02/07(金) 09:41:18.24 ID:???.net

難しいだわさ。

118 ：nobodyさん：2014/02/07(金) 15:45:35.46 ID:???.net

groongaは一部中国語に対応してるみたいだけど、拡張すればその他の言語もいけるのかな

119 ：nobodyさん：2015/02/08(日) 14:09:10.77 ID:brXmi2cE.net

Droonga最新版 (1.0.9) がUbuntuにもCentOSにもインストールできなくなってしまった

更新も止まってるし、そろそろ見切りを付けて移行したほうがよさげかな？

使い始めたときの思惑と違って分散処理が不要になったから
素のGroongaでもよさそうだけど、簡単に移れるものなのかな・・・ﾄﾞｷﾄﾞｷ

120 ：nobodyさん：2015/02/08(日) 14:10:21.74 ID:brXmi2cE.net

正確にはUbuntuではインストールできない
CentOSではselectが実行できない
Debianは試していない

121 ：nobodyさん：2015/02/08(日) 16:58:58.79 ID:brXmi2cE.net

無事、素のGroongaに移行完了（データは移行中）

Droongaなんていらんかったんや！

122 ：nobodyさん：2017/12/30(土) 14:51:11.75 ID:YhlYw6jg.net

誰でも簡単にネットで稼げる方法など
参考までに、
⇒　『半藤のブブイウイウレレ』 というサイトで見ることができます。

グーグル検索⇒『半藤のブブイウイウレレ』

B2BGME4RW2

123 ：nobodyさん：2019/04/14(日) 11:26:17.58 ID:???.net

何故ぐーぐるとかの方がローカル検索より早いの
ぐーぐる1回検索する電力でコーヒー2杯のめるんだっけ？

124 ：nobodyさん：2019/04/23(火) 20:53:01.91 ID:KG09RlERA

mrnは何ですかね。増える一方ですけど。。

125 ：nobodyさん：2020/02/03(月) 13:56:41.82 ID:K/Qoe4Hj0

【スタチャ】　グレタ「私達はお前を監視している」
http://rio2016.5ch.net/test/read.cgi/kokusai/1575268654/l50

126 ：nobodyさん：2020/02/11(火) 15:32:53 ID:???.net

チエオクレのハゲの悲惨なツイッター
https://twitter.com/aphonedollar

　　↑↑↑↑↑↑↑↑↑↑↑↑↑↑↑↑↑↑
この自称「ハゲ」とかいうチエオクレのブログが酷すぎる

＞「DesktopHE」 はWindows10に対応してないらしい

はぁ？？？　★★★大嘘デタラメ★★★を垂れ流すな！！！

■「DesktopHE」 はWindows10でも、もちろん使えるわ！！！■
■「DesktopHE」 はWindows10でも、もちろん使えるわ！！！■
■「DesktopHE」 はWindows10でも、もちろん使えるわ！！！■
■「DesktopHE」 はWindows10でも、もちろん使えるわ！！！■
■「DesktopHE」 はWindows10でも、もちろん使えるわ！！！■

チエオクレのこのハゲが、Javaの設定を失敗してるだけじゃねえか！！！
嘘デタラメ垂れ流しやがって、このハゲがやっていることは立派な公害じゃねえか！

hatenaとかでまで、必死こいて大嘘をばらまいているんだが　　
(deleted an unsolicited ad)

127 ：nobodyさん：2021/04/01(木) 23:11:10.29 ID:vVnaZsspu

「稼ぎたい！」と言う前にまず童貞を卒業してきてください【必須事項】
https://www.youtube.com/watch?v=df3lcXce6QI
感情を抑圧する働き方を「感情労働」と言います。この感情労働を辞めないと自由な人生は送れません！
https://www.youtube.com/watch?v=70nB--ZkXTs
凡人Fラン大学生が新卒で月収80万円稼げるようになった4つの理由
https://www.youtube.com/watch?v=xIBFfcCkixk
スキル無しでロゴを作成してココナラでお金を稼ぐ方法【デザイン・イラストレーター】
https://www.youtube.com/watch?v=qXL04Z2VSxY
学生起業家あるある６選【大学生で起業するとこうなります】
https://www.youtube.com/watch?v=UdA3w_Aq3x0
大学生でバイトのシフトに入りまくると貧乏になる理由
https://www.youtube.com/watch?v=NTVQ_jr0dSo
学生がネットで稼ぐ方法【稼げる金額別に紹介
https://www.youtube.com/watch?v=QHYX1hbHAsk

128 ：皆さんの協力が必要です：2021/04/20(火) 21:19:07.00

國友.里美（クニトモサトミ）元•性風俗嬢
広島県生まれ　　風俗情報誌に掲載している
武蔵野美術大学出
神奈川県　横浜　関内駅から徒歩で、10分の雑居ビル
第一国際ビル８Ｆに、アローズって会社　出したが、
社員全員の、給料•全額未払いまま
給料•全額持ち逃げ
未だに、支払わられてない
未だに営業中
今は、神奈川県　横浜駅から徒歩で、10分の雑居ビルに、逃げた
一斉送信して下さい
私達.社員全員で、全国にアプリで、配信し続けてます
一斉送信して下さい

129 ：nobodyさん：2021/12/16(木) 02:58:43.93 ID:QIXw9by2.net

http://ueruku.blogspot.com/2017/03/groonga.html

この記事ワロタわ
日本人が作ってて情報発信してるはずなのにわかりやすい情報がまったくないよなgroongaさん
企業向けだとかターゲットが相当狭いんだろうな
namazuとかhyperestraier難民とかそれなりにいたはずなのに
ユーザー獲得する気まったくない
windowsでコマンドラインまともに動かんし