jjzjj

php - Sphinx 的斯洛文尼亚词干分析器

coder 2024-05-01 原文

我正在搜索可与 Sphinx 搜索一起使用的斯洛文尼亚语词干提取算法。

例如，我想要实现的是在搜索“jabolka”时，我还想要包含“jabolko”、“jabolki”、“jabolk”等的文档的结果。

我找到了一些关于斯洛文尼亚词干分析器存在的引用资料，但我找不到下载它的地方，它甚至没有在任何地方出售......

我遇到的另一个选择是在 Sphinx 源配置 ( http://sphinxsearch.com/docs/manual-0.9.9.html#conf-wordforms ) 中使用选项 wordforms，但是构建我自己的字典太困难了，所以我想知道是否有公开的可访问的词典已经可用了吗？

如果斯洛文尼亚语词干分析器不可用，有人可以建议一些其他方法来获得类似的搜索结果吗？

最佳答案

我通过以下步骤成功编译了斯洛文尼亚语词干分析器:

  1. 下载http://snowball.tartarus.org/dist/snowball_code.tgz (snowball 的源代码)并解压
  2. 从http://snowball.tartarus.org/archives/snowball-discuss/0725.html下载斯洛文尼亚算法并将其保存到文件夹/algorithms/slovene 中从步骤 1 解压的项目。文件名必须是 stem_ISO_8859_2.sbl
  3. 算法采用 ISO 编码，因此我将其转换为 UTF8 并将其保存为 stem_Unicode.sbl(您必须为 ČŠŽĆ 等斯洛文尼亚特殊字符找到 utf 字符代码)

  4. 编辑/libstemmer 文件夹中的两个 .txt 文件并添加斯洛文尼亚语条目:

    slovene         UTF_8,ISO_8859_2        slovene,sl,slv
  5. 编辑/GNUmakefile 并添加 slovene(一次用于 utf 语言列表，一次用于 ISO_8859_2_algorithms)

  6. 进入文件夹/libstemmer 并运行:

    ./mkmodules.pl modules.h src_c modules.txt ../mkinc.mak
./mkmodules.pl modules_utf8.h src_c  modules_utf8.txt ../mkinc_utf8.mak

    这将生成稍后编译所需的文件。

  7. 运行make(从解压文件的根目录开始)

  8. 如果在编译期间没有错误，您应该有/src_c 文件夹和斯洛文尼亚词干分析器的代码(在其他文件夹旁边)

    stem_UTF_8_slovene.c
stem_ISO_8859_2_slovene.c
...

  9. 解压最新的 sphinx 并将所有文件从您的 snowball 项目复制到 sphinx/libstemmer_c 文件夹(不包括 libstemmer.o 和 GNUmakefile)

  10. 编译 sphinx :

    touch NEWS README AUTHORS ChangeLog
autoreconf --force --install
./configure --with-libstemmer
make
make install

  11. 如果一切顺利，你应该有 slovene 词干分析器让 sphinx 工作，你只需要在你的 sphinx 索引配置中启用它(在我的 Debian 上，它位于/usr/local/etc/sphinx.conf):

    charset_type = utf-8
morphology = libstemmer_slovene

希望这对某人有帮助，我之前没有使用 autoconf 的经验，所以我花了一段时间才弄明白。

这个 slovene stemmer 没有在 http://snowball.tartarus.org 上正式发布，但根据我的测试，它对我的​​项目来说已经足够好了。

关于php - Sphinx 的斯洛文尼亚词干分析器，我们在Stack Overflow上找到一个类似的问题： https://stackoverflow.com/questions/8714040/

斯洛文尼亚分析器codesnowballphpsearchfull-text-searchsphinxstemming

有关php - Sphinx 的斯洛文尼亚词干分析器的更多相关文章

  1. ruby-on-rails - Sphinx - 何时对字段使用 'has' 和 'indexes' - 2

    我几天前在我的ruby​​onrails2.3.2上安装了Sphinx和Thinking-Sphinx，基本搜索效果很好。这意味着，没有任何条件。现在，我想用一些条件过滤搜索。我有公告模型，索引如下所示:define_indexdoindexestitle,:as=>:title,:sortable=>trueindexesdescription,:as=>:description,:sortable=>trueend也许我错了，但我注意到只有当我将:sortable=>true语法添加到这些属性时，我才能将它们用作搜索条件。否则它找不到任何东西。现在，我还在使用acts_as_tag

  2. ruby-on-rails - 使用 Rails 2.3.5 运行 Thinking Sphinx 时出现问题 - 2

    我刚刚安装了Sphinx(发行版:archlinux)并下载了源代码。然后我为Rails安装了“ThinkingSphinx”插件。我关注了officialpagesetup和thisScreencastfromRyanBates，但是当我尝试为模型建立索引时，出现了这个错误:$rakethinking_sphinx:index(in/home/benoror/Dropbox/Proyectos/cotizahoy)Sphinxcannotbefoundonyoursystem.Youmayneedtoconfigurethefollowingsettingsinyourconfig/

  3. Ruby 等同于 Sphinx 文档生成器？ - 2

    Ruby有一些不错的文档生成器，例如Yard、rDoc，甚至Glyph。问题是Sphinx可以做网站、PDF、epub、LaTex等。它在重组文本中完成所有这些事情。在Ruby世界中有替​​代方案吗？也许是程序的组合？如果我也能使用Markdown就更好了。 最佳答案 自1.0版以来，Sphinx有了“域”的概念，它是从Python和/或C以外的语言标记代码实体(如方法调用、对象、函数等)的方法。有一个rubydomain,所以你可以只使用Sphinx本身。您唯一会缺少的(我认为)是Sphinx使用autodoc从源代码自动创建文档

  4. 建模分析 | 平面2R机器人(二连杆)运动学与动力学建模(附Matlab仿真) - 2

    目录0专栏介绍1平面2R机器人概述2运动学建模2.1正运动学模型2.2逆运动学模型2.3机器人运动学仿真3动力学建模3.1计算动能3.2势能计算与动力学方程3.3动力学仿真0专栏介绍?附C++/Python/Matlab全套代码?课程设计、毕业设计、创新竞赛必备！详细介绍全局规划(图搜索、采样法、智能算法等)；局部规划(DWA、APF等)；曲线优化(贝塞尔曲线、B样条曲线等)。?详情：图解自动驾驶中的运动规划(MotionPlanning)，附几十种规划算法1平面2R机器人概述如图1所示为本文的研究本体——平面2R机器人。对参数进行如下定义：机器人广义坐标

  5. 网站日志分析软件--让网站日志分析工作变得更简单 - 2

    网站的日志分析，是seo优化不可忽视的一门功课，但网站越大，每天产生的日志就越大，大站一天都可以产生几个G的网站日志，如果光靠肉眼去分析，那可能看到猴年马月都看不完，因此借助网站日志分析工具去分析网站日志，那将会使网站日志分析工作变得更简单。下面推荐两款网站日志分析软件。第一款：逆火网站日志分析器逆火网站日志分析器是一款功能全面的网站服务器日志分析软件。通过分析网站的日志文件，不仅能够精准的知道网站的访问量、网站的访问来源，网站的广告点击，访客的地区统计，搜索引擎关键字查询等，还能够一次性分析多个网站的日志文件，让你轻松管理网站。逆火网站日志分析器下载地址：https://pan.baidu.

  6. ABB-IRB-1200运动学分析MATLAB RVC工具分析+Simulink-Adams联合仿真 - 2

    一、机器人介绍        此处是基于MATLABRVC工具箱，对ABB-IRB-1200型号的微型机械臂进行正逆向运动学分析，并利Simulink工具实现对机械臂进行具有动力学参数的末端轨迹规划仿真，最后根据机械模型设计Simulink-Adams联合仿真。 图1.ABBIRB 1200尺寸参数示意图ABBIRB 1200提供的两种型号广泛适用于各作业，且两者间零部件通用，两种型号的工作范围分别为700 mm 和 900 mm，大有效负载分别为 7 kg 和5 kg。 IRB 1200 能够在狭小空间内能发挥其工作范围与性能优势，具有全新的设计、小型化的体积、高效的性能、易于集成、便捷的接

  7. 关于Qt程序打包后运行库依赖的常见问题分析及解决方法 - 2

    目录一.大致如下常见问题：（1）找不到程序所依赖的Qt库version`Qt_5'notfound(requiredby（2）CouldnotLoadtheQtplatformplugin"xcb"in""eventhoughitwasfound（3）打包到在不同的linux系统下，或者打包到高版本的相同系统下，运行程序时，直接提示段错误即segmentationfault，或者Illegalinstruction(coredumped)非法指令（4）ldd应用程序或者库，查看运行所依赖的库时，直接报段错误二.问题逐个分析，得出解决方法：（1）找不到程序所依赖的Qt库version`Qt_5'

  8. ruby-on-rails - 这个 C 和 PHP 程序员如何学习 Ruby 和 Rails？ - 2

    按照目前的情况，这个问题不适合我们的问答形式。我们希望答案得到事实、引用或专业知识的支持，但这个问题可能会引发辩论、争论、投票或扩展讨论。如果您觉得这个问题可以改进并可能重新打开，visitthehelpcenter指导。关闭9年前。我来自C、php和bash背景，很容易学习，因为它们都有相同的C结构，我可以将其与我已经知道的联系起来。然后2年前我学了Python并且学得很好，Python对我来说比Ruby更容易学。然后从去年开始，我一直在尝试学习Ruby，然后是Rails，我承认，直到现在我还是学不会，讽刺的是那些打着简单易学的烙印，但是对于我这样一个老练的程序员来说，我只是无法将它

  9. ruby-on-rails - 如何使用 ruby​​-prof 和 JMeter 分析 Rails - 2

    我想使用ruby​​-prof和JMeter分析Rails应用程序。我对分析特定Controller/操作/或模型方法的建议方法不感兴趣，我想分析完整堆栈，从上到下。所以我运行这样的东西:RAILS_ENV=productionruby-prof-fprof.outscript/server>/dev/null然后我在上面运行我的JMeter测试计划。然而，问题是使用CTRL+C或SIGKILL中断它也会在ruby​​-prof可以写入任何输出之前杀死它。如何在不中断ruby​​-prof的情况下停止mongrel服务器？ 最佳答案

  10. ruby-on-rails - Thinking sphinx - 带条件连接的索引 (has_and_belongs_to_many) - 2

    我有模型Service，它具有按服务类型ID过滤服务的范围:classServiceids{joins(:service_types).where('service_types_services.service_type_idin(?)',ids)}endclassServiceType所以，当我运行scope时，我得到这样的结果:Service.by_service_types([54])ServiceLoad(0.8ms)SELECT"services".*FROM"services"INNERJOIN"service_types_services"ON"service_types

随机推荐