• 请不要在回答技术问题时复制粘贴 AI 生成的内容
sjmcefc2
V2EX  ›  程序员

求教一个专题的搜索引擎怎么搭建?

  •  1
     
  •   sjmcefc2 · Aug 19, 2021 · 2409 views
    This topic created in 1903 days ago, the information mentioned may be changed or developed.

    想着做一个特定方向的搜索引擎,比如只是搜索几个站点的搜索引擎,这样需要怎么样建设呢?

    12 replies  •  2021-08-22 01:13:28 +08:00
    israinbow
    israinbow
    Aug 19, 2021
    1
    谷歌搜索网站域名带个 site: 前缀.
    或着自己爬网站做关键词查询.
    funet
    funet
    Aug 19, 2021
    2
    https://www.kjsearch.com/
    像跨境搜索这样吗? 跨境电商垂直搜索
    sjmcefc2
    sjmcefc2
    OP
    Aug 19, 2021
    3
    @funet 嗯,是这样类似的。研究了一下这个,帮助打不开,关于打不开,搜索出来的都是知乎,不过确实想做的和这个很类似。
    sjmcefc2
    sjmcefc2
    OP
    Aug 19, 2021
    4
    @israinbow 请教有类似的开源项目吗?
    sjmcefc2
    sjmcefc2
    OP
    Aug 19, 2021
    5
    @funet 也是想定向的搜索几个站点。
    huabalance
    huabalance
    Aug 20, 2021 via Android
    6
    谷歌搜索 yacy
    Tianyan
    Tianyan
    Aug 20, 2021
    7
    自定义搜索啊
    sjmcefc2
    sjmcefc2
    OP
    Aug 21, 2021
    8
    @huabalance 这个很好啊
    sjmcefc2
    sjmcefc2
    OP
    Aug 21, 2021
    9
    自定义搜索,这个怎么具体做呢
    sjmcefc2
    sjmcefc2
    OP
    Aug 21, 2021
    10
    @huabalance 这个 可以搜中文吗
    huabalance
    huabalance
    Aug 21, 2021
    11
    @sjmcefc2 你为什么不试一下呢。。 可以搜。
    sjmcefc2
    sjmcefc2
    OP
    Aug 22, 2021
    12
    @huabalance 安装使用了,能够中文。
    但是好像一次只能执行一批爬虫任务,想着有了一个任务之后,在开始,就断掉了。
    而且
    HTTP ERROR 500 java.lang.OutOfMemoryError: Java heap space
    URI: /yacysearch.html
    STATUS: 500
    MESSAGE: java.lang.OutOfMemoryError: Java heap space
    SERVLET: net.yacy.http.servlets.YaCyDefaultServlet-5dcb4f5f
    CAUSED BY: java.lang.OutOfMemoryError: Java heap space
    Caused by:

    java.lang.OutOfMemoryError: Java heap space
    About   ·   Help   ·   Advertise   ·   Blog   ·   API   ·   FAQ   ·   Privacy   ·   Solana   ·   2539 Online   Highest 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 344ms · UTC 15:01 · PVG 23:01 · LAX 07:01 · JFK 10:01
    ♥ Do have faith in what you're doing.