• 请不要在回答技术问题时复制粘贴 AI 生成的内容
sjmcefc2
V2EX  ›  程序员

求教一个专题的搜索引擎怎么搭建?

  •  1
     
  •   sjmcefc2 · Aug 19, 2021 · 2134 views
    This topic created in 1761 days ago, the information mentioned may be changed or developed.

    想着做一个特定方向的搜索引擎,比如只是搜索几个站点的搜索引擎,这样需要怎么样建设呢?

    12 replies    2021-08-22 01:13:28 +08:00
    israinbow
        1
    israinbow  
       Aug 19, 2021
    谷歌搜索网站域名带个 site: 前缀.
    或着自己爬网站做关键词查询.
    funet
        2
    funet  
       Aug 19, 2021
    https://www.kjsearch.com/
    像跨境搜索这样吗? 跨境电商垂直搜索
    sjmcefc2
        3
    sjmcefc2  
    OP
       Aug 19, 2021
    @funet 嗯,是这样类似的。研究了一下这个,帮助打不开,关于打不开,搜索出来的都是知乎,不过确实想做的和这个很类似。
    sjmcefc2
        4
    sjmcefc2  
    OP
       Aug 19, 2021
    @israinbow 请教有类似的开源项目吗?
    sjmcefc2
        5
    sjmcefc2  
    OP
       Aug 19, 2021
    @funet 也是想定向的搜索几个站点。
    huabalance
        6
    huabalance  
       Aug 20, 2021 via Android
    谷歌搜索 yacy
    Tianyan
        7
    Tianyan  
       Aug 20, 2021
    自定义搜索啊
    sjmcefc2
        8
    sjmcefc2  
    OP
       Aug 21, 2021
    @huabalance 这个很好啊
    sjmcefc2
        9
    sjmcefc2  
    OP
       Aug 21, 2021
    自定义搜索,这个怎么具体做呢
    sjmcefc2
        10
    sjmcefc2  
    OP
       Aug 21, 2021
    @huabalance 这个 可以搜中文吗
    huabalance
        11
    huabalance  
       Aug 21, 2021
    @sjmcefc2 你为什么不试一下呢。。 可以搜。
    sjmcefc2
        12
    sjmcefc2  
    OP
       Aug 22, 2021
    @huabalance 安装使用了,能够中文。
    但是好像一次只能执行一批爬虫任务,想着有了一个任务之后,在开始,就断掉了。
    而且
    HTTP ERROR 500 java.lang.OutOfMemoryError: Java heap space
    URI: /yacysearch.html
    STATUS: 500
    MESSAGE: java.lang.OutOfMemoryError: Java heap space
    SERVLET: net.yacy.http.servlets.YaCyDefaultServlet-5dcb4f5f
    CAUSED BY: java.lang.OutOfMemoryError: Java heap space
    Caused by:

    java.lang.OutOfMemoryError: Java heap space
    About   ·   Help   ·   Advertise   ·   Blog   ·   API   ·   FAQ   ·   Solana   ·   942 Online   Highest 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 34ms · UTC 21:17 · PVG 05:17 · LAX 14:17 · JFK 17:17
    ♥ Do have faith in what you're doing.