Home Sign Up Sign In
bestehen
V2EX  ›  问与答

自己设计的爬虫框架

  •  1      
  •   bestehen · Aug 22, 2018 · 1364 views
    This topic created in 2853 days ago, the information mentioned may be changed or developed.

    现在是 5 个爬虫，当然现在我想并行，我写在一个 run 的文件里面，现在 5 个爬虫并行，是不是先把这 5 个爬虫执行写在一个函数里面，然后多线程处理？

    No Comments Yet
    About   ·   Help   ·   Advertise   ·   Blog   ·   API   ·   FAQ   ·   Solana   ·   1313 Online   Highest 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 25ms · UTC 17:03 · PVG 01:03 · LAX 10:03 · JFK 13:03
    ♥ Do have faith in what you're doing.