yacy_grid_loader:YaCy Grid中无头浏览器作为加载程序微服务 源码

YaCy网格组件:加载程序 YaCy Grid是对等搜索引擎YaCy的第二代实现。 YaCy Grid安装包含一组微服务,这些微服务使用MCP相互通信,请参阅 目的 加载程序是一种微服务,可以使用Docker进行部署。 每个搜索引擎都需要一个文件加载器,而该组件将完成该工作。 该加载器的特殊功能是它的嵌入式无头浏览器,可以加载丰富的内容并将其提供给搜索引擎。 它能做什么 启动Loader组件时,它将搜索MCP并连接到它。 默认情况下,将在本地主机上搜索MCP,但您可以自己配置。 然后,加载程序将等待客户端请求,并根据请求执行Web加载。 它还具有MCP队列侦听器,以对工作队列中的加载请求做出React。 加载内容后,加载程序会将结果推回MCP存储,并在MCP消息队列中放入另一条消息,以处理加载的内容。 安装:下载,构建,运行 目前,yacy_grid_parser尚未以编译形式提供,您可