Letterboxd list scraper:该程序可以从输入URL中抓取有关电影标题发行年份和Letterboxd链接的信息。 当前它适用于普通列表和监视列

信箱式列表抓取工具 一种从简单URL抓取Letterboxed列表的工具。 输出是一个CSV文件,其中包含电影标题,发行年份,导演,演员,评分(仅适用于个人电影列表),平均评分以及指向“信箱”页面的链接。 当前版本已在监视列表和常规列表上经过测试。 当前的刮擦速度约为每张胶片1.3秒。 入门 依存关系 需要python 3.x,numpy,BeautifulSoup(bs4),请求和tqdm。 正在安装 复制存储库并在其中工作。 执行程序 通过运行python main.py并输入有效的URL(例如 )来运行程序。 一段时间后,将输出包含您的数据的CSV文件。 使用脚本cast_reader.py将CSV文件中的“投放”列读入正确的python列表中。 去做 创建一个列表标识符,以识别输入的URL是否包含监视列表,个人电影列表或普通列表,并让代码进行相应的行为(例如,监视列表不进行评分)