值得买获得发明专利授权:“一种参数化爬虫下载方法、装置、设备及存储介质”
作者:小微
发表于:2024年04月13日
浏览量:76442
证券之星消息,根据企查查数据显示值得买(300785)新获得一项发明专利授权,专利名为“一种参数化爬虫下载方法、装置、设备及存储介质”,专利申请号为CN202111225827.9,授权日为2024年4月12日。
图片来源于网络,如有侵权,请联系删除
专利摘要:本发明公开了一种参数化爬虫下载方法、装置、设备及存储介质,包括:根据上游业务传入的Http链接的数量决定需要启动的下载库;对所述下载库进行二次开发,增加Http反扒参数,分析Http链接的特性,启动避免请求失败功能;对所述下载库进行二次开发,增加请求参数,设定Http请求的默认请求头,修改请求头的信息的功能;根据设定的Http反扒参数中的关键字和服务端响应的请求状态码,识别当前请求;返回下载内容。本申请使整个下载过程通过传参完成各种下载操作,自动启动并发下载、简单启用各类代理、对下载结果进行标签化验证,在对有反扒策略的目标网站进行下载时增效明显。
图片来源于网络,如有侵权,请联系删除
今年以来值得买新获得专利授权2个。结合公司2023年中报财务数据,2023上半年公司在研发方面投入了7639.96万元,同比减2.38%。
数据来源:企查查
以上内容由证券之星根据公开信息整理,由算法生成(网信算备310104345710301240019号),与本站立场无关,如数据存在问题请联系我们。本文为数据整理,不对您构成任何投资建议,投资有风险,请谨慎决策。