伪静态URL的筛除方法、系统及网页爬取方法、系统

热门行业
装修建材
家居生活
餐饮食品
母婴教育
电脑办公
服装首饰
汽车工具
家电数码
机械化工
休闲美容

热门行业

教育培训
板材
地板
涂料
家纺
集成吊顶
美缝剂
木门
硅藻泥
管材
指纹锁
橱柜
衣柜
床垫
电热水器
集成灶
暖气片
净水器
酒店
卫浴

返回上一页

专利状态

伪静态URL的筛除方法、系统及网页爬取方法、系统

有效

专利申请进度

申请

2014-03-06

申请公布

2015-09-09

授权

2019-06-18

预估到期

2034-03-06

专利基础信息

申请号	CN201410081110.5	申请日	2014-03-06
申请公布号	CN104899219A	申请公布日	2015-09-09
授权公布号	CN104899219B	授权公告日	2019-06-18
分类号	G06F16/951;G06F16/955
分类	计算；推算；计数;
申请人名称	上海携程商务有限公司
申请人地址	上海市长宁区金钟路968号16号楼10楼

专利法律状态

2019-06-18

授权

状态信息

授权
2017-01-11

实质审查的生效

状态信息

实质审查的生效IPC(主分类):G06F 17/30申请日:20140306
2016-02-24

专利申请权、专利权的转移

状态信息

专利申请权的转移IPC(主分类):G06F 17/30登记生效日:20160201变更事项:申请人变更前权利人:携程计算机技术（上海）有限公司变更后权利人:上海携程商务有限公司变更事项:地址变更前权利人:200335 上海市长宁区福泉路99号携程网络技术大楼变更后权利人:200335 上海市长宁区金钟路968号16号楼10楼
2015-09-09

公布

状态信息

公布

摘要

本发明公开了一种伪静态URL的筛除方法、系统及网页爬取方法、系统。该筛除方法包括以下步骤：获取待测URL列表；读取URL正则列表并建立一数据库；选取一URL与正则表达式逐一匹配；将数据库中的URL根据路径分类；比对该URL和同路径URL的参数及值以确定是否设标志位；根据URL相似度及网页结构相似度决定是否设标志位；将该URL存储至数据库中。本发明的伪静态URL的筛除方法、系统及网页爬取方法、系统针对网站使用的伪静态技术，实现了对伪静态URL的自动识别，以过滤大量重复、无用的伪静态URL，提取有价值的URL进行安全检测，提高了爬行效率和爬行准确性。

更多专利

全国服务热线：

在线客服

1211389656 咨询

商务合作

85926368 咨询

媒体合作

921888730 咨询

在线客服
客服微信号

品牌网官方客服微信

打开微信扫一扫

客服微信
商务合作微信

商务合作详谈

打开微信扫一扫

商务合作
回到顶部

在线客服

商务合作

媒体合作

客服微信号

商务合作微信