• 热门行业
  • 装修建材
  • 家居生活
  • 餐饮食品
  • 母婴教育
  • 电脑办公
  • 服装首饰
  • 汽车工具
  • 家电数码
  • 机械化工
  • 休闲美容
返回上一页
专利状态
NLP数据预处理方法、jvm及spark端服务器
有效
专利申请进度
申请
2021-05-18
申请公布
2021-07-30
授权
2024-02-27
预估到期
2041-05-18
专利基础信息
申请号 CN202110539452.7 申请日 2021-05-18
申请公布号 CN113190657A 申请公布日 2021-07-30
授权公布号 CN113190657B 授权公告日 2024-02-27
分类号 G06F16/33;G06F16/35;G06F40/242;G06F9/455;G06F18/2135;G06N20/00
分类 计算;推算;计数;
申请人名称 中国银行股份有限公司
申请人地址 北京市西城区复兴门内大街1号
专利法律状态
  • 2024-02-27
    授权
    状态信息
    授权
  • 2021-08-17
    实质审查的生效
    状态信息
    实质审查的生效;IPC(主分类):G06F16/33;申请日:20210518
  • 2021-07-30
    公布
    状态信息
    公布
摘要
本发明公开了一种NLP数据预处理方法、jvm及spark端服务器,涉及人工智能技术领域,该方法包括:对待处理数据进行初步处理,得到初始输入数据,初步处理包括去停用词和切词;接收spark端服务器发送的字典规则,字典规则包含对待处理数据进行预处理时,各个操作步骤的输入与输出的对应关系,所述操作步骤包括依次进行的TFIDF处理、基于信息增益的降维处理以及PCA处理;通过字典规则的读取,确定对初始输入数据进行预处理时,每个操作步骤的输出结果;将PCA处理的输出结果确定为待处理数据的预处理结果。本发明可以简化jvm获取NLP数据预处理结果的过程,同时能够利用各种算法模型得到更加准确的预处理结果。