nlp

中文维基百科文本数据获取与预处理

照例,先讲下环境,Mac OSX 10.11.2 ,Python 3.4.3。下载数据方法1:使用官方dump的xml数据最新打包的中文文档下载地址是:https://dumps.wikimedia.org/zhwiki/latest/zhwiki-latest-pages-articles.xml.bz2 。方法2:也是官方,结构化数据(json)下载地址是:https:

AI PM 应该懂的自然语言处理(NLP)知识

文章从NLP是什么、能做什么、目前遇到的难题三个方面,对NLP展开分析。NLP是人工智能的一个子领域,作为AI产品经理,我们至少要知道NLP是什么,它能做什么事,这样我们就能获得一种解决问题的思维,将遇到的问题和方法连接起来。接下来我从“NLP是什么、能做什么、目前遇到的难题”三个方面来简单介绍下NLP。一.什么是NLPNLP,中文叫自然语言处理,简单来说,是一门让计算机理

谁说HR离AI很遥远?未来每个HR都离不开AI

本文从HR在人才招聘过程中的遇到的痛点出发,介绍人工智能时代自然语言处理(NLP)技术在该行业中的应用现状、前景及创新。几年前,HR SaaS 在市场爆发式的增长引发了大家的关注。Saas 大潮退去,人工智能在各行各业的风起云涌,HR 反而不小心成为了 AI 领域看似风平浪静的垂直门类。在人力资源部门,HR的工作内容每天有大量的非结构化数据产生。如何把办公文档、文本、图片、