基于文本的用户信息提取分析 ● 项目概述:基于 Spark-Sql 等相关技术,研发不同场景属性和非场景属性相关文本提取算法。将非结构化数据转化成结构化数据,设计文本信息提取算法架构,对文本信息进行数据分析和数据挖掘,形成用户特有的人物画像。 ●系统架构:离线数据分析:HDFS+Hive+SparkSQL+Hbase+关系型数据库。
● 项目概述:文本数据的二次解析开发和应用 ●使用工具:python、mysql ●系统架构:离线数据分析:系统日报-python解析-正则表达式处理-数据入库 说明:根据部门统计需求,将日报中的数据进行提取,使用python正则表达式和相关技术进行解析(etl),将解析后的数据输出到文件和数据库。用于数据去重和基础数据提供
基于文本的用户信息提取分析 ● 项目概述:基于 Spark-Sql 等相关技术,研发不同场景属性和非场景属性相关文本提取算法。将非结构化数据转化成结构化数据,设计文本信息提取算法架构,对文本信息进行数据分析和数据挖掘,形成用户特有的人物画像。 ●系统架构:离线数据分析:HDFS+Hive+SparkSQL+Hbase+关系型数据库。...
● 项目概述:文本数据的二次解析开发和应用 ●使用工具:python、mysql ●系统架构:离线数据分析:系统日报-python解析-正则表达式处理-数据入库 说明:根据部门统计需求,将日报中的数据进行提取,使用python正则表达式和相关技术进行解析(etl),将解析后的数据输出到文件和数据库。用于数据去重和基础数据提供...
添加客服微信,免费为您安排与该工程师直接沟通
长按二维码添加客服微信
如该工程师当前档期不合,也可免费为您推荐相似候选人