基于Linux系统Hadoop平台的广告用户画像建模 摘 要 本文将Hadoop分布式集群应用于Linux系统中,对移动广告方向的大数据进行分析,并对用户肖像进行建模。群集主要由3台服务器运行。根据用户的不同需求,通过需求设计和数据统计分析建立用户标签,支持用户肖像建模,实现广告的准确投放。数据源为手机的SDK信息、web日志、网页的嵌入式点数据、MySQL小型数据库和Hbase数据库的数据仓库。摘要:通过表格结构设计和MapReduce数据预处理,构建Hadoop分布式集群进行数据处理研究,利用大数据技术提高广告投放的精度和效率,方便现代市民对广告的需求。 关键词:Hadoop;用户画像;广告投放;分布式 目 录 摘 要 I Abstract II 第一章 绪 论 1 1.1 背景与现状 1 1.2 研究意义 1 3第二章 相关技术支持 3 2.1 HADOOP简介 3 2.1.1 HDFS分布式文件系统 3 2.1.2 MAPREDUCE分布式并行计算框架 4 2.2 HIVE数据分析核心组件 5 2.3 HBASE数据仓库 6 2.4 HADOOP生态圈其他组件简介 6 2.5 相关数据库简介 7 第三章 平台搭建与数据分析 8 3.1 基础环境搭建 8 3.2 系统架构与数据需求 19 3.3 数据分析及画像建模 22 3.4 推荐系统 26 第四章 平台搭建与数据分析 30 4.1 相关参数调优 31 4.2 测试结果 33 结 论 38 参考文献 39 致 谢 40 附 录 41 |
基于Linux系统Hadoop平台的广告用户画像建模
更新时间:2019-07-26