《电信人口大数据项目简介.docx》由会员分享,可在线阅读,更多相关《电信人口大数据项目简介.docx(7页珍藏版)》请在课桌文档上搜索。
1、电信人口大数据项目简介XX科技股份有限公司编制目录一、电信人口大数据项目背景3二、客户情况及市场情况41客户情况42市场情况4三、技术选型5四、项目团队构成错误!未定义书签。五、团队成员技能需求错误!未定义书签。一、电信人口大数据项目背景国务院2015年印发促进大数据发展行动纲要,其中提出,要加强顶层设计和统筹协调,大力推动政府信息系统和公共数据互联开放共享,加快政府信息平台整合,消除信息孤岛,推进电信人口大数据资源向社会开放,增强政府公信力,引导社会发展,服务公众企业;以企业为主体,营造宽松公平环境,加大大数据关键技术研发、产业发展和人才培养力度,着力推进数据汇集和发掘,深化大数据在各行业创
2、新应用,促进大数据产业健康发展:完善法规制度和标准体系,科学规范利用大数据,切实保障数据安全。纲要明确,推动大数据发展和应用,在未来5至10年打造精准治理、多方协作的社会治理新模式,建立运行平稳、安全高效的经济运行新机制,构建以人为本、惠及全民的民生服务新体系,开启大众创业、万众创新的创新驱动新格局,培育高端智能、新兴繁荣的产业发展新生态。重庆市国民经济和社会发展第十三个五年规划纲要发布,提出今后五年全市常住人口总量控制在2300万人以内,城区常住人口比2014年下降15%左右,“大城市病”等突出问题得到有效缓解。根据城区十三五规划,到2020年,全区常住人口比2014年下降15%左右,控制在
3、77.4万人以内,实现净疏解13.7万人。2016年常住人口下降率计划为3.2%,要实现净疏解2.9万人,常住人口下降到87.7万人,考虑今年预计新增人口数为07万人,实际需要疏解3.6万人。重庆城共有各类商品交易市场37家,2015年已经关停4家,十三五期间剌余的33家将通过转型升级、疏解外迁等方式调整提升。其中,区域性专业市场全面外迁,批发、仓储、物流等功能全部退出。二、客户情况及市场情况1 .客户情况若客户身份信息有缺失或无法获取,也可借助位置变化轨迹和通信数据进行分析。首先,电信部门通过基站实时采集用户的位置信息,手机终端在移动过程中,可根据设备通信的基站位置创建用户移动的相应轨迹,尤
4、其是在五一、十一、春节等长假期间,我国人群一般热京返回户口所在地与亲人团聚,这段时间内运营商采集到的位置区域变化与人群的户籍流动方向呈现相反的趋势;其次,流动人群大多会频繁与户口所在地进行通信,而电信部门出于收费的需要,会采集并存储各个用户的通讯信息,包括被叫用户、被叫所在地等重要信息,这为研究人群主要通讯对象的户籍所在地提供了数据支持。2 市场情况人口的流入数量在一定程度上反映出当地的经济发展情况,也对当地的人力资源分配、城市建设、公共设施等造成一系列的社会影响,短周期内快速统计流入人口数量有利于促进城市各方面的健康发展。为进一步提高识别流入人口的准确性,可利用网络调查问卷,针对学生、务工者
5、等不同群体建立通信行为模型,获得更加精准的属性特征。根据基站位置的分布,建立基于社区、城乡电信数据的抽样统计方法,实现小区域范围内的流入人口统计,根据流入人口的统计数量绘制城市分布密度图,有利于促进城市的规划管理。三、技术选型 TAB1.EAU针对数据分析及智能提供自助式或嵌入式的可视化分析图表 E1.ASTICSEARCH针对数据分析及智能提供面向用户的全局数据探索或面向应用的全局数据搜索 CDHE1.meKafka数据采集,结合数据流技术对接各类应用系统及数据库的数据资源 HADOOPYARN针对数据服务及安全类应用的定制开发提供微服务运行环境技术管理工具 CDH/HDES文件类数据整合与
6、存储,HADOoP技术路线 CDHHBSE格式类数据整合与存储,HADOOP技术路线 CDH/H1.VE数据清洗 HADP数据清洗工具 CDH/SPARK离线数据开发及处理 F1.INK实时数据开发及处理 CDHSPRK数据服务及安全 CDH/YARN+CM数据负载及集群管理 CDH/HIVESparkM1.数据分析及智能四、项目团队构成姓名性刷学历专业工作单位项目中的分工年X作时间(月)篓字成员A男本科高级大数据工程师应用电子技术XX科技股份有限公司项目管理12成员B男本科高级大数据工程师体育医学技术总监12成员C男本科中级软件工程师计算机科学与技术软件开发12成员D男本科高级大数据讲卸计算
7、机科学与技术软件开发12成员E男本科中级软件工程师数学与应用数学软件开发12成员F男本科高级运维工程师信息管理架构设计12五、团队成员技能需求(I)成员A云计算、大数据高级工程师擅长:负责企业级云计算、大数据平台项目,大数据应用开发项目的立项、论证、验收等项目过程管理,云计算和大数据相关通识性培训。项目经历:区域医疗云计算中心、重庆三峡银行大数据平台、电信分析云项目、重庆移动业务支撑大数据平台建设。(2)成员BC1.。Udera大数据专家高级软件工程师长期从事技术管理工作,对技术团队的管理和认识有自己独到的见解,善于将人员提升和管理经营有机结合。擅长技术:Windows、1.inux、EXCh
8、ange、数据库、Hadoop、项目管理等系统开发与管理。(3)成员C商级软件工程师擅长技术:网络通信、网络安全、数据库操作、dui1.ib、cc+o(4)成员D高级软件工程师擅长技术:Python爬虫程序开发、Python数据分析、1.inux系统管理、大数据存储与管理、HadOoP大数据开发、Sca1.a函数式编程、数据挖掘、云计算平台架构、Exce1.高级数据分析、图像识别、机器学习、分布式计算、数据可视化分析等。(5)成员E大数据分析师擅长技术:R语言统计分析、EXCe1.数据分析、Q1.ik数据可视化、数据可视化建模、概率论与数理统计。(6)成员FC1.。Udera大数据专家商级软件测试工程师普在上海惠普、IBM、MoToRO1.A、北京融信恒通等公司任职,擅长技术:hadoop平台设计、运维,熟悉yarn、hdfsHA、mapreducev1.v2,f1.ume.Sqoop、pig、impa1.a,hive,zookeeper,等相关组件集群的搭建和维护管理。