• 红软基地:您身边最放心的安全下载站!
您所在的位置:首页 > 软件 > 编程开发 > 编程其他 > CCTC2016魅族莫涵宇:魅族大数据平台架构实践

CCTC2016魅族莫涵宇:魅族大数据平台架构实践

软件类型:
国产软件
软件语言:
简体中文
软件大小:
4 MB
软件授权:
免费软件
软件评级:
4
更新时间:
2017-11-01
应用平台:
WinXP, Win7, WinAll
同类推荐软件
软件简介

这是CCTC2016魅族莫涵宇:魅族大数据平台架构实践下载,该文档来自CCTC 2016中国云计算技术大会。魅族flyme大数据平台经理莫涵宇发表的题为“魅族大数据平台架构实践”的主题演讲,欢迎下载!

软件介绍

CCTC2016魅族莫涵宇:魅族大数据平台架构实践 是在大数据浪潮中,魅族虽然起步比较晚,但是发展极为迅速。魅族如今的用户已从百万级快速增长到了千万级别,面对如此业务量暴增的情况,魅族是如何通过大数据技术,来保证业务的稳定性的?在大会结束后,我们CSDN小编又特意专访了莫涵宇老师,请他具体谈谈魅族在构建大数据平台过程中背后所经历的故事,让大家更加深入了解魅族在大数据中的众多的探索。

软件模块

IDE提供了Hhive、Spark、MySQL、Python,语法的支持,通过代码区输入代码,可以实时的执行获得返回结果集,没有结果集的将展现日志。IDE用于日常查询或者任务开发,每次代码都可以存储下来,并可以配置成调度任务。我们未来还计划增加R,Scala语法的支持。
然后说说调度,它提供了我们所有任务调度的支持,我们对目前面临数据领域的各种任务链,各种依赖,资源调配都进行了梳理,按照我们已知和想到的功能去开发,调度系统属于集成开发平台的一个组件,可以和刚刚说的IDE无缝整合使用。
元数据系统目前还在持续完善中,当然它也是一个提供服务的平台,我们规划的元数据系统中,除了专用的元数据查询和分析界面,还有对外的调用接口,例如可以对IDE提供服务,让用户在做类SQL编码过程中直接可以在左侧查询到库,表和字段的信息,简化开发难度。
这里的统计分析模块其实主要是对任务和个人操作行为的一些分析,我们可以通过这个功能优化整体资源,发现瓶颈,指引个人开发工作。此外的配置这些功能这里就不赘述了,基本都差不多。对这个平台的规划,我们未来还希望和流计算平台整合,让我们的数据开发工作都能更加简单高效。

相关介绍

莫涵宇,作为国内较早的数据仓库践行者之一,从电信业进入数据领域,最终跟随大数据的潮流走入互联网,十多年来参与了多个数据平台建设工作,开发过电信业系统和政府的数据系统,也建设过阿里B2B,YY等互联网业的数据仓库,始终相信数据能改变世界,希望能在魅族继续发掘数据的更大价值。

软件截图

 CCTC2016魅族莫涵宇:魅族大数据平台架构实践

软件下载地址
CCTC2016魅族莫涵宇:魅族大数据平台架构实践
软件推荐
下载排行

精品软件

热门关键词

热门软件推荐