|
|
|
|
|
主讲:周小四 |
QingCloud系统工程师及大数据平台负责人 |
时间:4月16日,周六10:00-11:30 |
费用:免费
|
|
|
本次分享的主要内容为基于云计算的大数据平台基础设施建设以及其架构特点。大数据是全球科技现在及未来的长期热点,而大数据的基础建设则是其重要基石。大数据基础建设当前的趋势是云化与开放,而如何在云上提供弹性、敏捷,却不失稳定和高性能的大数据平台,则是非常有挑战的工作.....
|
安排: |
|
1. 如何学习Spark |
● Spark的架构 |
● 如何使用Spark |
● 如何监控应用,区分不同类型的存储 |
● understand RDD and DAG |
2. 如何在HDFS中存储数据 |
● 如何对分布式的dataset分区 |
● 如何避免混乱(TBD) |
|
问题收集(以下为最新20个问题)
兰红宇(诺基亚,高级工程师): | 目前公共云的安全有没有标准等级 大数据和云计算的结合目前主要应用在哪些领域? 华为云,百度云,阿里云等有什么区别?
| 张虎(58,数据挖掘): | ack原理
| 王华(乐富,开发): | 怎么学习spark
| 何小宏(青岛智慧,软件工程师): | 大数据开发工程师具体做哪些工作呢
| 卢春洋(上海飞牛集达,架构师): | Spark-sql yarn-client的原理机制 Spark现在的使用方式都有哪些 Spark实时处理案例的技术架构有哪些可以分享
| 杨汉辉(Zevers,SE): | 企业信息部门应当如何规划大数据平台,如何与ERP、MES、PLM等信息系统有机融合?
| 陈瑞(华阳海事服务,Linux运维): | 监控应用是如何实现的 主要监控哪方面
| 学弟(dh,xxx): | spark如何使用 spark的使用场景和注意事项
| 杨嘉(中国航天科技,副主任设计): | 经常说的Hadoop生态圈的spark能替代hadoop MR吗? hadoop生态圈代替传统数据库的可行性? hadoop的推广重点在于平台还是应用?
| 陆登润(自由职业者,软件工程师): | Spark在企业中的应用 Spark与hadoop的区别 在未来大数据进程中Spark的优势
| 孙雷(Fideli,软件工程师): | 如何学习Spark 如何将大数据与Mobile技术结合起来 如何在HDFS中存储数据
| 鄢万军(Fideli,软件工程师): | Spark的架构 Spark与Hadoop有什么不同 Spark能干什么
| 吴勇(深圳市龙视传,PM): | Spark的数据仓库怎么搭建 Spark的即席查询的框架和性能优化 Spark的未来5年怎么样
| 小山丘(上海,软件工程师): | 如何搭建适当的环境
| 远贵良(贝赛科技,部门经理): | Spark 使用流程 hdfs监控调优方法 Spark 监控调优方法
| 张奎(济南讯和,项目经理): | 云计算初步了解
| 傅(浙江保融,系统架构师): | 构建saas平台的几个条件 构建saas平台需要的关键技术 构建saas平台如何测试
| 汤瑞华(ddd,ss): | 如何学习Spark 大数据架构 大数据运用
| 王宁(国富安电子商,架构): | 如何整理、学习hadoop生态系统 zookeeper的作用 sqoop导出数据遇到的实际问题,实例讲几个
| 胡华梅(中融民信,PM): | 基于云计算的大数据平台建设主要有哪些工作 基于云计算的大数据平台应用在哪些方面 基于云计算的大数据平台弹性敏捷性体现在哪些方面
|
|
|
阅读 5426
160 |
|
|
|
|
|
|