大数据平台架构的设计思路与实践

直播时间: 2020年07月16日 20:00~2020年07月16日 22:00

倒计时
你来晚了,下次早点来

直播详情

直播简介

著名Linux运维专家,资深大数据运维专家高俊峰带大家分享企业应用中大数据平台架构的设计思路和方法。
主要包含实时日志收集架构,ELK实时检索系统架构、hadoop大数据平台架构以及大数据平台硬件选型经验。

更多说明:
支持回放:直播结束后,我们将尽快上传回放视频供大家观看
支持活动总结:活动结束后,编辑将会撰写总结文章,涵盖直播所有重点、亮点,方便喜欢图文学习的小伙伴学习

适用人群
1.运维人员
2.对大数据感兴趣
3.大数据研发工程师
直播大纲
1.大数据平台拓扑
2.实时日志收集架构
3.ELK实时检索系统架构
4.Hadoop大数据平台架构
5.大数据平台硬件选型

直播互动79

  • wx5c7b4d478e6d3 2020-07-16 21:31:48

    高老师,可不可以分享一个您实际工作中遇到的典型的问题,您是怎么解决的

  • finema 2020-07-16 21:30:31

    老师用什么版本的更稳定

  • wx5e10925c08cd3 2020-07-16 21:27:02

    老师的专栏叫啥

    • 咖啡 回复了 wx5e10925c08cd3 :南非蚂蚁老师专栏集锦 ①《轻松玩转ELK海量可视化日志分析系统》>>https://blog.51cto.com/cloumn/detail?id=14 ②《Linux运维大牛实战心法》>>https://blog.51cto.com/cloumn/detail?id=24 ③《无监控,不运维》>>https://blog.51cto.com/cloumn/detail?id=33 ④《神奇高效的Linux命令行》>>https://blog.51cto.com/cloumn/detail?id=47 ⑤《Linux性能调优攻略》>>https://blog.51cto.com/cloumn/detail?id=60
  • xcxyxxjs 2020-07-16 21:25:54

    有相关书籍资料推荐么

  • wx5e10925c08cd3 2020-07-16 21:25:46

    老师的专栏叫啥

  • Franksun2003 2020-07-16 21:20:06

    AZKENBA和Oozie区别

  • moyansen 2020-07-16 21:19:48

    大数据平台可以容器化吗

  • wx5c7b4d478e6d3 2020-07-16 21:17:33

    高老师,sqoop导出数据到Oracle,怎么实现update,覆盖重复数据记录

  • wx58b51a229982f 2020-07-16 21:17:29

    是块数过多超过了阈值

  • wx5b1f900758553 2020-07-16 21:16:29

    HDFS和Ceph分布式存储 应用场景有什么不一样?

  • wx589c3900146f6 2020-07-16 21:15:53

    做运维有必要去学习OpenStack吗

  • gklx2008 2020-07-16 21:15:42

    老师提到的这些都是open source

  • finema 2020-07-16 21:15:22

    这是经典大平台架构,老师有更先进的架构吗,或者新的发展架构

  • wx5e10925c08cd3 2020-07-16 21:15:22

    老师专栏叫啥名字

    • 51CTO博客 回复了 wx5e10925c08cd3 :扫码进直播群,群里有直达链接。
    • 51CTO博客 回复了 wx5e10925c08cd3 :南非蚂蚁老师专栏集锦 ①《轻松玩转ELK海量可视化日志分析系统》>>https://blog.51cto.com/cloumn/detail?id=14 ②《Linux运维大牛实战心法》>>https://blog.51cto.com/cloumn/detail?id=24 ③《无监控,不运维》>>https://blog.51cto.com/cloumn/detail?id=33 ④《神奇高效的Linux命令行》>>https://blog.51cto.com/cloumn/detail?id=47 ⑤《Linux性能调优攻略》>>https://blog.51cto.com/cloumn/detail?id=60
  • wx58b51a229982f 2020-07-16 21:14:58

    老师,请问hdfs文件系统告警block count如何处理最好

  • gklx2008 2020-07-16 21:14:54

    这些框架都是免费?

  • wx5b441a61defcf 2020-07-16 21:14:21

    核心的一些数据,归档后不做变更,

  • wx5b441a61defcf 2020-07-16 21:12:17

    还需要使用Oracle数据库存储基础数据吗

  • xcxyxxjs 2020-07-16 21:09:56

    对于hdfs来说,有冷热数据之分么?对于冷热数据如何处理

    • wx5b441a61defcf 回复了 xcxyxxjs :还需要使用Oracle数据库存储基础数据吗
  • wx57a407abd3e35 2020-07-16 21:09:14

    老师您好 问下cdh 和 ambari一样吗

  • wx5c26e7224dec3 2020-07-16 21:08:52

    老师关于elk的专栏在哪可以找到

    • 51CTO博客 回复了 wx5c26e7224dec3 :进直播群 https://blog.51cto.com/cloumn/detail?id=14
  • gklx2008 2020-07-16 21:06:49

    老师了解Splunk嘛?

  • mb5f0598755fb6e 2020-07-16 21:06:37

    spark可以流式计算吗

  • wx595cef4a09d68 2020-07-16 21:06:35

    老师,作为运维,现在是不是必须得掌握python呢,那样做大数据分析才会更容易

  • gklx2008 2020-07-16 21:06:27

    有具体动手案例说明嘛?

  • wx5b441a61defcf 2020-07-16 21:06:25

    大数据平台怎么才能把他用起来呢

    • wx5b441a61defcf 回复了 wx5b441a61defcf :老师怎么能运用到现有业务中呢
  • wx5b1f900758553 2020-07-16 21:06:08

    有专门的课程讲Flink吗?

  • buptyangguang 2020-07-16 21:05:30

    老师你这边是否有MPP 数据库大数据平台的选型和运维经验可以分享一下

  • wx5e10925c08cd3 2020-07-16 21:05:22

    老师专栏叫啥

  • xcxyxxjs 2020-07-16 21:05:18

    需要做备份么,比如hbase

  • wx5b441a61defcf 2020-07-16 21:02:53

    28c是什么

  • buptyangguang 2020-07-16 21:01:05

    谢谢老师关于RAID的讲解,数据盘不做RAID使用直通模式 挂载磁盘的时候是直接格式化挂载 还是需要格式化后再分区?

  • xcxyxxjs 2020-07-16 20:58:36

    这么多机器做的联邦么,用ambair可以做么,用的哪个版本

  • buptyangguang 2020-07-16 20:55:54

    Hadoop 和ELK中集群中 服务器磁盘的RAID策略 能否讲解一下

  • xjx022 2020-07-16 20:55:31

    老师,我是您的学生

    • wx5b1f900758553 回复了 xjx022 :同学好,我也是高老师的学生
  • wx5d88a345d7f36 2020-07-16 20:55:04

    明显是录 播

    • 咖啡 回复了 wx5d88a345d7f36 :可以让老师做个动作,看看是不是被“录播”
  • wx5d88a345d7f36 2020-07-16 20:53:42

    关系型数据库和非关系型数据库的底层硬件使用都是分布式存储吗 ?

  • Franksun2003 2020-07-16 20:53:23

    个人如何自己搭建学习环境?

  • buptyangguang 2020-07-16 20:52:30

    老师 Hadoop 和ELK中 服务器磁盘的RAID策略 能否讲解一下

  • lovc 2020-07-16 20:52:06

    后面会开课么 ?

  • wx5e10925c08cd3 2020-07-16 20:51:57

    30岁学这个会太晚了吗

  • lovc 2020-07-16 20:51:51

    怎么学啊

  • qq59a611b4166c6 2020-07-16 20:51:49

    老师,怎样设计架构可以做到mysql的业务数据离线和 增量更新到hive

  • wx5e10925c08cd3 2020-07-16 20:51:03

    小白要学多久能到能入职的程度

  • wx595cef4a09d68 2020-07-16 20:50:53

    老师,这个要求我们掌握java编程语言吗

  • qq59a611b4166c6 2020-07-16 20:50:19

    ambari和cdh

  • qq59a611b4166c6 2020-07-16 20:39:15

    和cdh对比,怎么样

  • drvicar 2020-07-16 20:34:20

    我网络不好。得看回看了

  • wx5c805ed4b911b 2020-07-16 20:22:48

    请调大点声音。

    • 咖啡 回复了 wx5c805ed4b911b :手机端声音是正常的
  • 51CTO博客 2020-07-16 20:21:54

    进直播群,解锁优惠券

  • crazys_蘑菇 2020-07-16 20:16:06

    老师的声音好听啊

  • wx5c805ed4b911b 2020-07-16 20:14:38

    声音太小了。

  • huwge 2020-07-16 20:10:04

    声音好小

    • 咖啡 回复了 huwge :这边还可以
  • wx5d88a345d7f36 2020-07-16 20:09:04

    大家可以扫码进群吗 ?

  • wx5d88a345d7f36 2020-07-16 20:08:11

    扫码进群怎么进不去? ?

    • 51CTO博客 回复了 wx5d88a345d7f36 :扫码正常
  • 51CTO博客 2020-07-16 20:05:58

    进群获取PPT 群里发3大直播福利!

  • ChinaUnicom110 2020-07-16 20:04:34

    怎么感觉像在播放视频,不是直播

    • 51CTO博客 回复了 ChinaUnicom110 :24k纯直播
    • 51CTO博客 回复了 ChinaUnicom110 :直播哦,如果您有问题可以在这儿提出来,老师直播后会给大家解答哈~
  • xjx022 2020-07-16 20:02:33

    老师 ,有录播吗

    • 51CTO博客 回复了 xjx022 :有的哦,直播后会分享老师的视频回放哦~
  • huwge 2020-07-16 20:02:27

    声音有点小

  • wx5e04084cb0350 2020-07-16 20:02:15

    PPT有吗

    • 51CTO博客 回复了 wx5e04084cb0350 :可以扫码进群获取PPT
  • qq59a38a99cf94f 2020-07-16 19:57:15

    能听到

  • jasomd 2020-07-16 19:57:14

    可以

  • 咖啡 2020-07-16 19:57:12

    能哦

直播大咖

  • 高俊峰

    网名:南非蚂蚁,大数据专家
    毕业于西安电子科技大学通信工程专业,曾就职于新浪网、阿里云(原万网),任职系统架构师
    多年自动化运维和管理经验,擅长大数据运维、Linux、集群应用、Mysql、Oracle等方面的系统管理、性能调优,规划设计,实战经验丰富

报名成功

恭喜您,报名成功
活动时间:2020-07-16 20:00:00 ~ 2020-07-16 22:00:00,
请准时参加哟。

知道了
X
活动报名
关注公众号 回复5——已完成-2进行报名
微信扫一扫
Copyright©2005-2020 51CTO.COM 版权所有 未经许可 请勿转载