回到顶部

拉勾技术沙龙-大数据技术在企业的落地实践

2021年9月11日 13:30 ~ 2021年9月11日 17:00

收起

活动票种
    付费活动,请选择票种
    展开活动详情

    活动内容收起

    拉勾技术沙龙是由拉勾举办的技术分享交流活动,每月一期,在北京、上海、深圳、广州、杭州等城市轮流举办,内容涵盖云计算、大数据、人工智能、软件开发等技术领域。我们每期邀请2-3位一线公司技术专家,分享当下最热门的技术在公司内部的落地实践,旨在为技术人员提供一个自由的技术交流和分享平台。

    本期沙龙主题为:大数据技术在企业的落地实践,我们邀请了来自腾讯、顺丰科技和虾皮的技术专家,结合自己的实践经验,来与大家分享近几年应用非常广泛的Flink以及备受关注的ClickHouse在这些一线大厂的应用案例以及踩过的坑。


    01.活动流程

    13:30-14:30 《Flink 常见问题排查与任务调优实践》

                           龙逸尘-腾讯云


    14:40-15:40 《Clickhouse在shopee Data team的实践》

                           Sharon-虾皮


    15:50-16:50 《顺丰科技 Hudi on Flink 实时数仓实践》

                           刘杰-顺丰科技


                   

    02.议题介绍

                   

    1:《Flink 常见问题排查与任务调优实践》              


    议题简介:

    不同于传统的离线数据处理,实时的数据处理通常需要 24 小时不间断运行,同时数据吞吐量大,对数据处理的延迟非常敏感。 Flink 已经是当前流计算框架的事实标准,但是在生产环境的使用中,Flink 作业在部署、运行等过程都有可能遇到问题,导致任务异常,或者是由于使用方法的问题,导致性能无法达到预期。这些问题也为Flink 作业的开发和运维带来了许多困难。

    本次分享主要介绍 Flink 使用过程中的常见问题,分析 Flink作业常见问题的排查思路,并分享 Flink 作业的调优实践。

     

    听众收益:

    1. 认识 Flink 使用过程中的常见问题

    2. 了解 Flink常见问题的排查思路

    3. 熟悉 Flink 任务常见调优方向

                         

                   

    2:《Clickhouse在shopee Data team的实践》          


    议题简介:              

    ClickHouse是近年来备受关注的开源列式数据库,主要用于数据分析(OLAP)领域。当你需要使用ClickHouse解决自己的业务问题时,选择合适的数据库引擎和数据表引擎往往是最为首要的问题。本次分享主要是向大家介绍shopee data团队在clickhouse使用上的一些实践经验,以及在实践过程中遇到的一些坑。    

                

    听众收益:

    1. ClickHouse常见库表引擎的使用指南

    2. ClickHouse更新/删除数据的几种方式

    3. 供应链 Data Team的几个应该Clickhouse业务实践

    4. Clickhouse 踩坑经验(分布式表,问题定位,监控)


                   

    3:《顺丰科技 Hudi on Flink 实时数仓实践》          


    议题简介:      

    介绍顺丰在hudi on flink 上的一些实践经验,分享在实践过程中遇到的一些坑和顺丰在 hudi on flink 的一些改造。


    听众收益:

    1. 能够了解到hudi on flink 的核心算子的原理,更好的理解 hudi 的写入原理;

    2. 顺丰对 hudi 进行了扩展,来代替 flink  top one ,left join 功能,给听众带来带来一种全新的 top one  和 left join 实现方式;

    3. 通过对趟过的坑的分析能够了更加了解 flink 的checkpoint 机制。

             

                

    03.关于主办方


    拉勾企业培训中心(后简称“拉勾企培”)是拉勾旗下为IT互联网职场人才提供专业能力提升培训的平台。拉勾凭借多年的人才招聘经验拥有国内大量互联网企业合作资源,与业内资深讲师及名企一线实战专家团深入研究,为企业研发与管理团队打造体系化的数字化人才解决方案,真正帮助企业打造从人才招聘到人才培养的服务闭环。


                   

          



    举报活动

    活动标签

    最近参与

    • 风吹
      报名

      (4年前)

    • a布道师
      报名

      (4年前)

    • momo
      报名

      (4年前)

    • momo
      收藏

      (4年前)

    报名须知

    1、本活动具体服务及内容由主办方【闫磊】提供,活动行仅提供票务技术支持,请仔细阅读活动内容后参与。

    2、如在活动参与过程中遇到问题或纠纷,双方应友好协商沟通,也可联络活动行进行协助。

    您还可能感兴趣

    您有任何问题,在这里提问!

    为营造良好网络环境,评价信息将在审核通过后显示,请规范用语。

    全部讨论

    还木有人评论,赶快抢个沙发!

    微信扫一扫

    分享此活动到朋友圈

    免费发布