SDCC 2017优秀专题线上展第一站:大数据技术实战峰会首解密

2023-11-06

SDCC始创于2007年,十年长空,历久弥新——2016年,SDCC已分别在上海、深圳、成都、杭州、北京五地举办系列峰会,广受当地开发者欢迎。其中,北京作为年度收官之作,聚焦最前沿技术成果,汇聚年度最强实践案例,为中国软件开发者们呈献了一份年度技术实战解析全景图。

精彩从未止步,就在3月19日,为期三日的SDCC 2017首站于上海圆满收官(PPT下载),以绝对干货的技术分享赢得爆棚人气,热度急升。而在6月10日-11日的深圳站(PPT下载),更是以绝对的会议品质获得讲师和与会嘉宾的好评。

  • 如果重视技术人才和工程师在这个时代的意义;
  • 如果期待技术实践能带来一日千里的发展;
  • 如果决心塑造新的企业关键竞争力;

SDCC前行的路上,有你的陪伴才不会孤单,在软件开发技术日新月异的今天,感恩有你,让我们在快速变革的时代始终保持初心。

技术长路漫漫,或逢壁垒,突破之径千万,有言“唯思不破”。思通而行路不止,思塞则万般皆休。思者,独思而难得其解,闭目塞耳,是为断源;踽踽独行,难成其事。若得良机,兼百家之言,融会以贯通,参己之思辨,习其思路良法。所求渔者,非鱼也,得之而幸甚,良机当前,不取何为——

继SDCC 2017上海站和深圳站的火热之后,今年下半年SDCC主办方CSDN而为了更好地服务技术开发者和拓展受众,特开辟SDCC线下优秀专题线上展活动,遴选精品业界话题和专家推送至EDU学院,依然秉承2017年坚持的零商务赞助和纯技术分享的原则,让更多的开发者受惠,搭建一个高价值的分享平台。

首次与我们见面的将是——SDCC 2017之大数据技术实战线上峰会,将于2017年10月14日召开,本次线上峰会秉承干货实料(案例)的内容原则,邀请了圈内顶尖的布道师、技术专家和技术引领者,共话大数据平台架构、优化提升大数据平台的各项性能、Spark部署实践、企业流平台实践、以及实现应用大数据支持业务创新发展等核心话题。

日前,大数据技术实战线上峰会也公布了首批的讲师和议题,接下来请看:

董西成 hulu

图片描述

hulu大数据架构部门负责人董西成

个人介绍: hulu大数据部门负责人,资深Hadoop技术实践者和研究者,拥有超过8年的大数据平台平台研发经验;《Hadoop技术内幕》系列丛书作者。

演讲主题: 《Impala+AtScale:构建企业级OLAP引擎》

主题介绍:大数据时代因数据的多样化和处理的复杂化,构建企业级OLAP引擎面临诸多技术挑战。尽管当前开源界提供了多种OLAP解决方案,但灵活性和性能方面均不能令人满意。

本次分享将介绍一种基于Impala和AtScale构建企业级OLAP引擎的方案,并进一步介绍了对Impala进行的源码内核级优化。

听众收益:

  1. 大数据OLAP引擎的主流方案及优劣对比;
  2. Impala+AtScale应用经验及优化;
  3. Impala源码级优化。

许鹏 携程

图片描述

携程机票高级研发经理许鹏

个人介绍:携程机票大数据基础平台Leader,负责平台的构建和运维。深度掌握各种大数据开源产品,如Spark、Presto及Elasticsearch。著有《Spark源码剖析》一书。

演讲主题:《携程机票大数据基础平台架构演进》

主题介绍:携程机票具有丰富的产品线,拥有海量数据,如何存储、分析和应用这些数据一直是部门痛点所在。携程机票大数据团队结合部门业务实际,广泛尝试各种大数据开源产品,在不断摸索中逐步形成稳定的大数据技术栈,该方案支持海量产线数据落地,亚秒级的实时分析和高效快速的交互式查询,更在此基础上结合业务提出了数据产品服务。

听众收益:

  1. 大数据解决方案;
  2. 开源产品的选型和运维;
  3. 大数据团队的技术能力需求和人员组建;
  4. 大数据团队和业务部门的结合。

张璐波 Intel

图片描述

Intel大数据部门高级软件工程师张璐波

个人介绍:目前就职于英特尔大数据部门,高级软件工程师,上海交通大学硕士。之前主要进行网络协议栈的研发工作,现专注于大数据平台架构、Spark Streaming和SQL。

演讲主题:《端到端、可扩展且高容错性的Structured Streaming流式处理技术进阶》

主题介绍: Spark Structured Streaming 流式处理模块作为Spark Streaming的改进版本,在Spark 2.0中引入并解决了以往流式处理在实际应用中遇到的一些问题,在实时数据处理方面发挥了重要作用。Structured Streaming是建立在Spark SQL引擎之上的端到端、可扩展且高容错性的流式处理系统,你可以像进行批处理那样进行流式表达式计算。

随着数据的不断到来,Spark SQL引擎会持续增量的进行计算并更新结果集。本次分享中,主要介绍Structured Streaming的一些基本概念和工作原理。

听众收益:了解Structured Streaming编程模型以及如何处理实时流中乱序以及延迟到达的数据,并对模块高可用性进行细致的分析。

符鹏飞 永洪科技

图片描述

永洪科技咨询部咨询总监符鹏飞

个人介绍:目前主要负责金融、制造行业数据咨询工作,并成功推进光大银行、民生银行、中信银行、美的集团、华为等众多大型项目落地,同时兼任永洪数据科学研究院讲师,为各行业数据分析爱好者提供数据分析、数据应用方面的培训及指导工作。

演讲主题:《数据技术的下一站——数据应用》

主题介绍:数据技术日渐成熟丰富,处理海量数据不再是企业的挑战,但大多企业都不知数据该如何利用才能对业务和管理提升真正带来价值。永洪基于自身的实践和探索,找出了一条解决之道。

听众收益:

  1. 业务用户:掌握数据分析技巧,开发百花齐放的数据应用;
  2. 管理层:如何通过数据应用驱动业务经营;
  3. IT技术:如何搭建大数据应用分析架构,如何体现IT资产?

汪木铃 蚂蜂窝

图片描述

蚂蜂窝大数据平台负责人汪木铃

个人介绍: 2014年至今负责蚂蜂窝数据采集、对接、数据产品的开发及整个大数据平台的架构设计、技术选型,专注于大数据工具链的定制开发及应用。

演讲主题:《蚂蜂窝大数据平台架构演进》

主题介绍:本次分享主要涉及蚂蜂窝大数据平台的架构设计、离线数据探索、实时数据探索、多维数据分析中Druid引擎引入的背景和带来的价值。

听众收益:

  1. 如何做离线数据探索;
  2. 如何做实时数据探索;
  3. 如何做多维度数据分析。

陈守元 阿里

图片描述

阿里集团计算平台事业部产品专家陈守元

个人介绍:阿里集团计算平台事业部产品专家,7年大数据工作经验,曾负责异构数据同步工具DataX产品和架构设计、阿里云流计算产品设计。

演讲主题:《阿里集团实时流计算平台Blink在阿里集团的应用实践》

主题介绍:本次分享将从阿里集团的大数据处理现状讲起,引出实时流计算在阿里集团几个典型应用,包括双十一大屏、ABTest、机器学习。阿里为应对超大规模海量数据,在Flink上面做了诸多技术优化,包括Yarn Scheduler Optimization、Incremental Checkpoint、ASynchronize IO。为了进一步实现实时流平台产品化,阿里集团为社区贡献了包括StreamSQL等核心功能。在集团内部,Blink提供了一站式流式SQL开发平台和拖拽式的在线机器学习平台,演讲中也会进行讲解。

主题介绍:

  1. 用户了解流计算在阿里集团的应用案例;
  2. 用户了解当前阿里集团在Flink上的重点技术/产品投入点;
  3. 用户了解阿里集团内部对于流计算的产品化。

王哲涵 京东

图片描述

京东大数据平台数据架构部架构师王哲涵

个人介绍: 2015年加入京东,期间在大数据平台研发部工作,目前负责京东大数据平台的架构与研发工作。

演讲主题:《Presto的服务治理与架构优化及在京东的实践与应用》

主题介绍: Presto是大数据adhoc查询的利器,京东对于Presto有较大封装及改造, 将其管理、部署、监控及自愈升级自动化,同时在性能上有大胆的创新尝试,对支撑高并发和缓存查询有较深的研究。

听众收益: Presto的服务治理与架构优化。

适应人群

  1. 对大数据技术感兴趣的学生、初学者,或者即将转型大数据领域的软件工程师;
  2. 本次峰会议题涵盖流处理、高可用、大数据平台架构、阿里集团实时数据流处理、Presto架构优化等;
  3. 本次峰会集结业界前沿领域的大数据专家,业界巨匠,触手可及。

大会官网:http://edu.csdn.net/huiyiCourse/series_detail/64


参会者须知:本次峰会将于上午9:00开始,请提前安排好参会当天的事情;每场的演讲QA时长为10分钟,你将有更多的互动交流。


每个人的成长曲线不同,有的人在研究生之时就已有相当知名的产品和框架,从而在接下来的工作中一路顺风顺水,有的人却需要经历一个又一个的坑才能成长,不管是前者的聪明高效,还是后者的笨鸟先飞,他们都是在不断迈步向前。不妨,我们停下脚步留心一些同行,以激励自己更好地前行。

多年品质SDCC还会在9月23日召开区块链技术实战线上峰会,目前嘉宾已经全部到位,你将会看到这些大牛嘉宾:智链ChainNova CTO谢文杰 、IBM资深架构师、庄鹏、万达网络科技集团高级总裁助理兼首席架构师蔡栋、本能区块链CTO、《白话区块链》作者蒋勇、矩阵元架构师邓福喜等老师,共话区块链技术栈架构与性能(架构与跨链操作)、智能合约安全、分层评测区块链项目难点与策略、贴近云计算的下一代区块链平台、区块链+AI等热门话题。


与此同时,除了大数据和区块链,你也将会看到人工智能、前端、容器、移动开发等SDCC优秀专题线上展,敬请期待。

一站式干货强势来袭,热门话题一网打尽,更多精彩尽在SDCC 2017优秀专题线上展。技术长路,道法万千,我们已经备下了技术华宴,带上你的“想法”,带上你的“求索之心”,在接下来的日子里期待与你相约。

本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系:hwhale#tublm.com(使用前将#替换为@)

SDCC 2017优秀专题线上展第一站:大数据技术实战峰会首解密 的相关文章

  • 上下文工程:基于 Github Copilot 的实时能力分析与思考

    上个月在计划为 AutoDev 添加多语言支持时候 发现 GitHub Copilot 的插件功能是语言无关的 通过 plugin xml 分析 便想研究一下它是如何使用 TreeSitter 的 可惜的是 直到最近才有空 研究一下它是如何
  • 【转】IE命令行参数

    k参数可以让IE工作在全屏方式下 slf参数会让IE连接到默认的主页 new开新的IE进程 channelband 收藏夹 nohome 无显示 blank空白页面也不显示 remote参数可以在Unix平台上启动另一个IE进程 v参数会显

随机推荐

  • springBoot实现统一结果封装、统一异常处理

    springBoot统一结果封装 统一异常处理 统一结果封装 目的 由于现在大部分公司项目都是前后端分离架构 为了联调方便统一后端数据返回格式 统一结果封装 实现 统一返回结果实体类 统一结果封装 Data public class R p
  • sqlite "replace into"的用法

    http blog sina com cn s blog 590be5290102vulh html 举例说明 建表并插入几条记录 CREATE TABLE test id INTEGER PRIMARY KEY name text age
  • springboot的脚手架搭建步骤

    SpringBoot脚手架搭建及运用 Max伏虎的博客 CSDN博客 springboot脚手架
  • Window 系统生成 Git SSH key

    当我们使用github或者bitbucket等仓库时我们有可能需要ssh认证 所以需要生成他的ssh key 1 首先你要安装git工具 下载地址 https git scm com downloads 2 右键鼠标 选中 Git Bash
  • VCRUNTIME140_1.dll丢失是怎么回事,如何修复VCRUNTIME140_1.dll缺失?

    VCRUNTIME140 1 dll是什么文件 它为啥会丢失呢 应该很多小伙伴对这问题都比较疑惑吧 毕竟有时候电脑突然弹出一个VCRUNTIME140 1 dll文件丢失 无法继续执行 面对这种提示都是一脸懵逼的 今天我们就来聊聊VCRUN
  • Kafka可视化平台EFAK搭建及使用

    文章目录 1 EFAK可视化平台介绍 2 搭建EFAK可视化平台 2 1 安装JDK环境 2 2 安装MySQL数据库 2 3 下载EAK二进制安装包并部署 2 4 配置EFAK连接Zookeeper集群 2 5 调整Eagle启动文件中的
  • 线程同步及互斥锁

    线程同步的概念 线程同步 指一个线程发出某一功能调用时 在没有得到结果之前 该调用不返回 同时其它线程为保证数据一致性 不能调用该功能 线程同步的例子 创建两个线程 让两个线程共享一个全局变量int number 然后让每个线程数5000次
  • 使用 ffmpeg 转换视频格式

    ffmpeg 是 nix 系统下最流行的音视频处理库 功能强大 并且提供了丰富的终端命令 实是日常视频处理的一大利器 实例 flac 格式转 mp3 音频格式转换非常简单 ffmpeg i input flac acodec libmp3l
  • 【Prometheus】“discovery manager scrape“ discovery=file msg=“Error reading file“ path=/dir err=“\“labl

    Prometheus discovery manager scrape discovery file msg Error reading file path dir err lable name is not a valid label n
  • 爬虫之JS解析,Python模拟JS代码运行。(附带模拟人人网登录案例)

    六 JS解析 1 定位js文件 1 通过initiator定位到js文件 2 通过search搜索关键字定位到js文件 3 通过元素绑定的事件监听函数找到js文件 Event Listeners 注 三种方法不能保证每一种都能找到js文件
  • 微信小程序与低功耗蓝牙通信-往硬件端发送数据(三)

    准备工作 软件 微信小程序 硬件 蓝牙设备 hc 09 单片机 stm32 微信小程序往硬件端发送数据 对应的函数是wx writeBLECharacteristicValue 他的参数是 对应的下面的参数获取有2种获取方式 1 通过硬件的
  • WebSocket不同版本的三种握手方式以及一个Netty实现JAVA类

    一 WebSocket不同版本的三种握手方式 WebSocket是HTML5中的新特性 应用也是非常的广泛 特别是用户WEB端与后台服务器的消息通讯 如阿里的WEBWW就是使用的WebSocket与后端服务器建立长连接进行的通讯 目前Web
  • RAM IP Core

    官方文档 ZYNQ 存储资源指导手册 DS109 RAM 全称 Random Access Memory 随机存取存储器 随时将数据写入任意指定地址的存储单元 或从任意地址读出数据 读写的速度是由时钟频率决定的 RAM主要用于存放程序运行的
  • mysql 分布式 hbase_分布式数据库 HBase(详解)

    一 概述 1 从BigTable说起BigTable是一个分布式存储系统 总的来说 BigTable 具备以下特性 支持大规模海量数据 分布式并发数据处理效率极高 易于扩展且支持动态伸缩 适用于廉价设备 适合于读操作不适合写操作 2 HBa
  • val()、html()方法改变元素值后,元素change事件无效解决方案

    原因 Change事件触发有两个必要条件 值改变 失去焦点 解决方法 改变值的同时 1 手动触发change事件 input val change input val trigger change 2 手动触发blur事件 input va
  • C++11 之 auto & decltype

    文章目录 auto decltypes auto 和 decltype 的配合 返回值类型后置 关于 c 11 新特性 最先提到的肯定是类型推导 c 11 引入了 auto 和 decltype 关键字 使用他们可以在编译期就推导出变量或者
  • 【Python秒杀脚本】淘宝或京东等秒杀抢购

    文章目录 一 环境 二 安装 三 淘宝秒杀脚本 四 京东秒杀脚本 五 总结 六 零基础小白的Python学习资源总结 一 Python所有方向的学习路线 二 Python课程视频 三 全套PDF电子书 四 清华编程大佬出品 漫画看学Pyth
  • GT1151多点触摸屏例程

    include
  • python连接hive_python连接hive

    参考 https blog csdn net a6822342 article details 80713652 简单 https www zhihu com question 269333988 复杂点的 方法一 ali bigdata
  • SDCC 2017优秀专题线上展第一站:大数据技术实战峰会首解密

    SDCC始创于2007年 十年长空 历久弥新 2016年 SDCC已分别在上海 深圳 成都 杭州 北京五地举办系列峰会 广受当地开发者欢迎 其中 北京作为年度收官之作 聚焦最前沿技术成果 汇聚年度最强实践案例 为中国软件开发者们呈献了一份年