大会介绍

Elastic 中国开发者大会 2016(Elastic{ON} Dev China 2016)是由 Elastic 官方在中国举办的第一次开发者大会,主要围绕 Elastic 的开源产品: Elasticsearch、Logstash、Kibana 和 Beats,探讨在搜索、数据实时分析、日志分析、安全等领域的实践与应用。

会议日程

日期 时间  日程安排
12月10日
周六
08:30-09:15  开始签到
09:15-09:35 《开场致辞》 何致伟@Elastic
09:35-10:05 《From ELK to Elastic Stack + Ingest》 曾勇@Elastic
10:05-10:35 《Kibana 5.0: The Window into the Elastic Stack》 Rashid Khan@Elastic
10:35-10:55 《X-Pack 5.0: Extending the Elastic Stack》 王德成@Elastic
10:55-11:15  茶歇/短休
11:15-11:45 《基于Kibana和ES的苏宁实时日志分析平台》 彭燕卿@苏宁
11:45-12:15 《ES 在电子银行的安全应用》 李学辉@Hansight瀚思
12:15-13:00 《基于Elasticsearch搜索云服务》 张乐雷@大众点评
13:00-14:00  午餐
14:00-14:20  集体合影
14:20-15:05 《Elasticsearch在移动病毒侦测领域应用那些事儿》 李啸@趋势科技
15:05-15:35 《Elasticsearch加速SparkSQL查询》 李振炜@奇虎360
15:35-16:05 《基于Elasticsearch的斗鱼搜索服务实现》 白凡@斗鱼
16:05-16:25  茶歇/短休
16:25-17:10 《58到家ES服务化实践》 张家杰@58到家
17:10-17:40 《packetbeat抓包 辅助服务治理监控服务质量实战》 秦强强@折800
17:40-18:10 《Baidu对Elasticsearch的优化改进》 高攀@百度
18:10-18:25  大会结束

嘉宾介绍(排名不分先后)

Rashid Khan

Rashid Khan

Rashid is the creator of Kibana, the open source analytics interface for Elasticsearch.
He wrote Kibana to solve the data problems he encountered over the course of a decade in operations.
His recent work includes Timelion, the time series computation and visualization work pad now available in the Kibana core.
曾勇

曾勇

曾勇(Medcl), Elastic开发工程师与技术布道师, 是Elasticsearch国内首批用户。
自2010年起就开始接触Elasticsearch并投入到生产环境中使用,并编写过一系列的中文处理相关的插件,是Elasticsearch中文社区发起人,筹办了一系列线上线下的Elasticsearch技术分享与交流活动。
出于对Elasticsearch的喜爱,目前已全职加入Elasticsearch项目背后的Elastic公司。
何致伟

何致伟

何致伟(Scott Ho),現任Elastic亞太區銷售總監,負責大中華區和南亞區內Elastic的業務推廣和市場開發等事宜。
在加入Elastic之前在SAP和Pivotal等等跨國軟體供應商從事不同業務拓展, 亦協助過不同跨國軟體企業開拓新市場。
彭燕卿

彭燕卿

目前就职于苏宁云商IT总部云事业部监控研发中心技术副总监,工作地点南京。
9年软件研发经验,先后从事了SOA系统开发、苏宁易购等大型网站的性能分析调优、监控平台、等系统研发和架构工作,苏宁双11等大促保障工作。
目前主要负责苏宁云迹产品线 系统架构、产品设计及技术管理工作,为苏宁IT系统的高效稳定运行提供强有力的保障。主要专注于APM以及elasticsearch等实时大数据分析计算领域。
秦强强

秦强强

工作经历: 曾做过业务开发, BI, 大数据, 现在在折800后端部门负责基础架构工作。
关注领域: 技术架构, 如何赚钱, 产品设计, 动漫/猎奇漫。
王德成

王德成

William is regional Elastic support engineer.
Before joining Elastic, William used elasticsearch to solve mobile and infrastructure big data problems such as China SMS spam, Australia SMS mobile revenue leakage and DNS attacks.
张乐雷

张乐雷

技术专家,10年软件从业经验,曾就职于亚信软件,从事CRM产品研发,2015年加入美团大众点评。
目前从事基础组件、基础架构、解决方案等相关工作,团队推出了全公司统一搜索服务,2016年底前预计可接入上50+搜索集群,管理300+的机器资源。
张家杰

张家杰

58到家后端高级工程师,目前负责58到家App灰度发布,日志收集中心,通用搜索服务等基础服务和通用平台,有着丰富的后端架构经验。
曾任58同城心宠技术负责人,负责心宠业务整体技术架构,从零搭建商品的列表详情页,商品发布系统,运营管理后台,微信平台、线上交易系统等。
李学辉

李学辉

瀚思安信技术总监,Apache CloudStack Committer, CloudStack 中国社区创办人;曾发起并合作编写《CloudStack 入门指南》。HCAHD(Hortonworks Hadoop 2.0)认证开发者及管理员。目前主要从事大数据金融安全方向的研究和产品开发。
平时爱好:各种球类,会不会玩都喜欢;喜欢动漫;近半年喜欢跑步,游泳。
李振炜

李振炜

硕士就读西安电子科技大学,研究方向为图像识别,熟悉机器学习算法;
2015年毕业之后,入职奇虎360,负责Spark平台优化与维护,经历了Spark在360整个发展;
推动搜索,广告,安全等业务部门的机器学习和数据挖掘业务稳定运行在Spark平台;
主导完成了360所有业务部门Hive作业向Spark的迁移;
主导了基于Elasticsearch的SparkSQL外部索引和全文检索开发。
熟悉Spark源码,有丰富的Spark性能优化经验,对机器学习,分布式计算有深入研究。
白凡

白凡

本人白凡,热爱代码,研究源码,研究开源框架,熟悉ElasticSeach,ELK。
上海海洋大学硕士毕业,学成后便回到武汉工作,进入斗鱼网络科技有限公司,开始从事斗鱼搜索服务搭建,早期研究lucene,solr,最初对ES仍存怀疑态度,但后来见其社区广,版本迭代快,遂开始预研。
第一个基于ES的线上搜索项目是斗鱼鱼吧搜索,该项目类似于斗鱼的论坛,涉及到大量的分词检索,因此,采用了ES+IK。上线后,效果明显,且服务器压力,负载均很稳定,便逐渐在其他项目推广开来,斗鱼主站,鱼秀,移动端,......查看全部点播搜索等等。
因此,本人也算Elastic在斗鱼的推广者,再后来不仅搜索服务,部分全站日志收集,实时监控,也采用了ELK体系。去年,有幸参加了Elastic上海区的meetup,收获良多,与众开发者交流学习,实属愉快。今朝又有幸分享自己的ES成果,倍感荣幸。
李啸

李啸

曾经供职于百度, 小米科技,华为南京研究所,从事大规模分布式队列,KV存储,流式反作弊,广告传输系统,小米云平台,华为中间价(高性能jetMQ)的开发运维工作;
目前加入趋势科技(中国)南京研发中心,任职高级研发工程师,从事移动安全专家系统开发工作。目标是打造一套业界top one的海量移动病毒分析侦测平台。
目前我们team主要从事对Android/ios/Mac平台的病毒样本分析研究工作,作为工程团队的我们,主要致力于提供一套分布式移动病毒分析,侦测系统。并且在探索构建一套基于Elasticsearch的......查看全部规则引擎系统,旨在为公司提供一套病毒分析,检索,情报收集的基础平台。
同时,我们team也在探索将service容器化,尝试使用基于Microservice的交互架构,并尝试将Kubernetes应用于Docker实例的管理,以充分利用服务器资源和配置隔离。
高攀

高攀

百度大数据部高级工程师,专注OLAP、OLTP大数据分析处理技术,负责百度Elasticsearch的开发与维护。

演讲主题介绍(按演讲顺序)

何致伟

何致伟

Elastic,亞太區銷售總監
9:15-9:35
开场致辞
Opening keynote。
曾勇

曾勇

Elastic,Elastic开发工程师与技术布道师
09:35-10:05
From ELK to Elastic Stack + Ingest
From ELK to Elastic Stack + Ingest
Rashid Khan

Rashid Khan

Elastic,creator of Kibana
10:05-10:35
Kibana 5.0: The Window into the Elastic Stack
Kibana 5.0: The Window into the Elastic Stack
王德成

王德成

Elastic,Support Engineer
10:35-10:55
X-Pack 5.0: Extending the Elastic Stack
X-Pack 5.0: Extending the Elastic Stack
彭燕卿

彭燕卿

苏宁,监控研发中心技术副总监
11:15-11:45
基于Kibana和ES的苏宁实时日志分析平台
实时分析日志是程序员定位问题非常重要的环节,从最原始的SSH到主机tail grep日志文件到现在的ELK全套解决方案,从安全性及效率上都是质的提升。
目前苏宁在ELK的基础上搭建云迹实时日志分析产品,提供应用、web、防火墙、中间件等日志的实时检索、统计分析、告警。为苏宁1000+系统提供日志的实时检索分析服务。
在本演讲中,将和大家分享这套系统从无到有的一些技术架构演变,ES使用过程中遇到的坑及调优,Kibana二次开发等。
李学辉

李学辉

Hansight瀚思,技术总监
11:45-12:15
ES 在电子银行的安全应用
随着手持设备的不断普及,越来越多人在日常生活中选择使用便利的电子银行,黑客亦如此,总是紧盯这块蛋糕。不管哪家银行,只要在做网上银行系统,就得面对每天来自世界各地的恶意访问,虽然金融体系有很完善的安全管控机制,但总会有一些恶意的访问成功登入系统,并且其中一些造成储户损失。
此次主题旨在介绍如何在现有安全管控的基础上,通过大数据分析的手段来发现潜在的恶意访问,从而进一步采取行动,避免不必要的损失。
张乐雷

张乐雷

大众点评,技术专家
12:15-13:00
基于Elasticsearch搜索云服务
搜索云平台是什么?
1、是一个搜索的基础设施支撑平台,为部署、运行、监控告警、扩容、研发支持等相关的操作进行全生命周期支撑。
2、是一个面向开发者的搜索开放平台,为开发人员提供开发技术、部署个性化插件、扩容、管理等技术支持,在平台上完成一系列管理操作。
3、是一个分布式的、弹性的搜索计算平台,支持机器资源分布在不同的业务线,业务线仍自己运维,平台上仅提供了开发、运维等一系列的工具套件,也支持小业务量场景的机器资源的统一管理。
4、是一个支持多搜索引擎的平台,支持Elasticsearch、支持solr,各有优势,都有各自领跑的场景,我们不会过度依赖某个引擎,目前先支持Elasticsearch,但是技术趋势都会跟进,未来可能提供屏蔽底层引擎细节的客户端产品。
5、是一个融合多种解决方案的平台,它不拘泥于某个技术优化点、某个分词、某个排名、某个缓存,而是从多租户、高可用、多技术整合、多写多查、用户体验等综合视角构建的解决方案平台。 搜索云平台建设思路是什么? 上不碰业务,下不碰数据。
李啸

李啸

趋势科技,高级研发工程师
14:20-15:05
Elasticsearch在移动病毒侦测领域应用那些事儿
目前移动应用越来越普及,与此同时,大量malware散布于互联网之中,我们需要构建一个病毒分析和检测的平台对大量样本进行分析和检测来protect end user免受病毒的侵扰。
分享主题将围绕elasticearch在移动病毒分析和检测领域的应用展开。
第一部分,介绍系统设计。介绍移动病毒侦测技术在我司的演进过程,介绍分析system的演进过程,逐步过渡到elasticsearch的特点和应用范畴,引入elasticsearch engine后带来的优势。分析移动病毒的特征,基于特征如何设计elasticsearch病毒特征库。如何使用rules来监控和检测病毒。
第二部分,介绍垮库查询系统。根据业务特点,我司的特征库存在分表分库现象,重点介绍如何根据业务特点设计proxy来做elasticsearch垮库查询以及性能优化。
第三部分,介绍elasticsearch集群运维相关。介绍elasticsearch运维,调优,监控,测试相关实践经验。
李振炜

李振炜

奇虎360
15:05-15:35
Elasticsearch加速SparkSQL查询
SparkSQL对查询的SQL,需要扫描全部的数据,然后获取满足查询条件的记录。如果在海量的数据中,命中的记录个数比较小,查询的时间主要在读取数据。
为了加速响应时间,我们对存储在hdfs上的海量数据的指定字段,建立索引,存储在Elasticsearch中;对于每一个SQL查询,提取出索引字段的查询条件,然后通过Elasticsearch得到满足条件的记录的路径,Spark直接读取记录,实现了海量数据的查询,秒级响应。
白凡

白凡

斗鱼,大数据工程师
15:35-16:05
基于Elasticsearch的斗鱼搜索服务实现
主要针对Elasticsearch在斗鱼主站、鱼吧、点播系统、移动端等搜索项目中应用及其性能调优,进行演讲介绍,具体内容包含以下几点:
1.斗鱼主站、鱼吧、点播系统、移动端等不同业务环境下,ES集群搭建、搜索接口调用、mapping创建及配置设置。
2.斗鱼搜索技术架构,接口采用Nginx处理一级缓存以及负责均衡,tomcat实现索引同步及搜索接口,以ES,MySQL,Redis为基础的数据存储。
3.斗鱼搜索服务缓存处理,高并发应对策略。
4.由于斗鱼网络科技有限公司的语言异构性,搜索集群如何处理数据同步。
5.斗鱼搜索基于Zabbix+ELK的监控环境搭建,日志收集。
6.以及在搜索开发过程中遇到的接口问题、集群环境问题,并发负载问题以及解决方法的分享。
7.以及未来对搜索服务规划,服务接口化,统一工程分化,docker化。
张家杰

张家杰

58到家,后端高级工程师
16:25-17:10
58到家ES服务化实践
对于公司的很多一线程序员而言,对于ES的认识和熟悉程度并不如传统的数据库。然而在很多业务场景中,ES有着传统数据库无法比拟的优势。
为了让更多的一线员工更方便的使用ES,对ES进行了服务化封装,使其使用更加方便。
秦强强

秦强强

折800,基础架构负责人
17:10-17:40
packetbeat抓包 辅助服务治理监控服务质量实战
1.为什么要做这件事: 这边希望终端出现问题时, 有较好的监控机制来第一时间发现, 定位并解决问题。
2.抓包方式实现服务质量监控的方案与传统的日志打点上报方案和调用链监控的对比, 以及选择packbeat抓包方案的考量。
3.packetbeat + sysdig + elasticsearch技术栈介绍, 与使用该技术栈实现服务消费端健康状况监控的原理和细节。
4.踩坑经验, 效果与权衡, 以及关于服务治理的一些反思。
高攀

高攀

百度,大数据部高级工程师
17:40-18:10
Baidu对Elasticsearch的优化改进
介绍百度版本Elasticsearch的多项改进:
1、增加分布式SQL查询层,兼容MySQL协议
2、增加权限管理系统
3、支持online schema change
4、引入DistributedLog解决脑裂和数据一致性问题
5、支持跨机房数据同步
6、支持多租户资源隔离

主办方

赞助商

合作伙伴

个人赞助

志愿者(排名不分先后)

廖石阳
廖石阳 PHP程序员,热爱开源技术,喜欢篮球。
刘宏伟
刘宏伟(panda) 美团程序员,喜欢摄影。
郝运来
郝运来 java服务端工程师。
龙翔
龙翔 北京木仓科技有限公司架构师,目前负责产品后端、数据分析、系统运维等项目的研发和团队管理。
许杰
许杰(琴剑蓝天) 爬山、游泳、code,热爱自然的小菜鸟!
杜宁
杜宁(martindu) 金融、法律背景的野生程序员,Elasticsearch爱好者,搜披露创始人。
马亚广
马亚广(小海马) 一个狂热的elastic技术栈,正在用机器学习影响排序的古筝男。
卞顺强
卞顺强(AlixMu) 热爱自由,热爱开源开放的新技术。
郑立强
郑立强 打不死的小强。
何富斌
何富斌 今年刚入职的技术小白,目前在猫眼电影从事Java后台开发。
马建成
马建成 从事互联网工作三年,高级工程师一枚。喜欢搜索技术,喜欢黑科技,目前在努力的learning。
杨华
杨华 目前就职于蓬景数字大数据部门,主要基于移动端运营商数据做大数据产品开发,热爱开源技术,Elasticsearch爱好者。
高向阳
高向阳 从事车联网行业3年有余,现做后端研发,热爱开源技术。消息中间件,ES 的开源技术的爱好者。
鞠超超
鞠超超 A newbie of BigData,Elasticsearch 是我带我走进大数据的第一个大数据开源框架,大爱ES。
周奇军
周奇军(cfuns) 复华控股数据中心高级工程师,喜欢并热爱开源技术,忠诚ES粉丝,最喜欢的一句话是:少唧唧,多动脑动手,一切用数据说话~

会议地址

北京海淀区海淀区知春路106号
皇冠假日酒店

地铁:海淀黄庄地铁站C1出口向东350米

大会资料

大会资料(演讲嘉宾PPT,视频回看录播,现场精彩照片等),请前往Elastic中文社区查看.

链接地址 https://elasticsearch.cn/article/122

前往查看

会务咨询

medcl@elastic.co

微信关注"Elastic中文社区"公众号,获取直播地址
微信“扫一扫”分享给好友