ESCC#4全称:The 4th Elasticsearch China Conference, 是由elasticsearch中文社区每年定期举办的线下交流活动,今年已经是第四届了,会议围绕elasticsearch及周边产品和技术,如:kibana\logstash\beats\logging\nlp等相关领域及话题都可以进行讨论,只要是你认为可能会感兴趣的话题,都可以提交过来,分享嘉宾来自国内一线互联网公司,倡导干货接地气纯粹的技术交流.
日期 | 时间 | 日程安排 |
---|---|---|
10月17日 周六 |
08:20-8:50 | 入场报到 |
08:50-9:00 | 大会介绍 | |
09:00-09:10 | 主办方致辞 | |
09:10-10:00 | 高攀, 百度 《百度Elasticsearch大数据分析实践》 | |
10:05-10:55 | 凌霄, 新浪 《Sina ELK,从运维到服务之路》 | |
11:00-11:50 | 宋兵强, AdMaster 《ElasticSearch 在AdMaster社会化数据分析系统中的大规模实践》 | |
13:10-14:00 | 刘波涛, 芒果TV 《芒果TV ElasticSearch实践》 | |
14:05-14:55 | 饶琛琳, 新浪 《{{more}} Kibana 4》 | |
14:55-15:15 | 茶歇 | |
15:15-16:05 | Medcl, Elastic 《Analyzer101》 | |
16:10-17:00 | 张磊, BIGLog 《Elasticsearch应用在数据中心的实时协议分析和威胁检测》 | |
17:05-17:55 | 姜宁, OneAPM 《像玩乐高积木一样开发 ElasticSearch 应用》 | |
18:00-18:10 | 秦强强, 折800 《规模不大的es集群 在日志收集场景下的一些优化》 | |
18:10-18:20 | 于炳哲, 新浪微博 《ELK在bug定位追踪中的应用》 | |
18:20-18:30 | 唐锡男, 《基于元数据的DDoS预警》 | |
18:30- ~~ | 大会结束 |
1. ES在百度的发展 2. ES在百度的典型应用 3. 遇到的问题 4. 百度对ES的改进
百度大数据部高级工程师,先后在易车网,百度从事搜索引擎及分布式系统的研发工作。目前在百度负责ES的改进和推广。
ELK服务作为一个日志的解决方案,解决了大家在运维中日志集中管理,分析, 检索和可视化等多样化的需求,简单方便的实现也受到了广大互联网行业用户的推崇。 但是,当服务的规模不断扩大后,如何保证集群稳定性和性能,如何标准化日志的管理, 以及给用户提供简单更实用的产品还是有很大的挑战的。该演讲主要和大家分享新浪/微博在ELK的实践中从运维, 到平台建设,产品设计三个阶段的心得和感悟,以及集群规模从几台发展到50+台的过程中,我们遇到的问题和踩过的坑。
新浪数据智能平台ELK服务,微博多媒体下载SRE负责人。
ElasticSearch 作为一个优秀的全文检索和实时数据分析系统,在大数据分析方面扮演着愈加重要的角色。 本文重点介绍其在AdMaster社会化数据分析系统中的大规模应用,涉及系统架构、大规模索引构建、分词处理、查询优化以及一些运维经验, 希望起到一个抛砖引玉的作用,呈现ElasticSearch在大数据数据分析处理方面的冰山一角。
曾就职于百度基础架构部,现为AdMaster资深工程师, 负责社会化大数据研发。对分布式存储和计算系统有很强实践经验, 对大数据处理理解很深,研究方向为Hbase、Hadoop、Redis、ElasticSearch、MySql等系统。
1.芒果TV搜索方案选型(Sphinx->xapian-ES) 2.ES从0到1实践 3.ES在数据分析应用(nginx+kafak+logstash+ES)
负责芒果TV MPP(Mobile,PAD,PC)业务系统架构。ElasticSearch爱好者 09-11年 上海PPS网络公司 11年- 湖南卫视芒果TV。
Kibana开发组从去年4月开始重构新版,终于在今年发布了崭新的version 4.0。和version 3.1相比,从设计,操作,插件架构方面都有相当大的不同。 本次分享会跟大家聊聊Kibana4的新特性新用法,并以sankey实例,介绍在新版插件架构下,如何开发全新的visualize,server plugin等。
新浪微博系统架构师,负责手机微博的自动化运维和数据分析体系建设。
Analyzer?分词器?Tokenizer?filter?这都什么鬼? 什么情况下用什么分词器,搜索的时候又该选用哪种查询,搜索性能和它又有啥关系?配置为什么老是不成功?这些问题让Medcl告诉你。
Elasticsearch爱好者, Elasticsearch中文社区发起人。
网络安全问题是当下数据中心产业共同面临的挑战,传统安全设备的组合很难灵活应对当下数据中心的大流量、 细粒度、高实时、以及定制化的分析需求。 本议题将解析:如何在实际流量10Gbps的网络环境下, 构建一套企业级的高实时网络威胁分析系统,结合Elasticsearch的大数据搜索平台,秒级发现DDOS流量、 应用层安全攻击、精准统计用户层协议流量、甚至提供业务层的行为审计与取证,并保持整套架构的线性可扩展能力。
BIGLog创始人,专注于大数据与信息安全结合的研究与实践。
分享使用ES的一些经验。(闪电演讲)
折800 架构组工程师。
如何将文本检索的利器 ElasticSearch 与其他应用进行集成,进而实现比较复杂的业务逻辑呢? 这是大家在使用 ElasticSearch 时经常遇到的问题。Apache Camel 提供了消息路由引擎, 丰富的组件集成第三方应用以及企业应用集成模式DSL , 可以让大家像使用乐高积木一样搭建复杂的应用系统。 本次讲座将介绍如何将 Camel 以及 ElasticSearch 集成在一起,让 ElasticSearch 应用开发变得像搭建乐高积木一样简单。
OneAPM杰出工程师 姜宁,前红帽软件首席软件工程师,有十余年企业级开源中间件开发经验,有丰富的Java开发和使用经验, 函数式编程爱好者。从2006年开始一直从事Apache开源中间件项目的开发工作,先后参与Apache CXF、Apache ActiveMQ、 Apache Camel以及Apache ServiceMix的开发工作。2007年开始参与Apache Camel项目开发,目前是该项目的主要维护者, 对WebServices、Enterprise Integration Pattern、SOA、OSGi有比较深入的研究。
Elasticsearch和JIRA一起还能这么玩,非常有意思。(闪电演讲)
新浪微博研发工程师。
关于DDOS流量分析与Elasticsearch的使用经验。(闪电演讲)
某知名企业CEO。
大会PPT下载地址:
https://pan.baidu.com/s/1boF8Buf#path=%252FESCC%25234%252F%25E5%258C%2597%25E4%25BA%25AC%25E7%25AB%2599
下载