访谈:Elasticsearch在360企业安全集团的应用实践

访谈:Elasticsearch在360企业安全集团的应用实践

00:00
49:38

欢迎来到Elastic社区电台的第十期节目,本期我们节目的嘉宾是来自于360企业安全集团的资深研发工程师张超和段军义,张超也是 Elasticsearch 相关新书《Elasticsearch 源码解析与优化实战的作者,让我们一起走进360企业安全的大数据团队,了解他们是如何使用 Elasticsearch 来解决公司内部和外部客户的各类需求,以及在实践过程中的经验分享。



时间线

00:20 - 嘉宾介绍

02:10 - 张超的新书《Elasticsearch 源码解析与优化实战》

04:21 - 360 与 Elasticsearch 的故事

05:25 - Elasticsearch 在 360 的应用场景介绍

07:30 - 产品选型与比较

08:20 - 有关版本升级的经验分享

12:00 - 典型场景的数据规模及配置情况

15:00 - 360 基于 Elasticsearch 的源码优化

21:00 - Frozen Index 与按需加载的需求

22:00 - Rollup 数据上卷的功能介绍

26:00 - 关于如何学习 Elasticsearch 的经验分享

29:00 - Elasticsearch 踩坑故事分享

37:00 - 关于入库与副本同步的改进问题讨论

30:30 - 关于异地多活与 CCR 的介绍

41:00 - 关于 Elasticsearch 相关职位的要求

42:00 - 360 团队对于 Elastic 未来的期望

43:50 - 有关目前 Elasticsearch 的痛点

46:00 - 有关 Rollover 的功能介绍

48:00 - 尾声


嘉宾

张超,大数据平台内核资深研发工程师,《Elasticsearch源码解析与优化实战》作者,就职于360企业安全集团,在基础大数据平台部门负责 Elasticsearch 内核研发工作,喜欢研究底层原理与系统优化,尤其喜欢解决深层次的问题。

段军义,大数据平台资深开发工程师,就职于360企业安全集团,主要负责Elasticsearch研发,喜欢研究Java、Linux、搜索相关技术。



主持人

Elastic 技术布道师,曾勇(Medcl)。


关于360企业安全
360企业安全创建于2012年,是360公司继个人安全市场后致力服务于政府企业机构网络安全与信息安全管理的安全产品业务线。作为中国互联网安全的领导者,360凭借在PC终端安全、移动终端安全、桌面安全管理、大数据分析、云安全等方面的深厚积累,成功推出各行业用户所急需的终端安全与管理一体化、未知高级威胁检测、移动终端安全管理、大数据安全分析等多项创新型企业安全产品。


关于 Elastic 社区电台
Elastic 开源社区举办的一款播客类节目, 邀请来自开源社区的用户,一起聊聊 Elastic 开源产品的使用案例、经验分享、架构变迁等等。


相关链接

[1] 360企业安全团队招聘链接:

https://m.zhipin.com/weijd/v2/job/767a79572d9307d31X183dq_FFA~

[2] Rollups

https://www.elastic.co/guide/en/elasticsearch/reference/6.5/rollup-apis.html

[3] Rollover

https://www.elastic.co/guide/en/elasticsearch/reference/6.5/indices-rollover-index.html#

[4] CCR

https://www.elastic.co/guide/en/elastic-stack-overview/master/xpack-ccr.html

以上内容来自专辑
用户评论
  • 0_mzpx1k

    https://mp.weixin.qq.com/s/I8nKKCnpSGyy_zonjYG1SA rollover 实战分享

  • 仗键天涯

    CCR以后是收费还是免费的呢?