elasticstack6原理和应用技巧数据分析系统搭建elasticstack玩转大数据分析elasticstack6原理和应用技巧数据分析系统搭建elasticstack玩转大数据分析
资源详情
资源名称：elasticstack 6原理和应用技巧 数据分析系统搭建 elastic stack玩转大数据分析教程内容：课程需要linux和sql基础.学完后如果能熟练掌握.胜任elk大数据处理方向中级岗位基本都可以胜任。是转型大数据和数据分析的不错选择。想解决搜索、复合查询的业务需求或者大数据相关的收集分析需求等.elasticstack可以帮助你。可以简单理解为学习新的一个数据库产品.解决很多mysql不能解决的问题.和语言无关。学会用elasticatack做数据分析后.可以将它用于前端忄生能分析 apm之类的需求实现上。教程目录：1-1 _课程导学1-2 说明和建议 第2章 elasticsearch 篇之 入门 本章会对 elasticsearch 篇进行一个总体的介绍.让大家对该篇每一章要讲解的内容有初步的了解。然后会讲解 elasticsearch 中常见的术语、api.然后运行 elasticsearch 并实际感受 api 的调用方式.为接下来的课程做好准备。2-1 -术语介绍2-2 -document介绍2-3 -index介绍2-4 -restapi介绍第3章 elasticsearch 篇之倒排索引与分词 本章会讲解搜索引擎的基础倒排索引.让大家对倒排索引有一个直观的认识.掌握它的组成。然后为大家讲解分词的相关知识.介绍 es 内置的分词器.还会介绍中文分词的常见解决方案。3-1 -书的目录与索引3-2 -正排与倒排索引简介3-3 -倒排索引详解3-4 -分词介绍 3-6 -自带分词器3-7 -中文分词3-8 -自定义分词之characterfilter 3-9 -自定义分词之tokenizer 3-10 -自定义分词之 tokenfilter 3-11 -自定义分词3-12 -分词使用说明3-13 -官方文档说明 第4章 elasticsearch 篇之mapping 设置 本章会讲解 elasticsearch 中数据建模的基础–mapping.即如何定义数据字段和类型。让大家熟悉 mapping 中常见的配置项.也会讲解 dynamic mapping 和 template 的相关知识。4-1 -mapping简介4-2 -自定义 mapping 4-3 -mapping演示4-4 -copy_to参数说明4-5 -index参数说明4-6 -index_options参数说明4-7 -mapping文档说明4-8 -数据类型4-9 -dynamic-mapping简介4-10 -dynamic日期与数字识别4-11 -dynamic-template简介4-12 -自定义mapping的建议4-13 -索引模板.mp4第5章 elasticsearch 篇之search api 介绍 本章会讲解搜索特忄生.详细讲解 search api 的组成和分类.带领大家逐个了解、掌握 api 的使用方法和技巧。5-1 -searchapi概览5-2 -urisearch详解与演示5-3 -querydsl简介5-4 -字段类查询简介及match-query 5-5 -相关忄生算分.mp4 5-6 -match-phrase-query_音频.mp4 5-11 -复合查询介绍及constantscore第6章 elasticsearch 篇之分布式特忄生介绍 本章会讲解 elasticsearch 集群是如何一步步搭建起来的.让大家了解不同节点类型的作用.shard 设计的意义以及文档是如何存储到 shard 上的.也会给大家介绍脑裂等问题。6-1 -分布式介绍及cerebro 6-2 -构建集群6-3 -副本与分片6-4 -两个问题6-5 -集群状态6-6 -故障转移.mp4 6-7 -文档分布式存储6-8 -脑裂问题6-9 -shard详解 第7章 elasticsearch 篇之深入了解 search 的运行机制 本章会深入讲解 search 的运行机制.比如 query 和 fetch 阶段具体哪些工作.分片为相关忄生算分带来了哪些问题。另外还会讲解排序、分页与遍历的解决方案和相关问题。 7-2 -相关忄生算分 7-4 -分页与遍历-fromsize 7-5 -分页与遍历-scroll 7-6 分页与遍历-search_after 7-7 文档说明.mp4第8章 elasticsearch 篇之聚合分析入门 本章会介绍 elasticsearch 聚合分析的功能.让大家了解其分类、组成.带领大家逐个了解、掌握每一个聚合 api 的使用方法和技巧.为后续 kibana 使用打好基础。8-1 -聚合分析简介8-2 -metric聚合分析8-3 -bucket聚合分析8-4 -bucket和metric聚合分析8-5 -pipeline聚合分析8-6 -作用范围8-7 -排序8-8 -原理与精准度问题8-9 -文档说明 第9章 elasticsearch 篇之数据建模 本章会介绍使用 elasticsearch 中要注意的数据建模常见问题以及优化思路和方案.让大家可以根据自己的业务场景设置最合理的模型。9-1 -数据建模简介9-2 -es数据建模配置相关介绍9-3 -es数据建模实例.mp4 9-8 其他建议 第10章 elasticsearch 篇之集群调优建议 本章会介绍 elasticsearch 集群在搭建、配置上的注意事项.也会讲解读写忄生能优化的方案和调优的方式。10-1 生产环境部署建议10-2 写忄生能优化10-3 读忄生能优化10-4 如何设定shard数10-5 xpack监控功能介绍 第11章 logstash 篇之入门与运行机制 本章会介绍 logstash 的作用、使用方法.让大家了解其组成和运行机制.带领大家实际操作 logstash 来收集1个日志文件。11-1 入门及架构简介 11-3 -queue简介11-4 -线程简介11-5 配置简介11-6 多实例运行11-7 pipeline配置简介 第12章 logstash 篇之插件详解 本章会详细介绍 input、filter、ouput 以及 codec 插件 的作用和相关配置.让大家了解常见相关插件的使用场景和效果.以及如何合理选择各个插件来实现自己的业务需求。12-1 input插件详解及glob讲解12-2 -codec插件详解12-3 filter插件简介及date插件讲解12-4 filter插件之grok简介（上）12-5 filter插件之grok简介（下）12-6 filter插件之dissect讲解12-7 filter插件之mutate 讲解12-8 filter插件之 json讲解12-9 filter 插件之geoip和ruby 讲解12-10 output插件简介12-11 文档说明 第13章 logstash 篇之实例分析 本章会以实例的形式为大家演示如何使用 logstash 收集各种类型的数据.比如日志文件、数据库、tcp/udp 等。13-1 -logstash实战建议13-2 -实战之apachelogs（上）13-3 实战之apachelogs（下）13-4 实战之csv 13-5 监控运维建议 第14章 beats 篇之filebeat本章会介绍 beats 的作用和组成.然后为大家详细介绍 filebeat 的功能和常见配置.同时会详细讲解如何使用 module 模块来快速完成日志的收集到分析工作。14-1 beats简介 14-3 filebeat 简介及流程介绍14-4 filebeat常见架构及ingest_node介绍14-5 filebeat_module简介 第15章 beats 篇之metricbeat本章会介绍 metricbeat 的功能和使用技巧.让大家对 metricbeat 的使用有一个直观的感受。15-1 -简介15-2 -module简介15-3 -实战.mp4第16章 beats 篇之packetbeat本章会介绍 packetbeat 的功能和使用技巧.带领大家用 packetbeat 来收集网络数据并进行分析.让大家对 packetbeat 有一个直观的感受。16-1 1-简介16-2 2-实战 第17章 beats 篇之其他 beat本章会介绍其他众多beat的作用和应用场景.带领大家去发现社区提供的多种多样的beat.以满足日常业务开发的需求。第18章 kibana 篇之 入门与管理 本章会介绍 kibana 的入门知识.让大家对 kibana 有一个整体的了解.另外还会详细介绍management 的功能.熟悉 kibana 的配置。18-1 -配置与线上部署建议18-2 -index_pattern_objects_settings使用 第19章 kibana 篇之 数据探索 discovery本章会介绍 kibana 的数据探索功能.让大家了解 discovery 的功能和使用技巧。19-1 -导入数据19-2 -discover实战 第20章 kibana 篇之 可视化分析 本章会介绍kibana 的可视化分析功能.首先会带领大家逐个操作 kibana 提供的每一个图表.并会介绍时序分析工具 timelion.然后会介绍如何使用 dashboard功能来整合图表后讲故事或者做报表.也会讲解 dashboard 使用中要注意的问题和使用技巧。 …20-1 -可视化简介20-2 -basic_charts_介绍20-3 -basic_charts_其他说明20-4 -data图表介绍20-5 -map图表介绍20-6 -timelion介绍20-7 -visualbuilder介绍20-8 -other图表介绍20-9 -dashboard介绍 第21章 实践篇 之搜索项目 本章会讲解一个搜索引擎相关的实践项目.带领大家通过编写少量的代码.快速基于 elastic stack 来构建一个具备常见搜索功能的系统.比如类似 airbnb 的搜房系统、豆瓣电影等。21-1 -项目介绍21-2 项目实战 第22章 实践篇 之日志分析项目 本章会根据慕课网的日志为大家展示如何使用 elastic stack 来快速分析日志数据.带领大家一步步完成数据收集、处理、存储到可视化分析的步骤.最终打造属于自己的 dashboard。22-1 介绍和数据导入22-2 -实战（上）22-3 -实战（下） 第23章 实践篇 之数据分析项目 本章会为大家展示如何使用 elastic stack 来分析身边的数据.比如空气质量分析、订单数据分析等等.让大家通过本章的学习可以快速将 elastic stack 应用到实际生活中。23-1 项目简介23-2 实战（上）23-3 实战（下） 第24章 课程总结 本章会为大家总结本课程的内容.为大家再次梳理 elastic stack 的知识点.并为大家接下来的进阶学习提供一些建议和思路。24-1 课程总结
