首页 > 选课中心 > 分布式系统 > 【快班】大型电商分布式系统实践
【快班】大型电商分布式系统实践
此课程所属 【大数据攻城狮专业】专业,报名专业套餐,可享受0元学习特惠!点击了解详情
2017年09月25日 11点 共13课 ★★☆
开课时间 课程周期 难易度
招生中

立即报名
安全 架构 分布式 分布式系统 性能优化
课程介绍
在大型网站架构的演变过程中,集中式的架构设计出于系统的可扩展性、可维护性以及成本等多方面的因素考虑,逐渐被放弃,转而采用分布式的架构设计。分布式架构的核心思想是采用大量廉价的PC server,构建一个低成本、高可用、高可扩展、高吞吐的集群系统,以支撑海量的用户访问和数据存储,理论上具备无限的扩展能力。分布式系统的设计,是一门复杂的学问,它涉及到包括通信协议、远程调用,服务治理,系统安全、存储、搜索、监控、稳定性保障、性能优化、数据分析、数据挖掘等方方面面,而本课程将为大家一一进行介绍。
课程大纲
第一课
大型分布式系统概述
集中式、垂直式、分布式应用架构的变迁思路
SOA体系架构,服务化的演变
SOA的基础--rpc远程调用
--rpc与通信协议
--对象序列化方式的选择
--异构系统还是同构系统
--远程调用的实现方式,基于http协议的远程调用,基于tcp协议的远程调用

第二课
服务的路由和负载均衡
--为什么需要服务治理
--服务的负载均衡,复杂环境下负载均衡所面临的问题(负载不均、多机房)
--负载均衡算法及其扩展
--如何动态配置路由规则
--服务上线下线的动态感知
--客户端容灾方案的实现
--如何使用zookeeper实现服务路由和负载均衡
SOA架构所面临的问题

第三课
构建安全的分布式网站
常见的web攻击手段,xss、crsf、sql注入攻击、DDos攻击等等
面对攻击,应该如何防御,具体的防御手段
如何架构安全的网站,保障通信的安全
常用的安全算法的使用场景<1>
--校验数据是否被篡改,数字摘要
--加密传输内容,对称加密算法
--校验消息发送和接收方身份,非对称加密算法

第四课
构建安全的分布式网站
常用的安全算法的使用场景<2>
数字签名及其使用场景
数字证书及其使用场景
为什么需要认证
--签名认证的原理和实现
--摘要认证的原理和实现
为什么需要https协议,https协议能够带来什么
--https协议的原理解析
--使用tomcat部署https web
平台厂商所面临的问题及开放平台的出现
oauth协议解决了什么问题及oauth协议的适用场景

第五课
分布式系统基础设施之缓存
--缓存的使用场景
--数据一致性的保障
--缓存的负载均衡问题,雪崩效应的产生
--如何解决缓存的负载均衡问题
--缓存的强依赖及可靠性的解决
--memcache的介绍及使用
分布式系统基础设施之持久化存储
--IOE太贵,无法扩展,mysql+pc server节约成本
--pc server的承载有限,业务拆分的实施,mysql复制策略
--读的压力过大,读写分离
--单表数据量太大,则分表
--写入压力太大,则分库

第六课
分布式系统基础设施之持久化存储
--为提升性能,mysql的取舍
--海量数据,高并发写入,该hbase上场了
--hbase的api,row key的设计
--什么场景不适合使用hbase
--小而美的redis,多种数据类型,快速存取
--redis数据类型的介绍,使用案例
分布式系统基础设施之消息系统
--消息系统的使用场景,为什么要使用消息系统
--消息发送的两种模式,p2p和订阅
--消息发送的一致性和可靠性,最终一致性解决方案
--消息投递的顺序问题的产生及消息内容的去重

第七课
分布式系统基础设施之垂直化搜索引擎
垂直化搜索的使用场景
基于lucene的搜索引擎的基本原理
--构建索引
--索引更新与查询
--结果排序
--高亮
--中文分词
--索引优化
搜索引擎的扩展性
使用搜索引擎所面临的问题

第八课
保障分布式系统的稳定性
在线日志分析及常用命令
在线日志分析的技巧,sed、awk、shell的及使用
如何查看服务器当前的状态,服务器的监控指标解析
--load、cup利用率
--磁盘剩余空间
--网络traffic
--磁盘IO
--内存使用
--qps、rt
jvm gc对稳定性和性能的影响
如何分析jvm产生的gc日志

第九课
保障分布式系统的稳定性
集群监控及流量控制
--服务器的心跳检测实现方法
--大流量到来前,服务器的容量评估及应用水位的检测
--如何对流量进行控制
--服务稳定性的实现方案: 依赖管理&服务分级&优雅降级&开关&应急预案
高并发系统与普通系统的区别
--原子操作解决了什么问题
--jvm原子操作实现的原理(包含jvm源代码解析)

第十课
保障分布式系统的稳定性
如何设计高并发系统
--java的多线程同步及锁的机制
--分布式条件下数据一致性及系统可扩展性的保障
--高并发条件下减库存的案例
性能优化--找出系统的性能瓶颈
--找出前端的性能问题
--监测网页的响应时间
--监测java方法的响应时间

第十一课
性能优化--找出系统的性能瓶颈
--java应用程序gc日志的分析
--影响mysql数据库性能的因素
为什么要进行性能测试
性能测试的方法和工具
--apache ab
--apache jmeter
--load runner
性能环境和真实环境的差异
如何进行性能优化
--前端性能优化的实施
--java程序性能优化的实施

第十二课
如何进行性能优化
--数据压缩带来性能的提升,不同算法效率的比较
--使用缓存提升性能
--mysql数据库查询优化
--java应用程序gc优化
--使用新硬件提升性能
java应用常用的故障排查工具
--jps&jmap&jinfo&jstack
--mat
--VisualVM
--java应用典型问题

第十三课
数据分析对于大型分布式网站的意义
分布式文件系统
离线数据分析,mapreduce、hive
实时数据分析,storm
离线数据同步,Apache sqoop
实时数据同步,mysql的实现方案
数据报表能提供什么,报表系统的实现思路
授课讲师
某大型电商网站资深研发工程师,在网站分布式环境下耳濡目染,参与了众多业务系统的开发和架构设计工作,在分布式系统架构设计、高并发系统设计、系统稳定性保障等领域积累了较为丰富的实践经验,著有《大型分布式网站架构设计与实践》一书,曾在程序员上发表过《漫谈基于http协议的SOA架构》,《浅析HTTP平台的安全稳定性架构》两篇文章,对基于HTTP协议的SOA架构有深入研究,在系统稳定性保障方面有较为丰富的实践经验。
授课对象
希望从事互联网分布式网站应用开发的相关行业工作的开发人员及在校学生
课程试听
课程学费
学费:400元(固定学费:300元 + 逆向学费:100元)
新颖的课程收费形式:“逆向收费”约等于免费学习,课程收取300元固定收费 + 100元逆向学费,学习圆满则全额奖励返还给学员!
特别说明如下
本门课程本来打算完全免费,某位大神曾经说过“成功就是正确的方向再加上适度的压力”。考虑到讲师本身要付出巨大的劳动,为了防止一些朋友在学习途中半途而废,浪费了讲师的付出,为此我们计划模仿某些健身课程,使用“逆向收费”的方法。 在 报名时每位报名者收取400元,其中300元为固定 收费,另外100元是暂存学费,即如果学员能完成全部课程要求,包括完成全部的书面作业,则100元全款退回。如果学员未能坚持到完全所有的学习计划任务,则会被扣款。期望这种方式可以转化为大家强烈的学习愿望和驱动力!
课程授课方式

1、 学习方式:老师发布教学资料、教材,幻灯片和视频,学员通过网络下载学习。同时通过论坛互动中老师对学员进行指导及学员之间相互交流。

2、 学习作业:每课均有布置课后作业,学员完成书面作业后则可进入下一课学习。

3、 老师辅导:通过论坛站内信及邮件等多种方式与老师进行一对一互动。

4、 完成课程:最后一课作业交纳后,老师完成作业批改,即可完成课程并取回相应剩余的逆向学费。

联系我们
咨询Email :edu01@dataguru.cnedu02@dataguru.cn
课程入门讨论咨询QQ群:706821899(群内有培训公开课视频供大家免费观看)
咨询QQ: 点击这里给我发消息 点击这里给我发消息
您是否对此课程还有疑问,那么请 点击进入FAQ,您的问题将基本得到解答
全国统一咨询热线: 4008-010-006
最新技术热点、 最新行业资讯,最新培训课程信息,尽在炼数成金官方微信,低成本传递高端知识!技术成就梦想!欢迎关注!
打开微信,使用扫一扫功能,即刻关注炼数成金官方微信账户,不容错过的精彩,期待您的体验!!!

授课老师

陈康贤陈康贤
某大型电商网站资深研发工程师,在网站分布式环境下耳濡目染,参与了众多业务系统的开发和架构设计工作,在分布式系统架构设计、高并发系统设计、系统稳定性保障等领域积累了较为丰富的实践经验,著有《大型分布式网站架构设计与实践》一书,曾在程序员上发表过《漫谈基于http协议的SOA架构》,《浅析HTTP平台的安全稳定性  查看>>

其他快班课程

【快班】赢在大数据-人工智能的应用实践
【快班】【免费公开课】《数据科学入门手册》——DSX架构与部署
【快班】【免费公开课】数据科学无难事
【快班】【免费公开课】《Hadoop入门手册》之 虚拟机的安装和使用
【快班】【免费公开课】玩转数据艺术-数据展示技巧应用实战
【快班】【免费公开课】玩转数据科学——IBM DSX
【快班】【免费公开课】《Hadoop入门手册》——Apache Hadoop集群安装
【快班】【免费公开课】赢在大数据-数据化运营落地实战
【快班】大数据管理
【快班】Streams流计算引航公开课
【快班】抽样调查
【快班】LATEX公式排版系统引航
【快班】Watson Analytics数据分析应用实战公开课
【快班】数据陷阱解读
【快班】R七种武器之文本挖掘包tm
【快班】R七种武器之可视化JS库HTMLWidgets包
【快班】R七种武器之数据加工厂plyr
【快班】R七种武器之交互化展示包shiny
【快班】R七种武器之网络爬虫RCurl
【快班】R七种武器之数据可视化包ggplot2
【快班】R七种武器之金融数据分析quantmod
【快班】Java经验谈
【快班】Go语言实战编程
【快班】DB2 V11新特性全解析
【快班】DB2数据库引航公开课
【快班】STATA统计分析入门
【快班】初识正则表达式
【快班】perl语言入门
【快班】Scala语言入门
【快班】Puppet 运维自动化
【快班】Qt编程快速入门
【快班】数据治理及数据仓库模型设计
【快班】DevSecOps安全交付应用实战
【快班】JavaScript突击-从精通到项目实战
【快班】R语言魔鬼训练营
【快班】基于案例学习bash脚本编程
【快班】量化投资基础计算与模型
【快班】老板说服术之玩转数据展示
【快班】数据库系统实现技术内幕
【快班】Goldengate从入门到精通
【快班】Oracle 12C RAC集群原理与管理实战
【快班】Mycat从入门到精通
【快班】基于案例学SQL优化
【快班】深入理解Storm与大数据实战
【快班】Java魔鬼训练营
【快班】Excel数据分析师突击—从入门到精通到项目实战
【快班】自己动手实践神经网络
【快班】自然语言处理软件实验
【快班】应用系统架构优化方法与案例实战
【快班】Hadoop数据分析平台
【快班】数据分析与SAS
【快班】比特币
【快班】机器读心术之文本挖掘与自然语言处理
【快班】机器读心术之神经网络与深度学习
【快班】快速上手Jmeter性能测试工具
【快班】软件性能测试
【快班】软件自动化测试Selenium2
【快班】大数据必知的java基础
【快班】快速数据挖掘平台RapidMiner
【快班】R语言编程技巧
【快班】深入BI之Kettle篇
【快班】基于案例学Java服务器端程序设计
【快班】Scala从基础到开发实战
【快班】供应链物流—电商发展的“核”动力
【快班】详解SQL与PL/SQL
【快班】Oracle职业直通车
【快班】深度玩转Excel
【快班】Hadoop应用开发实战案例
【快班】大数据的Linux基础
【快班】机器学习
【快班】量化投资
【快班】SPSS数据分析入门与提高
【快班】Python数据分析
【快班】NoSQL与NewSQL数据库引航
【快班】大数据算法导论
【快班】大数据的矩阵计算基础
【快班】R语言数据分析、展现与实例
【快班】大数据的统计学基础

热招课程

◆ 区块链技术从入门到精通(第七期)
◆ 大数据的Linux基础(第22期)
◆ 深入浅出Git(第五期)
◆ 深度学习框架Keras学习与应用(第五期)
◆ DL4CV实战——构建基于深度学习的智能图像识别系统(第一期)
◆ 新技术革命风暴之AIOps(第一期)
◆ 【免费公开课】数据陷阱解读(第31期)
◆ ROS机器人操作系统实战(第四期)
◆ MySQL性能优化最佳实践(第六期)
◆ 机器学习(第24期)
◆ 【免费公开课】Python 的安装与部署(第一期)
◆ Web全栈开发理论与实践(第二期)
◆ python网络爬虫应用实战(第二期)
◆ Tensorflow工程师职场实战技(第一期)
◆ 从零入门金融业信贷风控算法(第一期)
◆ 【免费公开课】验模神器AMOS(第七期)
◆ 【免费公开课】OpenAI gym 安装教程(第一期)
◆ zabbix企业级实践(第五期)
◆ Spark大数据平台应用实战(第五期)
◆ 数据科学家养成:从零入门机器学习
◆ 金融的人工智能革命(第五期)
◆ 深入浅出设计模式(第三期)
◆ Python3入门到精通实战特训(第二期)
◆ 人脸识别90天速成特训班(第一期)
◆ 【免费公开课】企业级Hadoop大数据平台实践(第16期)
◆ Oracle DBA从小白到入职实战应用(第八期)
◆ 大数据算法导论(第16期)
◆ 左飞的机器学习十八般算法武艺详解(第五期)
◆ 实战Java高并发程序设计(第14期)
◆ 深度学习框架Tensorflow学习与应用(第七期)
◆ 【免费公开课】R七种武器之金融数据分析quantmod(第38期)
◆ 人工智能前沿系列之生成式对抗网络(第七期)
◆ Oracle SQL Tuning(DSI系列Ⅲ)(第二期)
◆ Python数据分析(第14期)
◆ 机器读心术之文本挖掘与自然语言处理(第12期)
◆ 深入浅出Spring(第七期)
◆ 让服务飞起来:实时计算及其应用(第五期)
◆ 【免费公开课】《Hadoop入门手册》——Apache Hadoop集群安装(第二期)
◆ 金融市场基础(第八期)
◆ Node.js项目实战:从编写代码到服务器部署(第六期)
◆ Python机器学习Kaggle案例实战(第七期)
◆ 黄美灵的Spark ML机器学习实战(第四期)
◆ OpenAI强化学习实战(第二期)
◆ 深入浅出Oracle(第九期)
◆ Python数据分析案例实战(第九期)
◆ R语言数据分析、展现与实例(第33期)
◆ 大数据必知的java基础(第十期)
◆ 股票投资高手武器系列之缠论系统(第二期)
◆ 【免费公开课】《Hadoop入门手册》之 虚拟机的安装和使用(第二期)
◆ python魔鬼训练营(第11期)
◆ ELKStack及Solr企业级搜索引擎实战(第九期)
◆ Oracle特殊恢复原理与实战(DSI系列)(第四期)
◆ Python金融投资分析实践(第八期)

GMT+8, 2018-7-20 16:33 , Processed in 0.223990 second(s), 35 queries .