C_C++Linux后台服务器开发高级架构师学习知识路线(架构师篇)

上篇跟大家分享从Linux开发工程师-Linux后台开发工程师的学习路线,知识点总结。

今天跟大家分享Linux高级互联网架构师学习路线及知识点总结:

首先想要成为高级架构师你得先熟练掌握上篇的知识点内容、然后再来学习掌握以下知识点内容。

一:源码分析

源码阅读能力是提升技术必不可少的途径

1、Nginx源码

包括:Nginx基础架构、HTTP架构、 进程间的通信机制、Nginx高级数据结构、slab共享内存、upstream机制设计

2、Redis源码

包括:Redis存储系统原理、数据模型与键值映射、内存操作与磁盘同步、主从同步,原子操作、底层IO实现解析

3、ZeroMQ源码

包括:消息模型 发布订阅/推拉模型、通信协议 inproc/ipc/tcp/pgm、性能分析与经典MQ对比、底层网络通信实现机制、zmq系统架构与实现原理

二:中间件开发

要有造轮子的能力,也要有不造轮子的觉悟,SDK是高级开发必须要有的封装能力

1、高性能组件

包括:如何设计内存池、高并发场景下的消息队列、协程框架的实现、手写线程池、异步请求池、连接池、

2、高并发网络IO

包括:select,poll和epoll模型的区别、 Linux系统IO模型、理解Linux 服务器高并发编程、网络接入层架构设计、你必须懂得Epoll玩法

3、并发性

包括:多线程与线程安全、事务的隔离级别、公平锁&非公平锁、CopyOnWrite容器、悲观锁&乐观锁&CAS&ABA问题、 事务ACID特性

4、Web服务

包括:反向代理Nginx、最广泛的web服务器 Httpd、高性能 Web 平台OpenResty

5、定时调度

包括:触发器按时启动原理、Linux定时任务cron配置

6、消息队列

包括:消息总线VS消息队列、Redis 消息推送、如何保证消费者接收消息的顺序

7、分布式定时调度 Opencron

8、Web安全

包括:CSRF原理及防范、高级Dos攻击-Hash碰撞攻击、脚本注入文件上传漏洞、SQL注入、XSS攻击原理与解决方案

9、搜索引擎

包括:搜索引擎原理、分布式全文搜索 ElasticSearch、全文检索 Solr、基于MySQL,PostgreSQL全文检索 Sphinx、全文检索引擎工具包 Lucene

10、网络协议栈

包括:tcp/udp/ip/eth、多进程实现高并发、滑动窗口、延迟确认、定时重传、流量控制、tcp握手挥手

三、集群

必须要有的产品级技能。

1、MySQL集群

包括:MySQL Cluster 评估指南、读写分离 分库分表、Binlog机制分析、健全性检查与故障排除、数据模型与查询设计

2、Redis集群

包括:Redis Cluster方案、节点自动发现、master/slave 选举,集群容错、ASK转向/MOVED转向机制

3、FastDFS集群

包括:tracker与storage节点、文件上传/下载测试、fastdfs-nginx-module的原理、fastdfs的实现原理

4、K8S集群

包括:K8S核心组件、无缝对接新应用、快速部署应用与扩展、自动部署、管理容器化

5、Nginx集群

包括:Nginx的实现原理、经典应用场景、高可用方案的实现机制、LVS与Nginx集群

6、 MongoDB集群

包括:高可用的MongoDB集群方案、文档管理机制与实现、配置分片的表与片键、MongoDB集群环境部署

7、Zookeeper集群

包括:zookeeper的概念与集群环境部署、zk的特性与数据结构、原理及其内部选举机制、zk集群实现机制

四:Linux系统

Linux是每个工程师都会讨论的话题

1、环境编程

包括:系统文件操作 一切设备接文件、信号量 mmap 共享内存、 系统时间 时间戳 定时器、网络IO编程 epoll机制、锁机制 互斥锁 spinlock 条件变量 原子操作、进程/线程 数据同步机制

2、系统运维

包括:系统日志管理与配置、服务器环境搭建与配置、集成化工具安装、shell命令 文件操作

3、内核编程

包括:跨越进程的障碍 内核通信组件实现、内核配置与编译、网卡驱动的实现

五:音视频

世界因声音与图片而精彩,音视频技术也是互联网技术栈必备技能

1、流媒体

包括:音视频编码原理详解、AAC, H264主流编码格式、H264视频格式文件走读、 WebRTC音视频、WebRTC交互机制详解、X264编码详解

2、编解码

包括: ffplay音视频同步分析、ffplay控制原理分析、实现WebRTC点对点通话、RTMP与RTSP编码分析、播放器开发基础

六:性能与测试

程序优化是所有程序产品必不可少的话题

1、理解性能优化

包括:容量评估 平均QPS 高峰QPS 单机QPS、CDN网络加速原理、连接池的性能优化、性能优化方法论

2、MySQL调优

包括:理解MySQL底层原理 B+Tree机制、索引优化揭秘、 SQL语句优化、SQL执行机制详解

3、测试理论

包括:深度解析 TDD 测试驱动开发、全链路压测经验、Nginx根据IP进行灰度发布 A/B Test、真实流量测试工具 tcpcopy、单元测试minUnit

4、Linux调优

包括:内核代码组织架构、系统IO参数调优配置、网络协议栈参数配置、内核代码编译与内核更换

5、GCC调优

包括:快速编译工程Makefile编写、编译机制 编译原理

七:运维统计

团队合作,产品开发,必须要有代码管理能力

1、Jenkins

包括:搭建Jenkins自动化部署环境、test\pre\production 多环境发布、Jenkins集成git实现自动部署、Jenkins多环境配置,权限管理及插件使用

2、虚拟化

包括:Xen虚拟化搭建与原理详解、KVM经典详解、OpenStack架构知识梳理、开源Linux容器 OpenVZ

3、Docker

包括:Dockerfile的编译与镜像编译、Docker-Compose部署与编排、Docker命令与镜像版本提交、Docker的原理

八:分布式架构

以铜为镜,可以正衣冠;以古为镜,可以知兴替;以人为镜,可以明得失。从互联网一线产品的技术架构,提高自己的视野

1、架构实战

包括:新浪门户负载均衡方案解析、京东海量存储哈希存储引擎解密、虎牙核心视频直播架构技术揭秘、京东分布式K-V存储设计与挑战、阿里网络故障智能化治理解决方案、小艾叮咚语音核心技术语音合成实战、安全开放性云平台架构探秘、爱奇艺大数据平台的构建之路

2、架构中间件

包括:远程调用rpc从入门到精通、多进程高效通信之共享MM全攻略、Nginx进程间通信剖析、高性能服务器为什么需要内存池、百度大规模时序指标自动异常检测实战

3、架构策略

包括:订阅者发布者模式实现高并发架构、阿里云Elasticsearch架构解析与性能优化实践、两段提交与多段提交、UDP分片原理分析及其实现方法、Reactor模式和线程池实现高并发服务

4、架构原理

包括:消息驱动式架构设计方法论、动态域名解析和CDN原理、Zookeeper原理、分布式锁的原理、P2P去中心化原理、 应用层协议设计方法论

以上知识点内容于上篇知识点熟练掌握后成为一个高级架构师就不是难事啦。