您当前的位置:首页 > 电脑百科 > 程序开发 > 架构

腾讯T8架构师,教你学中小研发团队架构实践PDF,高级架构师捷径

时间:2020-07-04 12:33:24  来源:  作者:

前言

今天给大家分享的是,腾讯T8高级架构师教大家学习的中小研发团队架构实践PDF,被称之“成为高级架构师捷径”的实用技术,希望大家能够喜欢!!!

互联技术经过几十年的发展,已经从“铁器时代”进入“机器时代”。得益于开源运动的蓬勃发展,以及技术的日益开放,原本只有大公司才能拥有的技术和系统已经是“旧时王谢堂前燕,飞入寻常百姓家”了,中小团队甚至初创公司都能够基于这些技术和系统快速完成系统的开发,使团队能够更加聚焦于业务的发展。

但这并不意味着简单采用“拿来主义”就万事大吉,中小团队在构建系统架构的时候往往面临几个核心问题 首先 类似的技术和方案太多 具体该用哪个并不是一目了然的 其次,即使选定了具体技术或方案,如果没有经验积累,这些技术和方案的最佳实践和注意事项(俗称“坑”)是很难预先知道的;最后,构建一个完整的大网站需要的技术投很多,如果没有系统的指导,则很可能是 摸着石头过、河”,进入“踩坑填坑的循环。

本文是多年技术、经验、思考和感悟的一个集大成的总结,涵盖了架构设计技术校的方方面面,很好地解答了上述三个问题,具有非常强的指导意义,形象一点来说就是 照着做,你也能设计和 BAT 一样好的架构!!

腾讯T8架构师,教你学中小研发团队架构实践PDF,高级架构师捷径

 

主要内容简介

本文结合作者近几年的工作经验,总结了一套可直接落地、基于开源、成本低、可快速搭建的中小研发团队架构实践方法。

全文共5篇22章,开篇是本文的导读;

架构篇是设计思想的提升,包括企业总体架构、应用架构设计、统一应用分层等;

框架篇主讲中间件和工具的使用,包括消息队列、缓存、Job、集中式日志、应用监控和微服务等;

公共应用篇是技术与业务的结合,包括单点登录和企业支付网关:进阶篇是从架构到管理,包括技改案例、技术与业务的匹配与融合等。

从架构、框架、公共应用,到案例实战和技术管理,本文将大公司的工程理念压缩应用到中小研发团队,使小团队也能构建大网站。

2企业总体架构

企业总体架构是什么,有什么用,具体怎么做呢?以笔者曾任职的公司为案例,一起来探讨这个问题 家公司当时有 200 个研发人员和 200 多台服务器,笔者刚进这家公司时,他们的系统,总是出现各种问题 例如,日常发布系统时或访问量稍微过大时系统就会出现很多故障,而且找不到故障发生的根本原因 笔者进公司后的主 务就是对这个系统进行升级改造,花了一个半月的时间写了一份企业总体架构设计文档。

3应用架构设计

有几个问题要与读者 起探讨 你做架构设计了吗?你认为要不要做架构设计?你的公司有没有做架构设计?在笔者得到的答案中 大部分人认为要做架构设计,但自己却很少做,自己经历的公司也很少做架构设计 这里是矛盾的,难道大部分人和公司都犯错了吗? 应该不是这样!

4统一应用分层:

应用分层这件事情看起来很简单,但每个程序员都有自己的 套方法,哪怕是初学者。如何让一家公司的几百 应用采用统一的分层结构,并得到大部分程序员的认同呢?

5生产环境诊断工具WinDbg

生产环境偶尔会出现- -些异常问题,WinDbg 或GDB是解决此类问题的利器。调试工具WinDbg如同医生的听诊器,是系统“生病”时进行诊断的逆向分析工具。Dump文件类似于飞机的黑匣子,记录生产环境程序运行的状态。本章主要介绍调试工具WinDbg和抓包工具ProcDump的使用,并分享一个真实的案例。多年前不知谁写的代码,导致每一两个月偶尔出现CPU飙高的现象。我们先使用ProcDump在生产环境中抓取异常进程的Dump文件,然后在不了解代码的情况下通过WinDbg命令进行分析,最终定位有问题的那行代码。

腾讯T8架构师,教你学中小研发团队架构实践PDF,高级架构师捷径

 


腾讯T8架构师,教你学中小研发团队架构实践PDF,高级架构师捷径

 

6 RabbitMQ快速入门及应用

使用过分布式中间件的人都知道,中间件使用起来并不复杂,常用的客户端API就那么几个,比我们日常编写程序时用到的API要少得多。但是分布式中间件在中小研发团队中使用得并不多,为什么会这样呢?原因是中间件的职责相对单-一, 客户端的使用虽然简单,但整个环境搭起来却不容易。所以对于中间件的使用,我们重点放在解决门槛问题上,把服务端环境搭好(生产环境可直接使用云或运维解决),把中间件的基本职责和功能介绍好,把客户端Demo写好,让程序员“抬抬脚”,在调试代码中即可轻松入门。根据我们以往的经验,初次接触也可以自主快速学习。文字描述和Demo以实用为主,能用代码说明的就不用文字。以下是消息队列RabbitMQ的快速入门及应用。

7 redis快速入门及应用

Redis的使用难吗?不难。Redis 用好容易吗?不容易。Redis 的使用虽然不难,但与业务结合的应用场景特别多、特别密切,用好并不容易。我们希望通过简单的文字介绍及Demo,读者即可轻松、快速入门并学会应用。

8任务调度Job

Job类似于数据库中的作业,多用于实现定时执行任务。适用场景主要包括定时轮询数据库同步、定时处理数据和定时邮件通知等。我们的Job分为操作系统级别定时任务WinJob和HttpJob ,其中, WinJob使用开源的任务调度框架Quartz.NET+ZooKeeper实现,HttpJob的服务端是自主开发实现的,可以直接定时调用计划任务(如微服务)。

9应用监控系统Metrics

应用监控系统Metrics 由Metrics.NET+InfluxDB+Grafana 组合而成,通过客户端Metrics.NET在业务代码中埋点, Metrics.NET会把收集的数据存储在InfluxDB数据库中,然后通过Grafana来展示监控数据。其中, InfluxDB服务端部署的版本号是1.3.1, Grafana部署的版本号是4.0.1。

10集中式日志ELK

日志可分为系统日志、应用日志和业务日志,系统日志给运维人员使用,应用日志给研发人员使用,业务日志给业务操作人员使用。这里主要讲解应用日志,通过应用日志来了解应用的信息和状态,以及分析应用错误发生的原因等。随着系统的日益复杂,大数据时代的来临,需要几十甚至上百台的服务器是常有的事,因此迫切需要有一-套针对日志且能够集中式管理的产品。ELK就实现了集中式日志管理,统一-涵盖了分布式日志收集、检索、统计、分析,以及对日志信息的Web管理等集中化管控。

11微服务架构MSA

微服务架构MSA是Microservice Architecture的简称,它是一种架构模式,它提倡将单一应用程序划分成一-组小的服务,服务之间互相通信、互相配合,为用户提供最终价值。

12搜索服务Solr

Apache Solr 是-一个开源的搜索服务器,Solr 使用JAVA 语言开发,主要基于HTTP和Apache Lucene实现。Apache Lucene是- -个高效的、基于Java的全文检索库。另外一个基于Lucene的搜索服务器是Elasticsearch,由于项目历史原因,以及工程师有Solr 的使用经验,我们选择了Solr 而不是Elasticsearch。 如果是一个全新的项目,则Elasticsearch也是当下不错的选择。

13分布式协调器ZooKeeper

Apache ZooKeeper是由Apache Hadoop 的子项目发展而来的,于2010年11月正式成为Apache的顶级项目。

ZooKeeper是一个开放源代码的分布式协调服务。它具有高性能、高可用的特点,同时具有严格的顺序访问控制能力(主要是写操作的严格顺序性)。基于对ZAB协议.( ZooKeeper Atomic Broadcast, ZooKeeper 原子消息广播协议)的实现,它能够很好地保证分布式环境中数据的一致性。也正是基于这样的特性,使得ZooKeeper成为解决分布式数据一致性问题的利器。

14小工具合集

当每月发布次数变得越来越多时,如超过500 次,则发布工作人员的工作量会翻倍增长,此时由人工发布操作失误引起的风险会变得越来越大。为了提高项目的发布效率,也为了降低由人工操作失误带来的风险,需要引进持续集成工具。

15 一键发布和测试之持续集成工具Jenkins

Jenkins是-一个用Java语言编写的开源的持续集成工具,最开始被称为Hudson,Jenkins在持续集成领域市场份额中居于主导地位,被各种规模的团队用于用各种语言实现的各类项目中。例如,C#、Java、Ruby、Groovy、Grails、 php等。

腾讯T8架构师,教你学中小研发团队架构实践PDF,高级架构师捷径

 


腾讯T8架构师,教你学中小研发团队架构实践PDF,高级架构师捷径

 


腾讯T8架构师,教你学中小研发团队架构实践PDF,高级架构师捷径

 

16单点登录

单点登录的英文全称是Single Sign On,简称SSO。即用户只需要登录一次,就可以在个,人权限范围内,访问所有相互信任的应用功能模块,不管整个应用群的内部有多么复杂,对用户而言,都是一个统-一的整体。用户访问Web系统的整个应用群与访问单个系统一样,登录和注销分别只要一次就够了。

17企业支付网关

企业支付网关又叫聚合支付,由统-支付服务、 统一支付通知和统一支付后台三部分组成,本章我们主要介绍前两部分。将企业支付网关独立出来非常有必要,它是企业未来金融事业部的基础 当前价值也很大。

腾讯T8架构师,教你学中小研发团队架构实践PDF,高级架构师捷径

 

18技改之路:从单体应用到微服务

技改是技术改造的简称,是技术的蜕变。本章所谈的技改指的是在公司技术发展的某个瓶颈阶段,按原有的开发和组织方式已经无法“玩下去”,这时公司希望引进架构师或技术牛,人来破解当前困局。技改对于公司和技术人员而言都非常难得,参与者多,主导者少。笔者有幸前后主导过3次OTA系统的技改,规模有大有小,每次技改环境和问题虽不一样,但还是有套路可循的。技改之路少讲技术多讲“路”,我们不过多地关注技术细节和中间件的实现,而重点讲述技改的过程和对技改的思考。

19机票垂直搜索引擎之性能优化

20.上云纪要

21技术与业务的匹配与融合

技改是技术改造的简称,是技术的蜕变。本章所谈的技改指的是在公司技术发展的某个瓶颈阶段,按原有的开发和组织方式已经无法“玩下去”,这时公司希望引进架构师或技术牛,人来破解当前困局。技改对于公司和技术人员而言都非常难得,参与者多,主导者少。笔者有幸前后主导过3次OTA系统的技改,规模有大有小,每次技改环境和问题虽不一样,但还是有套路可循的。技改之路少讲技术多讲“路”,我们不过多地关注技术细节和中间件的实现,而重点讲述技改的过程和对技改的思考。

22研发团队文化是怎么”长”出来

从死气沉沉到充满激情活力,从固步自封到好学分享,这是一个有关团队文化的主题。寺庙文化传承千百年,舌尖上的美食流传至今,它们是如何形成和生长的?是参考大公司或从管理书籍.上挑选几个词语,还是脚踏实地,自己一步一步埋头干?本章与你一起探讨!

腾讯T8架构师,教你学中小研发团队架构实践PDF,高级架构师捷径

 


腾讯T8架构师,教你学中小研发团队架构实践PDF,高级架构师捷径

 

因为内容实在是太多了,小编在此就不做过多的介绍了,需要本技术文档的朋友,可以转发关注小编,私信小编“技术”来获取!!!

专家力荐学习

本书从实战出发,通过-一个个实例阐明架构中的种种方法论如何落地,如何在架构落地的过程中保持技术的前瞻性和柔性,如何有效地避免过度设计。作者以CTO的视角讲述了带领技术团队,从业务和技术痛点入手,快速搭建小而美的整体架构的过程。本书背后的分析思想和设计思路,对于快速发展的中小团队是非常值得借鉴的经验。一百度 资深架构师杜亚明

代码混乱、结构不清晰、开发效率低、发布周期长、发布出错率高、排查问题困难困扰着很多互联网研发团队,也曾是我和作者一起需要面对的问题。 本书第18章技改之路,我是亲历者和见证者,整个过程我与作者一起拼搏奋斗,至今难忘,受益匪浅!-洋码头资深架构师 戈建华

本书是作者多年技术、经验、思考和感悟的一-个集大成的总结,涵盖了架构设计技术栈的方方面面,具有非常强的指导意义,形象一点来说就是:照着做,你也能设计和BAT一样好的架构!

一《从零开始学架构》作者,资深技术专家李运华

本书从框架、架构、公共应用和性能调优,到康威定律、技术与业务的匹配与融合等,从生产力到生产关系,从架构师到技术管理,均有涉及,这是一个架构师的进阶之路,也是作者的心路历程,值得各位读者参考!-饿了么CTO张雪峰

本书内容丰富,涵盖业务分析、领域建模、分布式系统架构、中间件和工具、微服务架构、技术管理及文化建设等主题。本书是作者近几年在一线互联网公司生产实践的基础上,加上自己的系统化和体系化思考之后,沉淀下来的干货。对于-线架构师深入理解互联网分布式系统的架构设计并指导生产实践,本书具有非常大的参考价值。---微服务技术专家,拍拍贷基础框架研发总监杨波



Tags:架构师   点击:()  评论:()
声明:本站部分内容及图片来自互联网,转载是出于传递更多信息之目的,内容观点仅代表作者本人,如有任何标注错误或版权侵犯请与我们联系(Email:2595517585@qq.com),我们将及时更正、删除,谢谢。
▌相关推荐
为了构建高并发、高可用的系统架构,压测、容量预估必不可少,在发现系统瓶颈后,需要有针对性地扩容、优化。结合楼主的经验和知识,本文做一个简单的总结,欢迎探讨。1、QPS保障目标...【详细内容】
2021-12-27  Tags: 架构师  点击:(5)  评论:(0)  加入收藏
本系列为 Netty 学习笔记,本篇介绍总结Java NIO 网络编程。Netty 作为一个异步的、事件驱动的网络应用程序框架,也是基于NIO的客户、服务器端的编程框架。其对 Java NIO 底层...【详细内容】
2021-12-07  Tags: 架构师  点击:(17)  评论:(0)  加入收藏
1 概述数据结构和内部编码 无传统关系型数据库的 Table 模型schema 所对应的db仅以编号区分。同一 db 内,key 作为顶层模型,它的值是扁平化的。即 db 就是key的命名空间。 key...【详细内容】
2021-11-01  Tags: 架构师  点击:(28)  评论:(0)  加入收藏
前面已经聊到了如何做高层架构设计,并开始让设计落地,去划分了系统边界,进行了服务和模块的拆分,也就是系统的整体轮廓已经有了。接下来,就该来做整体的技术架构设计了。其实做架...【详细内容】
2021-09-17  Tags: 架构师  点击:(77)  评论:(0)  加入收藏
有朋友或许感兴趣到底什么是解决方案架构师,也肯定有一些人心里充满了困惑:1、架构师又跑售前又做项目,到底是干嘛的?如何成为一个架构师?2、经常听人说方案,究竟什么是方案,怎么写...【详细内容】
2021-08-19  Tags: 架构师  点击:(107)  评论:(0)  加入收藏
第一章:认识SpringSpring认识框架spring全家桶: spring ,springmvc,spring boot,spring cloudspring:出现在2002左右,解决企业开发的难度,减轻对项目模块之间的管理。类和类之间的...【详细内容】
2021-06-24  Tags: 架构师  点击:(123)  评论:(0)  加入收藏
从事近十年的 JavaEE 应用开发工作,现任阿里巴巴公司系统架构师。对分布式服务架构与大数据技术有深入研究,具有丰富的 B/S 架构开发经验与项目实战经验,擅长敏捷开发模式。国...【详细内容】
2021-06-18  Tags: 架构师  点击:(114)  评论:(0)  加入收藏
分布式一致性算法概要随着各种高并发访问、海量数据处理等应用场景越来越多,为了应对这些使用场景,分布式系统应运而生。分布式系统得以发展,得益于诸多优点,比如:可以避免 单点...【详细内容】
2021-04-13  Tags: 架构师  点击:(238)  评论:(0)  加入收藏
前言我们可以从java.io.InputStream类中看到,抽象出一个read方法,用来读取已经打开的InputStream实例中的字节,每次调用read方法,会读取一个字节数据,该方法抽象定义,如下所示:publ...【详细内容】
2021-04-09  Tags: 架构师  点击:(161)  评论:(0)  加入收藏
昨天有网友问我,他原先没有学过奥数,问能不能当系统架构师?其他也有人有疑问,是不是应该先学数学,然后在考研的时候转入计算机? 我先说一下结论,没有学过奥数,完全可以当系统架构师...【详细内容】
2021-03-09  Tags: 架构师  点击:(233)  评论:(0)  加入收藏
▌简易百科推荐
为了构建高并发、高可用的系统架构,压测、容量预估必不可少,在发现系统瓶颈后,需要有针对性地扩容、优化。结合楼主的经验和知识,本文做一个简单的总结,欢迎探讨。1、QPS保障目标...【详细内容】
2021-12-27  大数据架构师    Tags:架构   点击:(5)  评论:(0)  加入收藏
前言 单片机开发中,我们往往首先接触裸机系统,然后到RTOS,那么它们的软件架构是什么?这是我们开发人员必须认真考虑的问题。在实际项目中,首先选择软件架构是非常重要的,接下来我...【详细内容】
2021-12-23  正点原子原子哥    Tags:架构   点击:(7)  评论:(0)  加入收藏
现有数据架构难以支撑现代化应用的实现。 随着云计算产业的快速崛起,带动着各行各业开始自己的基于云的业务创新和信息架构现代化,云计算的可靠性、灵活性、按需计费的高性价...【详细内容】
2021-12-22    CSDN  Tags:数据架构   点击:(10)  评论:(0)  加入收藏
▶ 企业级项目结构封装释义 如果你刚毕业,作为Java新手程序员进入一家企业,拿到代码之后,你有什么感觉呢?如果你没有听过多模块、分布式这类的概念,那么多半会傻眼。为什么一个项...【详细内容】
2021-12-20  蜗牛学苑    Tags:微服务   点击:(9)  评论:(0)  加入收藏
我是一名程序员关注我们吧,我们会多多分享技术和资源。进来的朋友,可以多了解下青锋的产品,已开源多个产品的架构版本。Thymeleaf版(开源)1、采用技术: springboot、layui、Thymel...【详细内容】
2021-12-14  青锋爱编程    Tags:后台架构   点击:(21)  评论:(0)  加入收藏
在了解连接池之前,我们需要对长、短链接建立初步认识。我们都知道,网络通信大部分都是基于TCP/IP协议,数据传输之前,双方通过“三次握手”建立连接,当数据传输完成之后,又通过“四次挥手”释放连接,以下是“三次握手”与“四...【详细内容】
2021-12-14  架构即人生    Tags:连接池   点击:(17)  评论:(0)  加入收藏
随着移动互联网技术的快速发展,在新业务、新领域、新场景的驱动下,基于传统大型机的服务部署方式,不仅难以适应快速增长的业务需求,而且持续耗费高昂的成本,从而使得各大生产厂商...【详细内容】
2021-12-08  架构驿站    Tags:分布式系统   点击:(23)  评论:(0)  加入收藏
本系列为 Netty 学习笔记,本篇介绍总结Java NIO 网络编程。Netty 作为一个异步的、事件驱动的网络应用程序框架,也是基于NIO的客户、服务器端的编程框架。其对 Java NIO 底层...【详细内容】
2021-12-07  大数据架构师    Tags:Netty   点击:(17)  评论:(0)  加入收藏
前面谈过很多关于数字化转型,云原生,微服务方面的文章。虽然自己一直做大集团的SOA集成平台咨询规划和建设项目,但是当前传统企业数字化转型,国产化和自主可控,云原生,微服务是不...【详细内容】
2021-12-06  人月聊IT    Tags:架构   点击:(23)  评论:(0)  加入收藏
微服务看似是完美的解决方案。从理论上来说,微服务提高了开发速度,而且还可以单独扩展应用的某个部分。但实际上,微服务带有一定的隐形成本。我认为,没有亲自动手构建微服务的经历,就无法真正了解其复杂性。...【详细内容】
2021-11-26  GreekDataGuy  CSDN  Tags:单体应用   点击:(35)  评论:(0)  加入收藏
最新更新
栏目热门
栏目头条