导读:阅读本文需要有足够的时间,笔者会由浅到深带你一步一步了解一个资深架构师所要掌握的各类知识点,你也可以按照文章中所列的知识体系对比自身,对自己进行查漏补缺,觉得本文对你有帮助的话,可以点赞关注一下。
目录:一、基础篇二、进阶篇三、高级篇四、架构篇五、扩展篇六、体系篇七、推荐书籍八、总结一、基础篇
JVM
1、JVM内存结构
2、堆、栈、方法区、直接内存、堆和栈区别3、Java内存模型4、内存可见性、重排序、顺序一致性、volatile、锁、final5、垃圾回收6、内存分配策略、垃圾收集器(G1)、GC算法、GC参数、对象存活的判定7、JVM参数及调优8、Java对象模型9、oop-klass、对象头10、HotSpot11、即时编译器、编译优化12、类加载机制13、classLoader、类加载过程、双亲委派(破坏双亲委派)、模块化(jboss modules、osgi、jigsaw)14、虚拟机性能监控与故障处理工具jps, jstack, jmap、jstat, jconsole, jinfo, jhat, javap, btrace、TProfiler编译与反编译
1、javac 、javap 、jad 、CRF
Java基础知识
1、阅读源代码
String、Integer、Long、Enum、BigDecimal、ThreadLocal、ClassLoader & URLClassLoader、ArrayList & LinkedList、 HashMap & LinkedHashMap & TreeMap & CouncurrentHashMap、HashSet & LinkedHashSet & TreeSetJava中各种变量类型熟悉Java String的使用,熟悉String的各种函数JDK 6和JDK 7中substring的原理及区别、replaceFirst、replaceAll、replace区别、String对“+”的重载、String.valueOf和Integer.toString的区别、字符串的不可变性自动拆装箱Integer的缓存机制熟悉Java中各种关键字transient、instanceof、volatile、synchronized、final、static、const 原理及用法。集合类常用集合类的使用ArrayList和LinkedList和Vector的区别SynchronizedList和Vector的区别HashMap、HashTable、ConcurrentHashMap区别Java 8中stream相关用法apache集合处理工具类的使用不同版本的JDK中HashMap的实现的区别以及原因枚举枚举的用法、枚举与单例、Enum类Java IO&Java NIO,并学会使用bio、nio和aio的区别、三种IO的用法与原理、nettyJava反射与javassist反射与工厂模式、 java.lang.reflect.*Java序列化什么是序列化与反序列化、为什么序列化序列化底层原理序列化与单例模式protobuf为什么说序列化并不安全注解元注解、自定义注解、Java中常用注解使用、注解与反射的结合JMS什么是Java消息服务、JMS消息传送模型JMXjava.lang.management.、 javax.management.泛型泛型与继承类型擦除泛型中K T V Eobject等的含义、泛型各种用法单元测试junit、mock、mockito、内存数据库(h2)正则表达式java.lang.util.regex.*常用的Java工具库commons.lang, commons.*... guava-libraries netty什么是API&SPI异常异常类型、正确处理异常、自定义异常时间处理时区、时令、Java中时间API编码方式解决乱码问题、常用编码方式语法糖Java中语法糖原理、解语法糖Java并发编程
什么是线程,与进程的区别
阅读源代码,并学会使用Thread、Runnable、Callable、ReentrantLock、ReentrantReadWriteLock、Atomic*、Semaphore、CountDownLatch、、ConcurrentHashMap、Executors线程池自己设计线程池、submit() 和 execute()线程安全死锁、死锁如何排查、Java线程调度、线程安全和内存模型的关系锁CAS、乐观锁与悲观锁、数据库相关锁机制、分布式锁、偏向锁、轻量级锁、重量级锁、monitor、锁优化、锁消除、锁粗化、自旋锁、可重入锁、阻塞锁、死锁死锁volatilehappens-before、编译器指令重排和CPU指令重synchronizedsynchronized是如何实现的?synchronized和lock之间关系不使用synchronized如何实现一个线程安全的单例sleep 和 waitwait 和 notifynotify 和 notifyAllThreadLocal写一个死锁的程序写代码来解决生产者消费者问题守护线程守护线程和非守护线程的区别以及用法二、 进阶篇
Java底层知识
字节码、class文件格式
CPU缓存,L1,L2,L3和伪共享尾递归位运算用位运算实现加、减、乘、除、取余设计模式
了解23种设计模式
会使用常用设计模式单例、策略、工厂、适配器、责任链。实现AOP实现IOC不用synchronized和lock,实现线程安全的单例模式nio和reactor设计模式网络编程知识
tcp、udp、http、https等常用协议
三次握手与四次关闭、流量控制和拥塞控制、OSI七层模型、tcp粘包与拆包http/1.0 http/1.1 http/2之前的区别Java RMI,Socket,HttpClientcookie 与 sessioncookie被禁用,如何实现session用Java写一个简单的静态文件的HTTP服务器实现客户端缓存功能,支持返回304 实现可并发下载一个文件 使用线程池处理客户端请求 使用nio处理客户端请求 支持简单的rewrite规则 上述功能在实现的时候需要满足“开闭原则”了解nginx和apache服务器的特性并搭建一个对应的服务器用Java实现FTP、SMTP协议进程间通讯的方式什么是CDN?如果实现?什么是DNS?反向代理框架知识
Servlet线程安全问题
Servlet中的filter和listenerHibernate的缓存机制Hiberate的懒加载Spring Bean的初始化Spring的AOP原理自己实现Spring的IOCSpring MVCSpring Boot2.0Spring Boot的starter原理,自己实现一个starterSpring Security应用服务器
JBoss
tomcatjettyWeblogic工具git & svnmaven & gradle三、 高级篇
新技术
Java 8
lambda表达式、Stream API、Java 9Jigsaw、Jshell、Reactive StreamsJava 10局部变量类型推断、G1的并行Full GC、ThreadLocal握手机制Spring 5响应式编程Spring Boot 2.0性能优化
使用单例、使用Future模式、使用线程池、选择就绪、减少上下文切换、减少锁粒度、数据压缩、结果缓存
线上问题分析
dump获取
线程Dump、内存Dump、gc情况dump分析分析死锁、分析内存泄露自己编写各种outofmemory,stackoverflow程序HeapOutOfMemory、 Young OutOfMemory、MethodArea OutOfMemory、ConstantPool OutOfMemory、DirectMemory OutOfMemory、Stack OutOfMemory Stack OverFlow常见问题解决思路内存溢出、线程死锁、类加载冲突使用工具尝试解决以下问题,并写下总结当一个Java程序响应很慢时如何查找问题、当一个Java程序频繁FullGC时如何解决问题、如何查看垃圾回收日志、当一个Java应用发生OutOfMemory时该如何解决、如何判断是否出现死锁、如何判断是否存在内存泄露编译原理知识
编译与反编译
Java代码的编译与反编译Java的反编译工具词法分析,语法分析(LL算法,递归下降算法,LR算法),语义分析,运行时环境,中间代码,代码生成,代码优化操作系统知识
Linux的常用命令
进程同步缓冲区溢出分段和分页虚拟内存与主存数据库知识
MySql 执行引擎
MySQL 执行计划如何查看执行计划,如何根据执行计划进行SQL优化SQL优化事务事务的隔离级别、事务能不能实现锁的功能数据库锁行锁、表锁、使用数据库锁实现乐观锁、数据库主备搭建binlog内存数据库h2常用的nosql数据库redis、memcached分别使用数据库锁、NoSql实现分布式锁性能调优数据结构与算法知识
简单的数据结构
栈、队列、链表、数组、哈希表、树二叉树、字典树、平衡树、排序树、B树、B+树、R树、多路树、红黑树排序算法各种排序算法和时间复杂度 深度优先和广度优先搜索 全排列、贪心算法、KMP算法、hash算法、海量数据处理大数据知识
Zookeeper
基本概念、常见用法Solr,Lucene,ElasticSearch在linux上部署solr,solrcloud,,新增、删除、查询索引Storm,流式计算,了解Spark,S4在linux上部署storm,用zookeeper做协调,运行storm hello world,local和remote模式运行调试storm topology。Hadoop,离线计算HDFS、MapReduce分布式日志收集flume,kafka,logstash数据挖掘,mahout网络安全知识
什么是XSS
XSS的防御什么是CSRF什么是注入攻击SQL注入、XML注入、CRLF注入什么是文件上传漏洞加密与解密MD5,SHA1、DES、AES、RSA、DSA什么是DOS攻击和DDOS攻击memcached为什么可以导致DDos攻击、什么是反射型DDoSSSL、TLS,HTTPS如何通过Hash碰撞进行DOS攻击用openssl签一个证书部署到apache或nginx四、架构篇
分布式
数据一致性、服务治理、服务降级
分布式事务2PC、3PC、CAP、BASE、 可靠消息最终一致性、最大努力通知、TCCDubbo服务注册、服务发现,服务治理分布式数据库怎样打造一个分布式数据库、什么时候需要分布式数据库、mycat、otter、HBase分布式文件系统mfs、fastdfs分布式缓存缓存一致性、缓存命中率、缓存冗余微服务
SOA、康威定律
ServiceMeshDocker & KubernetsSpring BootSpring Cloud高并发
分库分表
CDN技术消息队列ActiveMQ监控
监控什么
CPU、内存、磁盘I/O、网络I/O等监控手段进程监控、语义监控、机器资源监控、数据波动监控数据采集日志、埋点Dapper负载均衡
tomcat负载均衡、Nginx负载均衡
DNS
DNS原理、DNS的设计
CDN
数据一致性
想要了解更多Java架构技术的,可以关注我一下,我后续也会整理更多关于架构技术这一块的知识点分享出来,另外顺便给大家推荐一个架构交流学习群:650385180,里面会分享一些资深架构师录制的视频录像:有Spring,MyBatis,Netty源码分析,高并发、高性能、分布式、微服务架构的原理,JVM性能优化,并发编程这些成为架构师必备的知识体系。还能领取免费的学习资源,相信对于已经工作和遇到技术瓶颈的码友,在这个群里一定有你需要的内容。五、 扩展篇
云计算
IaaS、SaaS、PaaS、虚拟化技术、openstack、Serverlsess
搜索引擎
Solr、Lucene、Nutch、Elasticsearch
权限管理
Shiro
区块链
哈希算法、Merkle树、公钥密码算法、共识算法、Raft协议、Paxos 算法与 Raft 算法、拜占庭问题与算法、消息认证码与数字签名
比特币挖矿、共识机制、闪电网络、侧链、热点问题、分叉以太坊超级账本人工智能
数学基础、机器学习、人工神经网络、深度学习、应用场景。
常用框架TensorFlow、DeepLearning4J其他语言
Groovy、Python、Go、NodeJs、Swift、Rust
六、体系篇
1、性能调优
不管是应付前端面试还是改进产品体验,性能优化都是躲不开的话题。
优化的目的是让用户有“快”的感受,那如何让用户感受到快呢?加载速度真的很快,用户打开输入网址按下回车立即看到了页面加载速度并没有变快,但用户感觉你的网站很快性能优化取决于多个因素,包括垃圾收集、虚拟机和底层操作系统(OS)设置。有多个工具可供开发人员进行分析和优化时使用,你可以通过阅读 Java Tools for Source Code Optimization and Analysis 来学习和使用它们。必须要明白的是,没有两个应用程序可以使用相同的优化方式,也没有完美的优化 java 应用程序的参考路径。使用最佳实践并且坚持采用适当的方式处理性能优化。想要达到真正最高的性能优化,你作为一个 Java 开发人员,需要对 Java 虚拟机(JVM)和底层操作系统有正确的理解。
2、源码解读
源码分析是一种临界知识,掌握了这种临界知识,能不变应万变,源码分析对于很多人来说很枯燥,生涩难懂。
源码阅读,我觉得最核心有三点:技术基础+强烈的求知欲+耐心。我认为是阅读源码的最核心驱动力。我见到绝大多数程序员,对学习的态度,基本上就是这几个层次(很偏激哦):1.只关注项目本身,不懂就baidu一下。2.除了做好项目,还会阅读和项目有关的技术书籍,看wikipedia。3.除了阅读和项目相关的书外,还会阅读IT行业的书,比如学Java时,还会去了解函数语言,如LISP。4.找一些开源项目看看,大量试用第三方框架,还会写写demo。5.阅读基础框架、J2EE规范、Debug服务器内核。大多数程序都是第1种,到第5种不光需要浓厚的兴趣,还需要勇气:我能读懂吗?其实,你能够读懂的。耐心,真的很重要。因为你极少看到阅读源码的指导性文章或书籍,也没有人要求或建议你读。你读的过程中经常会卡住,而一卡主可能就陷进了迷宫。这时,你需要做的,可能是暂时中断一下,再从外围看看它:如API结构、框架的设计图。下图是我总结出目前最应该学习的源码知识点:3、分布式
分布式系统是一个古老而宽泛的话题,而近几年因为 “大数据” 概念的兴起,又焕发出了新的青春与活力。除此之外,分布式系统也是一门理论模型与工程技法并重的学科内容。相比于机器学习这样的研究方向,学习分布式系统的同学往往会感觉:“入门容易,深入难”。的确,学习分布式系统几乎不需要太多数学知识。
分布式系统是一个复杂且宽泛的研究领域,学习一两门在线课程,看一两本书可能都是不能完全覆盖其所有内容的。总的来说,分布式系统要做的任务就是把多台机器有机的组合、连接起来,让其协同完成一件任务,可以是计算任务,也可以是存储任务。如果一定要给近些年的分布式系统研究做一个分类的话,我个人认为大概可以包括三大部分:1.分布式存储系统2.分布式计算系统3.分布式管理系统下图是我总结近几年目前分布式最主流的技术:4、微服务
当前微服务很热,大家都号称在使用微服务架构,但究竟什么是微服务架构?微服务架构是不是发展趋势?对于这些问题,我们都缺乏清楚的认识。
为解决单体架构下的各种问题,微服务架构应运而生。与其构建一个臃肿庞大、难以驯服的怪兽,还不如及早将服务拆分。微服务的核心思想便是服务拆分与解耦,降低复杂性。微服务强调将功能合理拆解,尽可能保证每个服务的功能单一,按照单一责任原则(Single Responsibility Principle)明确角色。 将各个服务做轻,从而做到灵活、可复用,亦可根据各个服务自身资源需求,单独布署,单独作横向扩展。下图是我总结出微服务需要学习的知识点:5、工程化
工欲善其事,必先利其器,不管是小白,还是资深开发,都需要先选择好的工具。提升开发效率何团队协作效率。让自己有更多时间来思考。
七、 推荐书籍
1、《深入理解Java虚拟机》
2、《Effective Java》3、《深入分析Java Web技术内幕》4、《大型网站技术架构》5、《代码整洁之道》6、《Head First设计模式》7、《maven实战》8、《区块链原理、设计与应用》9、《Java并发编程实战》10、《鸟哥的Linux私房菜》11、《从Paxos到Zookeeper》12、《架构即未来》八、总结:
以上就是我总结的Java由浅入深的技术点,希望以上的内容可以帮助到正在默默艰辛,遇到瓶疾且不知道怎么办的Java程序员们,需要学习,获取资料的也可以加下上面推荐的那个群,希望可以帮助在这个行业发展的朋友和童鞋们,在论坛博客等地方少花些时间找资料,把有限的时间,真正花在学习上。
如若知识点总结的有不足的地方,欢迎各位朋友指正,觉得有收获的朋友也可以点赞关注一下。