Java技术栈之高开
本博客从JAVA基础,SSM,微服务,数据库,分布式五大模块,
对所用到的技术知识进行梳理,也是对自己这多年来工作的一次总结。
目录
Java技术栈之高开
前言
一、集合
1.常用的集合有哪些?
2.List的扩容机制
3.HashMap的扩容机制是什么?Jdk1.7和1.8版本的区别?做了哪些优化
4.为什么1.7的HashMap会死循环?
5.高并发场景下,在保证线程安全下,使用什么集合?为什么不在hashMap上直接加悲观锁?
二、乐观锁和悲观锁
1.什么是乐观锁?乐观锁的实现机制,并举例
2.什么是悲观锁?Java悲观锁有哪些?
3.悲观锁升级机制
三、反射
1.什么是反射?
2.反射在项目中的应用,请举例
3.Spring框架中有哪些地方用到了反射?
4.反射和声明式实例化有什么区别?
四、多线程
1.线程和进程的区别
2.多线程操作ConcurrentHashMap,如何保证数据的一致性
3.项目中哪些场景用到了多线程?
4.用的什么线程池?为什么要用线程池?线程池有哪些核心参数?
5.线程池的优化
五、Spring容器
1.什么是Spring,为什么要使用Spring?
2.Spring两大优点?项目中哪些功能使用AOP思想实现?
3.Spring依赖注入的方式
4.Spring的加载机制
5.如果需要在注入bean前设置一些初始化值,要怎么做?
6.Spring如何处理循环依赖?
7.Spring有哪几种事务?常用的事务是什么?
六、SpringMVC
1.什么是SpringMVC?为什么要使用SpringMVC?
2.SpringMVC和Struk2的区别?哪个性能好?
3.SpringMVC的原理
七、Mybatis
1.什么是Mybatis?为什么要使用Mybatis
2.Mybatis有几级缓存?如何使用一级缓存、二级缓存、三级缓存?
3.Mybatis的加载机制
八、微服务框架-SpringBoot和SpringCloud
1.什么是微服务?微服务怎么设计?
2.Springboot和传统SSM、SSH的区别?SpringBoot有哪些优点?
3.为什么要使用SpringCloud?
4.项目中使用了哪些SpringCloud组件?
九、高性能消息中间件-RocketMQ
1.什么是RocketMQ?为什么要使用RocketMQ?
2.RocketMQ和卡夫卡的区别?
3.如何处理服务器停电时,RocketMQ消息丢失?
4.你们项目中,是怎么部署消息中间件的?为什么使用3主3从?
5.RocketMQ的原理及运行机制
十、RPC框架-Dubbo
1.什么十Dubbo?为什么要使用Dubbo?
2.Dubbo的原理及运行机制
十一、全文搜索引擎-ElasticSearch
1.什么是ES?为什么要使用ES?
2.ES有哪些数据结构?
3.ES是线程安全的吗?
4.ES的原理?
5.ES和MySql的区别?
十二、缓存服务器-Redis
1.什么是Redis?为什么要使用Redis?
2.Redis有哪几种数据结构以及对应的使用场景
3.Redis真的是线程安全的吗?
十三、分布式锁-Redison
1.什么是Redision?
2.Redison有哪些分布式锁?
3.如果程序执行的时间大于锁失效时间,怎么处理?
十四、分布式事务
1.什么是分布式事务?
2.如何处理分布式事务?举例说明有哪些场景
十五、Mysql数据库sql语句和索引的优化
1.Mysql数据库的三大范式?
2.Mysql数据库设计的时候,如何保证项目的高性能?
3.你遇到过的sql优化有哪些?
4.Mysql的索引数据类型有哪些?
5.Mysql的索引引擎有哪些?
6.Innodb索引和Myisam索引引擎的区别?
7.如何进行索引优化?
8.Mysql有哪些事务?和java事务有哪些区别?
9.Mysql普通索引和联合索引的区别?
十六、Oracle索引优化
1.Oracle索引有哪些数据类型?
2.Oracle索引如何优化?
3.Oracle存储过程和普通Sql的区别?为什么要使用存储过程?
4.如何实现不重复的办件号?
十七、高可用
1.nginx的负载均衡算法?
2.nginx的哨兵模式?如何保证代理服务的高可用?
3.如果nginx挂了,怎么保证nginx的高可用?
十八、算法
1.常用的比较算法有哪些?及对应使用场景
2.红黑树数据结构是什么样子?和动态二叉树的区别?
总结
前言
关于Java技术栈的一系列技术整理
一、集合
1.常用的集合有哪些?
答:常用的集合类有3种,分别是List、Set和Map,基于这3个超类,常用的集合类有ArrayList、LinkedList、HashSet、HashMap、TreeMap、HashTable、ConcurrentHashMap。其中ArrayList、LinkedList、HashSet、HashMap、TreeMap均为线程不安全集合,HashTable、ConcurrentHashMap为线程安全集合。HashTable是使用synchronized对有线程不安全的方法加悲观锁的方法保证线程安全,锁住的是整个方法,所以性能较低,而ConcurrentHashMap是使用synchronized对数组里面的,1.7之前是Entry对象,采用分段锁方式,1.8之后是Node对象加悲观锁,再加上1.6之后对synchronized锁升级的优化以及1.8之后对HashMap采用数组+链表+红黑树数据结构上的优化,所以concurrentHashMap不仅是线程安全的,也是并发度比HashTable、或者直接在HashMap上加锁处理的集合并发度更高的。
2.List的扩容机制
答:ArryList的数据结构是数组,默认容量是10,加载因子是1,当保存的对象超过数组长度时,进行扩容,创建新的数组,容量为原来的1.5倍+1。所以我们在使用的时候,如果能评估数据的大小,一定要给定初始容量,否则会一直进行扩容操作,降低性能。
3.HashMap的扩容机制是什么?Jdk1.7和1.8版本的区别?做了哪些优化
答:HashMap在1.7和1.8做了一个比较大的改变,1.8之前数据结构是数组+链表,他的数据节点是一个Entry节点,是HashMap的一个内部类,在扩容的时候,resize的时候,进行transfer的时候,会把链表的Entry进行rehash,可能会造成链表的一个循环,就可能在下一次Get的时候出现一个死循环的情况。默认容量是16,加载因子是0.75,当保存的对象超过阈值(阈值=16*0.75=12)时,进行扩容,创建新的链表,容量为原来的2倍。1.7的HashMap有一个严重的bug就是在高并发场景下会出现死循环的情况,会导致Cpu占用达到100%程序崩溃,这是因为HashMap在扩容的时候,把旧的数据插入到新的链表的时候,采用的是尾插法,把原来的Entry数据顺序反转了,多线程操作时,会形成循环指向,当然HashMap本来就是线程不安全的,不推荐使用在高并发场景下的,1.8之后官方修改了这个bug,使用头插法来处理数据插入的问题。
4.为什么1.7的HashMap会死循环?
答:这是因为HashMap在扩容的时候,把Entry进行transfer的时候,会把链表的Entry进行rehash,而且因为hashMap是线程不安全的,在多线程操作的情况会造成我put进去一个值得时候,get的却是另外一个线程put进去的值,导致链表的循环依赖,形成死循环。
5.高并发场景下,在保证线程安全下,使用什么集合?为什么不在hashMap上直接加悲观锁?
答:ConcurrentHashMap是使用synchronized对数组里面的,1.7之前是Entry对象,采用分段锁方式,1.8之后是Node数据节点,在上锁的时候使用的是CAS+Synchronized,再加上1.6之后对synchronized锁升级的优化以及1.8之后对HashMap采用数组+链表+红黑树数据结构上的优化,所以concurrentHashMap不仅是线程安全的,也是并发度比HashTable、或者直接在HashMap上加锁处理的集合并发度更高的。
锁升级机制:一开始线程是没有锁的,当对数据节点加一个偏向锁,获取到锁资源的这个线程,我会优先让它再去获得这个锁,如果它没有获取到这个锁,就升级成一个轻量级的,一个CAS的乐观锁,乐观锁是一个比较和交换的过程,如果它没有设置成功的话,会进行自旋,自旋到一定次数之后,才会升级成一个Synchronized的这么一个重量级锁,这样就保证它性能的问题。
二、乐观锁和悲观锁
1.什么是乐观锁?乐观锁的实现机制,并举例
2.什么是悲观锁?Java悲观锁有哪些?
3.悲观锁升级机制
三、反射
1.什么是反射?
2.反射在项目中的应用,请举例
3.Spring框架中有哪些地方用到了反射?
4.反射和声明式实例化有什么区别?
四、多线程
1.线程和进程的区别
2.多线程操作ConcurrentHashMap,如何保证数据的一致性
3.项目中哪些场景用到了多线程?
4.用的什么线程池?为什么要用线程池?线程池有哪些核心参数?
5.线程池的优化
五、Spring容器
1.什么是Spring,为什么要使用Spring?
Spring是轻量级、一站式企业级开发框架,减少开发企业级项目的成本。
2.Spring两大优点?项目中哪些功能使用AOP思想实现?
IOC和AOP。日志、事务都是通过AOP思想来实现。
3.Spring依赖注入的方式
4.Spring的加载机制b
5.如果需要在注入bean前设置一些初始化值,要怎么做?
6.Spring如何处理循环依赖?
7.Spring有哪几种事务?常用的事务是什么?
8.Spring事务方法上是否可以添加悲观锁?加了会怎么样?
六、SpringMVC
1.什么是SpringMVC?为什么要使用SpringMVC?
2.SpringMVC和Struk2的区别?哪个性能好?
3.SpringMVC的原理
七、Mybatis
1.什么是Mybatis?为什么要使用Mybatis
2.Mybatis有几级缓存?如何使用一级缓存、二级缓存、三级缓存?
3.Mybatis的加载机制
八、微服务框架-SpringBoot和SpringCloud
1.什么是微服务?微服务怎么设计?
2.Springboot和传统SSM、SSH的区别?SpringBoot有哪些优点?
3.为什么要使用SpringCloud?
4.项目中使用了哪些SpringCloud组件?
九、高性能消息中间件-RocketMQ
1.什么是RocketMQ?为什么要使用RocketMQ?
RocketMQ是一个高性能的消息中间件,主要用来削峰填谷,减少高并发场景下,服务器的压力。
2.RocketMQ和卡夫卡的区别?
3.如何处理服务器停电时,RocketMQ消息丢失?
a.由于网络抖动或者通信异常导致生产者发布的消息,没有到达RocketMq情况下:使用RocketMQ自带的事务机制来处理
如果生产者发送消息因为网络抖动或者异常的原因没有发送成功half消息,则执行相应的回滚逻辑。
如果发送成功了,且RocketMq返回成功响应,则执行生产者的核心链路。
如果核心链路执行失败,则回滚,并通知RocketMQ删除Half消息。
如果核心链路执行成功,则通知RocketMQ提交消息,让消费者可以消费这条消息。
b.由于内存或硬盘故障导致持久化消息失败,首先需要将os cache的异步刷盘策略改为同步刷盘,这一步需要修改Broker的配置文件,将flushDiskType改为SYNC_FLUSH同步刷盘策略,默认的是ASYNC_FLUSH异步刷盘。一旦同步刷盘返回成功,那么就一定保证消息已经持久化到磁盘中了;为了保证磁盘损坏不会丢失数据,我们需要对RocketMQ采用主从机构,集群部署,Leader中的数据在多个Follower中都存有备份,防止单点故障。
c.消费者未将消息处理完,就通知RocketMQ消费过了,然后消费者宕机,导致RocketMQ误以为消费者已经把消息消费了数据,所以数据丢失了
注册消息监听器处理消息,如果消费成功了就返回CONSUME_SUCCESS,如果消费者还没有返回CONSUME_SUCCESS时就宕机了,那么RocketMQ就会认为你这个消费者节点挂掉了,会自动故障转移,将消息交给消费者组的其他消费者去消费这个消息,保证消息不会丢失。
4.你们项目中,是怎么部署消息中间件的?为什么使用3主3从?
5.RocketMQ的原理及运行机制
生产者产生消息并发送到RocketMQ服务端,RocketMQ收到消息后会先保存到OS CACHE中,让消费者直接从OS cache中去读取消息并消费,速度更快,过一段时间os cache线程会异步持久化到磁盘。
十、RPC框架-Dubbo
1.什么十Dubbo?为什么要使用Dubbo?
2.Dubbo的原理及运行机制
十一、全文搜索引擎-ElasticSearch
1.什么是ES?为什么要使用ES?
2.ES有哪些数据结构?
3.ES是线程安全的吗?
4.ES的原理?
5.ES和MySql的区别?
十二、缓存服务器-Redis
1.什么是Redis?为什么要使用Redis?
Redis是一种缓存服务器,在政府项目中缓存一些静态数据,比如区划、机构,采用String数据结构。
2.Redis有哪几种数据结构以及对应的使用场景?
String: 短信验证码,计数器等
List:最新消息排行
Hash:保存用户信息,根据Id和HashMap的key查询用户属性
Set:去重的List
ZSet:有序的Set
3.Redis真的是线程安全的吗?
4.Redis单线程多实例?
5.缓存击穿怎么处理?
1.对查询结果为空的数据也进行缓存,不让直接查询数据库,如果数据库和缓存数据不一致,那么通过管理后台主动同步,或者把调度时间间隔设置短一些,让数据库数据及时同步到缓存中去
2.使用布隆过滤器,将所有可能存在的值存在一个bitMap中,不存在的数据就会进行拦截,布隆过滤器采用的是hash表的数据结构,可以通过一个Hash函数将一个元素映射成一个位阵列(Bit Array)中的一个点,这样一来,我们只要看看这个点是不是 1 就知道可以集合中有没有它了。可以很大节省空间和提升查询速度。
6.缓存雪崩怎么处理?
7.redis如何保证分布式下的线程安全?保证库存不超卖?
a.分布式锁redison,trylock方法,制定失效时间和扩展时间
b.redis自带的lua脚本处理,保证库存数量的原子性
8.缓存失效了,所有数据直接打到了数据,引起缓存雪崩怎么处理?
a.热点数据是否设置了永久不失效
b.使用本地缓存作为二级缓存,当redis缓存雪崩后,去查询本地缓存里的数据
十三、分布式锁-Redison
1.什么是Redision?
2.Redison有哪些分布式锁?
trylock
3.如果程序执行的时间大于锁失效时间,怎么处理?
此时锁不会强制失效,会根据设置的扩展时间延长失效时间。
十四、分布式事务
1.什么是分布式事务?
2.如何处理分布式事务?举例说明有哪些场景
十五、Mysql数据库sql语句和索引的优化
1.Mysql数据库的三大范式?
2.Mysql数据库设计的时候,如何保证项目的高性能?
3.你遇到过的sql优化有哪些?
4.Mysql的索引数据类型有哪些?
5.Mysql的索引引擎有哪些?
6.Innodb索引和Myisam索引引擎的区别?
7.如何进行索引优化?
8.Mysql有哪些事务?和java事务有哪些区别?
9.Mysql普通索引和联合索引的区别?
十六、Oracle索引优化
1.Oracle索引有哪些数据类型?
2.Oracle索引如何优化?
3.Oracle存储过程和普通Sql的区别?为什么要使用存储过程?
4.如何实现不重复的办件号?
十七、高可用
1.nginx的负载均衡算法?
2.nginx的哨兵模式?如何保证代理服务的高可用?
3.如果nginx挂了,怎么保证nginx的高可用?
十八、算法
1.常用的比较算法有哪些?及对应使用场景
2.红黑树数据结构是什么样子?和动态二叉树的区别?
总结
这个是我所做的项目用到的技术,后面再更新答案。

版权声明:本文内容由互联网用户自发贡献,该文观点仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容,请联系我们,一经查实,本站将立刻删除。
如需转载请保留出处:https://51itzy.com/kjqy/77930.html