-
Cache Travel-03-进程内缓存,服务间传递数据选择 mq 还是 cache?数据一致性问题
进程内缓存
概念
java应用缓存一般分两种,一是进程内缓存,就是使用java应用虚拟机内存的缓存;另一个是进程外缓存,现在我们常用的各种分布式缓存。相比较而言,进程内缓存比进程外缓存快很多,而且编码也简单;但是,进程内缓存的存储量有限,使用的是java应用虚拟机的内存,而且每个应用都要存储一份,有一定的资源浪费。进程外缓存相比进程内缓存,会慢些,但是,存储空间可以横向扩展,不受限制。
...
2018-09-01 04:24:42 |
Cache
-
Cache Travel-02-history
IQiyi 的缓存发展之路
数据同步加 redis
通过消息队列进行数据同步至redis,然后Java应用直接去取缓存
优点
由于是使用的分布式缓存,所以数据更新快。
缺点
缺点也比较明显:依赖Redis的稳定性,一旦redis挂了,整个缓存系统不可用,造成缓存雪崩,所有请求打到 DB。
JavaMap 到 Guava cache
这个阶段使用进程内缓存作为一...
2018-09-01 04:24:42 |
Java
-
Cache Travel-01-Talk
概览
你真的需要缓存吗
如何选择合适的缓存
多级缓存
缓存更新
缓存挖坑三剑客
缓存污染
序列化
GC 调优
缓存的监控
是否需要
在使用缓存之前,需要确认你的项目是否真的需要缓存。
CPU 占用
如果你有某些应用需要消耗大量的 CPU 去计算,比如正则表达式;如果你使用正则表达式比较频繁,而它又占用了很多 CPU 的话,那你就应该使用缓存将正则表达式的结果给缓存下...
2018-09-01 04:24:42 |
Java
-
缓存实战(1)缓存雪崩、缓存击穿和缓存穿透入门简介及解决方案
缓存的注意点
我们前面花了很多篇幅讲解 redis 的实现原理,并且也自己手写实现了一些基础功能。
你在工作学习中肯定或多或少都接触过 redis 等缓存,本篇对缓存使用的注意点做一个入门介绍。
内容相对轻松简单,请放心食用。
缓存大大提升了我们的查询性能,但是使用不慎很可能掉到坑里。
本文介绍下缓存雪崩、缓存击穿和缓存穿透这三个挖坑的小能手,让你知道如何避免这几个坑,避免加班修B...
2018-09-01 04:24:42 |
Java
-
Cache Travel-00-index
缓存
缓存是提升性能非常重要的手段。
本系列就缓存做深入学习和整理。
缓存系列
基础数据结构
LRUMAP
HashMap
ConcurrentHashMap
成熟框架
Guava Cache
EhCache
MemCache
Redis 系列
Caffeine
LevelDB 系列
ali
感觉就是对各种常见框架的整合和增强。
提供了分布式的支持。
Je...
2018-09-01 04:24:42 |
Java
-
SQL 2PL-两阶段锁定
2PL
概念
在数据库和事务处理中,两阶段锁定(2PL)是一种保证可串行性的并发控制方法。它也是数据库事务调度(历史)结果集的名称。协议使用事务应用于数据的锁,在事务的生命周期内,锁可能阻止(解释为阻止信号)其他事务访问相同的数据。
根据2PL协议,锁的应用和删除分为两个阶段:
扩展阶段:获得锁,不释放锁。
收缩阶段:释放锁,不获取锁。
基本协议使用两种类型的锁:共享锁和独占锁。...
2018-09-01 01:12:25 |
SQL
-
Vector Lock 时钟向量-一致性算法
向量时钟
向量时钟(Vector Clock)是一种在分布式环境中为各种操作或事件产生偏序值的技术,它可以检测操作或事件的并行冲突,用来保持系统的一致性。
向量时钟方法在分布式系统中用于保证操作的有序性和数据的一致性。
向量时钟通常可以被认为是一组来自不同节点的时钟值Vi[1]、Vi[2]、…、Vi[n]。
在分布式环境中,第i个节点维护某一数据的时钟时,根据这些值可以知道其他节点或...
2018-08-31 05:44:07 |
Distributed
-
时间戳-分布式一致性算法
数据一致性策略
在数据一致性的最终实现上,不同的系统采用不同的策略。
包括:Quorum的NWR策略、两阶段提交协议、Paxos、时间戳、向量时钟等,本章只列举了其中的一部分,现实中还有更多的实现。
但是这些系统或者模型均以CAP理论为基石,并依据不同的情况作出权衡,例如Paxos具有较强的一致性,但是系统延迟较大。
此外,很多系统中采用多种策略的结合,例如,NWR策略经常与向量时钟...
2018-08-31 05:44:07 |
SQL