bloom filter 使用最佳实践,让你少采坑!
缓存穿透
缓存穿透 是一个很常见的问题。
抛开恶意攻击不谈,大量的传递依然会访问的 Redis 缓存。
比如黑白名单等信息,存储的比较少,但是实际交易中信息的量特别多。
BloomFilter 使用的问题
如果一个信息一开始有,后来移除了,则无法从 BloomFilter 中移除。
BloomFilter 虽然使用了多次 hash,尽可能的避...
2019-04-01 11:24:57 |
Best-Practice
WRK-测试利器
WRK
WRK is a modern HTTP benchmarking tool capable of generating significant load when run on a single multi-core CPU.
It combines a multithreaded design with scalable event notification systems ...
2019-04-01 11:24:57 |
Test
作业调度-02-核心特性
背景
一个作业平台
定时任务
核心能力应该是作业的定时执行。
定时任务
资源的管理
对于文件的上传分发管理
数据源的访问
数据库 / redis / vm / mongodb 等
远程调用能力
shell 脚本
程序
http / rpc / mq 等
http 可以类似于 postman
断言
每一步的处理,都支持结果的断言。保证每一步执行的正确性。
机器...
2019-04-01 11:24:57 |
Monitor
作业调度 蓝鲸作业平台(Job)是一套运维基础操作管理系统,具备海量任务并发处理能力
About
蓝鲸作业平台(Job)是一套运维基础操作管理系统,具备海量任务并发处理能力。
除了支持脚本执行、文件分发、定时任务等一系列基础运维场景以外,还支持通过流程调度能力将零碎的单个任务组装成一个自动化作业流程;
而每个作业都可做为一个原子节点,提供给上层或周边系统/平台使用,实现调度自动化。
Benefits
安全可靠的高危命令检测能力
作为底层面向服务器OS的原子操作平台...
2019-04-01 11:24:57 |
Monitor
监控-skywalking-06-SkyWalking on the way 全链路追踪系统的建设与实践
作用
自从SkyWalking开始在公司推广,时不时会在排查问题的人群中听到这样的话:“你咋还没接SkyWalking?接入后,一眼就看出是哪儿的问题了…”,正如同事所说的,在许多情况下,SkyWalking就是这么秀。
作为实践者,我非常感谢SkyWalking,因为这款国产全链路监控产品给公司的的伙伴们带来了实实在在的帮助
1、开篇
自从SkyWalking开始在公司推广,时不时...
2019-04-01 11:24:57 |
APM
监控-skywalking-05-in action 实战笔记
1、skywalaking架构
skywalaking总体架构分为4部分
skywalking-agent:
探针,用来收集和发送数据到归集器,主要采集tracing(调用链数据)和metric(指标),使用 JavaAgent 做字节码植入,无侵入式的收集,并通过 HTTP 或者 gRPC 方式发送数据到 SkyWalking Collector。
skywalking-colle...
2019-04-01 11:24:57 |
APM
监控-skywalking-04-字节码增强原理
字节码增强
问题:在不修改原有Java代码的条件下,如何增加我们的新功能?(例如方法调用前打印一条日志)
字节码和Java类加载机制
运行时类的重载
代码AOP
我们在最初,总是会这样来统计方法访问的时间:
public void a()
{
long startTimeMs = System.currentTimeMillis();
log.info("p...
2019-04-01 11:24:57 |
APM
监控-skywalking-03-深入浅出介绍全链路跟踪
全链路监控
什么是全链路监控,为什么我们需要全链路监控?
1、全链路监控:对请求源头到底层服务的调用链路中间的所有环节进行监控。
2、为什么需要:对于单体应用,我们可以很容易地监控和分析它的性能。对于微服务,编程语言不同、服务器数量庞大、可能跨多个服务/区域,那么面对复杂的请求调用链路,就会有一系列问题,只有全链路监控才能处理,例如:
如何快速发现有问题的服务?
...
2019-04-01 11:24:57 |
APM