lxy2520的博客
lxy2520 · 共 9 篇文章
分享一个非常好用的缓冲区和侦听模板(Java、提供源代码下载)
啥也不说了,直接上代码,看怎么用的 package unit; import com.linkage.bss.crm.asynlaunch.ALSwitch; import com.linkage.bss.crm.asynlaunch.AsynItem; import com.linkage.bss.crm.asynlaunch.AsynLaunch; import com.linkage.bss.crm.monitor.BTask; import com.linkage.bss.crm.monitor.ListenerMonitors; import com.linkage.bss.crm…
2013-05-16 20:48 · 评论(0)
简洁安全的单例模式——Java
什么都不说了,直接上代码,相信你能懂的 public class Singleton { private Singleton(){} private static class SingletonHolder{ static Singleton instance = new Singleton(); } public static Singleton getInstance(){ return SingletonHolder.instance; } } 测试 public class TestSingleton { public static void main(String[] args) …
2013-05-09 19:30 · 评论(0)
分布式环境日志收集
分布式环境日志收集 林小应 1. 问题描述 现在应用程序的日志都是error级别,如果想收集某接口日志只能入库。 如果选择性的根据工号打开debug日志,也会散落在应用集群中的各台主机上。查看起来十分不方便。 2. 期望 可以选择性的将有用日志,通过tcp的方式送到日志处理主机。集中处理,处理方式由客户端定义。不能因为发送日志而影响应用程序的性能。 3. 设计原理 思路:采用异步的nio的方式将日志送出,集中处理。满足网络震荡重连(无条件重连、触发式重连)。 方案:采用 异步缓冲区 +Netty来完成日志推送。 4.用法示例 //建立连接(只需要一个连接): NettyLogClient c…
2013-03-06 23:59 · 评论(0)
分布式系统基于缓存机制的实时开关系统——可将一个指令同时推送给N个主机
基于Memcached的开关机制 林小应 1. 问题描述 如果,应用系统需要调用远程服务,且现在有两个版本的服务, newService和oldService。怎样在不停应用的情况下实现动态切换呢? 如果将service的url放进数据库也是一个办法,但放到哪一个数据库呢,我们的数据库是分布式多库。 答案是:可以放到Memcached中! 2. 期望 能实时、方便的改变应用系统中的变量值 3. 设计原理 在应用系统中定义一个变量名称,再启动一个线程,不断扫描MC,获取该变量的值。 如果想要改变应用系统中的变量值,只需要改变MC中的值就可以了。 我们的具体方案: 将指令系统分成单一指令和多指令…
2013-03-06 23:46 · 评论(0)
基于LRU算法的缓存实现
基于LRU算法的缓存实现 林小应 1. 问题描述 业务系统中,可能会用到很多规格数据。如果每次都从数据库读取,开销是很大的。一次业务操作,可能会取几千次,甚至更多。如通信、银行、证券等系统的规则校验就是这样。 很多系统开始使用缓存机制,如memcached、redis。它们的性能都很好,但是都有一个序列化、反序列化的过程。一次反序列化开销可能是1ms。而对于规格数据,我们在应用程序中一般是不会修改的,所以我们不希望序列化、反序列化。 我们可以将这些规格数据存放在内存容器中,直接使用,速度非常快。但是不能全部放进来,那样可能会OutOfMemory。 so、我们希望在内存中存放最近最常用的一些…
2013-03-06 23:28 · 评论(0)
高速异步缓冲区、将同步操作转化成异步、没有“等待返回”的开销——适用于所有次重要的操作
高速异步缓冲区 林小应 1. 问题描述 有一封信要寄出去,你不会傻到自己送过去吧,写上地址、投进街边邮筒就可以了,自己继续干其他事情。 KFC把送外卖的事情都交给了宅急送。如果自己干,一天还能卖几个鸡翅啊。 …… 有些事情,不是非常重要,也不影响后续工作,但又比较耗时的,可以交给专门的人或机构去完成,自己腾出手来继续干其他事。可以很大的提高工作效率。 计算机程序也是这样,比如要将一些日志送到远程日志主机,或者要将配置数据存到Memcached(简称MC),如果由主线程自己完成,会浪费很多时间在等待返回上。可以起一批线程来负责传送日志、存配置数据等。主线程需要传送日志或者存配置数据到MC时,只…
2013-03-06 22:09 · 评论(0)
数据库sequence序列高速缓存池——尽量减少排队和数据库的交互
获取数据库序列 林小应 1.问题描述 由于业务需要,应用程序中很多地方会用到数据库序列sequence,如果每次都去数据库获取,会比较耗时。 在Java代码中,我们通常调用存储过程或执行sql生成一个sequence,如 select xxx.nextnvl from dual; 如果直接调用存储过程或执行sql取sequence,算上事务开销,一次需要3~4ms。在大型分布式系统中(如江苏电信的营业系统、淘宝网、大型社交网站),4ms将是一个很大的开销,试想如果需要的序列已经存储在于内存中,平均每次取sequence的时间损耗将低于0.01ms。 2.期望 避免每次前往数据库取序列,让获取…
2013-03-06 17:50 · 评论(0)
如何更快的获取数据库时间——数学公式是最好的算法
获取数据库时间 林小应 1. 问题描述 我们在应用程序中会用到当前时间:JVM虚拟机的时间 和 数据库的系统时间 两种。 虚拟机时间: System.currentTimeMillis(); 或者 new Date()。 获取系统时间: select sysdate from dual; 而在应用程序中调用上面的sql,容易造成数据库拥塞。而且其本身效率也很低,加上事务的开销,一次访问大约在3~4ms左右。 2. 期望 我们希望获取系统时间,每次访问低于0.1ms。就像在Java代码中调用*System.currentTimeMillis();*一样简单、快捷。 3. 修改方案 数据库时间 …
2013-03-06 17:41 · 评论(0)
如何快速高效的更新memcached缓存数据
在高并发的分布式系统中,加入缓存机制可以很大的提高性能。最近做的XX省的电信BSS项目中就用到了Memcached,系统中将查询到的结果缓存到Memcached 中(下面称MC好了)。对于配置类的规格数据,是不经常改变的。在MC中的命中率高达90%以上。 试想如果取消缓存机制,每秒几万、几十万的数据访问都会请求数据库。会造成数据库连接不够用的情况,系统性能会大大降低。服务器的压力会瞬间上升。 具体场景是:系统正在运行时,由于某种原因,需要修改某项配置数据,并且要求立即生效。 MC给我们带来了方便,但是对于一个庞大的MC集群,可能多达几十个memcached节点,总容量达上百GB。如果快速更新…
2012-07-11 00:28 · 评论(0)