- 博客(10)
- 资源 (2)
- 收藏
- 关注
原创 storm性能测试文档
Storm性能测试方案与结果1. 目的测试twitter storm的运行性能以及数据处理的延迟。2. 环境2.1服务器ACpu型号 E3-1230 V2Cpu核数 8Cpu主频 3.30GHZCpu MHZ 1600内存 8G网卡 千兆带宽 千兆IP hostname Node0service Nimbus,ui,supervisor...
2014-04-23 16:37:48
516
原创 itext实现复杂表格
最近打算做日周月的质量分析报告,以便于发送给相应负责人查看质量现状。希望是可以生成pdf,并发送邮件的形式。 此处采用itext来进行实现,demo代码中,table定义以及表头如下代码所示: [code="java"]public static Table getInitTable() throws DocumentException { Table t = new Tab...
2014-04-15 11:34:22
1524
1
原创 python增量计算
在rsync同步数据后,因业务需要以及文件大小限制,需要对数据做增量分析,而每次都需要拿出文件的增量部分。 linux有差异计算命令diff以及补丁工具patch,都不是很符合预期。这两种工具都是需要对两个文件进行对比,而若如此做的话,其一计算增量耗时,其二需要有一个原数据的副本文件。多余的副本文件会导致额外的存储开销,以及数据移动成本。 又因同步过来的数据是多个app...
2014-03-19 16:43:59
929
原创 spring的cron定时任务解析
在用spring定时任务时,配置如下:[code="java"] [/code]配置项schema为spring-task-3.0.xsd。 对某方法定义cron如下: [code="java"]@Scheduled(cron = "0 */5 * * * ?") pulic void run(){ //other codes…}[/co...
2014-03-12 17:37:26
610
远程提交mapreduce到hadoop集群
从13年初,开始搞hadoop的时候,是采用hadoop-eclipse插件来进行开发mapreduce,发现使用这个插件,其实也就是把相关的jar,class文件提交到远程的hadoop集群。 而实际上要部署应用的时候,如果不在远程提交,就得把任务代码打包成JAR,ftp到集群机器上进行执行。当然也可以在一个client机器上部署一套hadoop环境,把任务JAR放在这里,再提...
2014-03-11 15:01:31
402
原创 maven deploy 遇到的问题
mvn deploy -Dmaven.test.skip=true时,报错: expected START_TAG or END_TAG not TEXT (position: TEXT seen ...jar 据说是由于maven版本的问题导致,后来去另外一个同事的机器上折腾,就可以了。
2011-06-29 11:24:00
1038
原创 osgi中bundle相关研究
其实,都是和传统的jar一样,也是packages+META-INF文件。区别仅在于META-INF中的配置信息。bundle比传统的jar多了import packages和export packages等。当然,就是因为如此,所以开发和打包也就不一样了。eclipse本身就是基于equinox,而我的java ide就是用eclipse。通过eclipse建立plugin-pro
2011-06-28 09:23:00
324
原创 jmm相关知识点-延迟加载(DCL)
1使用DCL多线程延迟加载,可能会出现极端的异常问题。如:Class Foo{Private Resource res = null;Public Resource getResource(){If (res == null){//只有在第一次初始化时,才使用同步方式.synchronized(this){if(res == null){res = new Resource();}}}r
2011-06-28 09:17:00
396
原创 短地址
web站点和wap站点本身的url实在是太长,其中有一些是历史遗留问题,有一些是不得不为之。而像专题活动这类的,很多时候需要用来营销。一个很长的url地址,太长, 不好看,所以就需要把长地址转为短地址。而就想新浪微博那样,你分享的帖子链接,会被自动转换为url.xxx的短地址类似。短地址分为两个服务,一个是解析短地址(decode),一个是生成短地址(encode)。当然,其中也还涉
2011-06-28 09:17:00
1982
原创 在线竞拍系统-ajax轮询
回顾一下以前写的一个会员竞拍的系统,主要需求如下: 1.分为周拍和日拍。(周拍即每周有一个昂贵的物品可以竞拍,日拍即每天可以有三个较便宜的物品可以竞拍。每天有一个日拍物品上线,同时也有一个物品下线。周拍则是一周有一个物品下线,同时也有一个物品上线。物品上线时间为早上10:00,预计结束时间为22:00)。 2.实时竞拍。(用户登陆竞拍系统,能实时看到当前处于竞拍状态的
2011-06-28 00:18:00
1876
how tomcat works 中文版
2011-10-09
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人