youxinrencwx
- 浏览: 67453 次
- 性别:
- 来自: 北京
-
最新评论
文章列表
引<?xml:namespace prefix = o ns = "urn:schemas-microsoft-com:office:office" />
最近关注Hadoop，因此也顺便关注了一下Hadoop相关的项目。HBASE就是基于Hadoop的一个开源项目，也是对Google的BigTable的一种实现。
BigTable是什么？Google的 ...
这部分内容是分布式计算开源框架Hadoop入门实践的第二部分,讲述了关于实际使用配置的内容.第三部分是对于集群配置的测试结果分析的部分,下周三应该会在InfoQ刊登.
http://www.infoq.com/cn/articles/hadoop-config-tip
什么事情都有良性循环和恶性循环，工作也是一样。程序员这份工作更是如此，特别是你如果和我一样未来只想走P的道路。
昨天晚上老大给我发了一个邮件，关于规划部门最近在规划阿软的未来技术发展，希望能够提供关于分布式计算的一些想法和Feature，最近也接触和实践了一点，就写了一点自己的想法。老大很惊讶我那么快就回了邮件，其实在我看来还是和我读书的时候老师常说的，“机会总是给有准备的人”，就算中五百万也需要有承受的心理。
因此今天想把自己的一些工作经验分享一下，画了一个程序员良性循环的图。
解释一下按照正常的人来安排工作计划，不是说拖沓的去故意拉长工作安排，只是按照普通正常开发工 ...
- 2008-08-07 09:56
- 浏览 490
- 评论(0)
分布式计算开源框架Hadoop入门实践（一）第一部分已经在InfoQ.cn上刊登了第一部分
http://www.infoq.com/cn/articles/hadoop-intro
What is Hadoop. 2
Why is hadoop. 6
How to Use Hadoop & Tips. 7
环境：..
SIP的第四期结束了，因为控制策略的丰富，早先的的压力测试结果已经无法反映在高并发和高压力下SIP的运行状况，因此需要重新作压力测试。跟在测试人员后面做了快一周的压力测试，压力测试的报告也正式出炉，本来也就算是告一段落，但第二天测试人员说要修改报告，由于这次作压力测试的同学是第一次作，有一个指标没有注意，因此需要修改几个测试结果。那个没有注意的指标就是load average，他和我一样开始只是注意了CPU，内存的使用状况，而没有太注意这个指标，这个指标与他们通常的限制（10左右）有差别。重新测试的结果由于这个指标被要求压低，最后的报告显然不如原来的好看。自己也没有深入过压力测试，但是觉得不搞明 ...
- 2008-06-30 17:33
- 浏览 599
- 评论(0)
我对于Memcached的接触，还是在去年看了CSDN的一系列国外大型网站架构设计而开始的。最初的时候只是简单的封装了Memcached Java版的客户端，主要是对于配置的简化以及Memcached多点备份作了一些工作，然后就作为ASF的组件一部分提供给其他Team使用。其实看过Memcached Java客户端代码的人就会了解其实客户端的事情很简单，就是要有一套高性能的Socket通信框架以及对Memcached的私有协议实现的接口，自己去做这些事情也是很简单的，不过既然有可以满足自己需求的开源部分，那么就去实现自己需要的但没有实现的。这里我用的是Whalin的客户端版本，这里为什么还要提 ...
- 2008-06-05 08:55
- 浏览 228
- 评论(0)
我对于Memcached的接触，还是在去年看了CSDN的一系列国外大型网站架构设计而开始的。最初的时候只是简单的封装了Memcached Java版的客户端，主要是对于配置的简化以及Memcached多点备份作了一些工作，然后就作为ASF的组件一部分提供给其他Team使用。其实看过Memcached Java客户端代码的人就会了解其实客户端的事情很简单，就是要有一套高性能的Socket通信框架以及对Memcached的私有协议实现的接口，自己去做这些事情也是很简单的，不过既然有可以满足自己需求的开源部分，那么就去实现自己需要的但没有实现的。这里我用的是Whalin的客户端版本，这里为什么还要提 ...
- 2008-06-04 23:12
- 浏览 517
- 评论(0)
工作忙，有些许时间没有更新Blog了，这次在开发监控模块的时候遇到了这个问题，整个问题定位过程真是走了不少路，所以觉得有必要记录下来分享一下。在我看来很多时候结果也许就很简单一个原因，但是开发人员却要探究很久，也许在找到了其他可实现业务逻辑方法的情况下，就会放弃寻找原因，这期间我也是一样。
问题初现：
在服务集成平台中需要新增一块写入数据库的逻辑，因此考虑最简便就是弄个Spring的BeanFactory来搞定这一切，谁知道，问题就这么出现了。很简单，通过Spring的ClassPathXmlApplicationContext来构建BeanFactory，下面的语句大家应该很熟悉： ...
- 2008-05-29 08:24
- 浏览 603
- 评论(0)
在完成ASF集成REST以后，接到的任务就是要完成一个日志分析应用。需求没有很明确，只是要有这么一个东西能够满足分析收集后的日志，将分析后的原始数据入库，作为后期分析和统计使用。
在动手做之前，我还是给这个应用作了最基本的需求定义：灵活配置（输入源，输出目标，分析器的实现等），高效（并行任务分解）。就这两点能够做到，那么将来需求如何变化都可以适应。Tiger的Concurrent包是满足后面那项最好的实现，因此打算好好的实践一把，也就这部分Tiger的特性还没有充分使用过，里面的线程池，异步服务调用，并发控制都能够极好的完成并行任务分解的工作。也就是在这个过程中，看到了IBM开发者论坛上的 ...
- 2008-04-23 08:32
- 浏览 341
- 评论(0)
假期结束，开始收心回来继续工作。晚上有一个项目要发布，公司的同事突然打手机给我，说ASF的文件解析又出了上次的问题，希望尽快解决。
问题描述：
上一次问题：
多台机器运行同一个分支的应用，但是有些机器正 ...
- 2008-04-06 11:32
- 浏览 378
- 评论(0)
在SOA的基础技术实现方式中WebService占据了很重要的地位，通常我们提到WebService第一想法就是SOAP消息在各种传输协议上交互。近几年REST的思想伴随着SOA逐渐被大家接受，同时各大网站不断开放API提供给开发者，也激起了REST风格We ...
- 2008-02-22 08:36
- 浏览 560
- 评论(0)
业务组要求ASF提供多种方式的远程服务访问，兼顾性能和跨平台的不同需求，因此在原有的Web Service的SCA发布及绑定的功能外，集成了Hessian，用以发布和访问内部服务（安全性和跨平台要求不高，性能要求较高的服务）。在文中 ...
- 2008-02-13 08:43
- 浏览 297
- 评论(0)
业界正在广泛寻求解决 B2B 以及 EAI （企业应用集成）所存在问题的方案。这些方案不同于基于 JMS 手段的面向消息中间件技术和 Web 服务技术。本笔记概括地阐述了与 SOA （面向服务体系架构）规范及 ESB （企业服务总线）基础架构有关的 JBI （Java 业务集成）标准。以下第一，二部分转载后整理的。
一．关于面向服务体系架构
关于SOA的概念，你可以找到很多的文章从不同的角度来描述它，不同的软件提供商也有不同的定义方式。BEA有流体计算，微软有Indigo 和SOA-building， SAP有ESA。 每个人都可以从不同的视角来理解SOA，从程序员的角度，SOA
- 2008-01-24 11:50
- 浏览 499
- 评论(0)
JVM优化配置
这里首先要说明的是这里提到的JVM是Sun的HotSpot JVM 5和以上的版本。性能优化在应用方面可以有很多手段，包括Cache，多线程，各种算法等等。通常情况下是不建议在没有任何统计和分析的情况下去手动配置JVM的参 ...
- 2008-01-23 16:12
- 浏览 520
- 评论(0)