异度空间
caizhongda · 共 92 篇文章
Apache Commons Configuration笔记
Apache Commons Configuration 很多人都应该熟悉吧,操作配置文件的工具包。 Configuration可以操作如下类型的文件: Properties files XML documents Windows INI files Property list files (plist) JNDI JDBC Datasource System properties Applet parameters Servlet parameters 好,Apache Commons Configuration 需要JDK1.2以上,需要导入的包有: commons-configurat…
2012-06-18 17:37 · 评论(0)
MAPREDUCE面试题
Map/Reduce功能很强大,只要设定合理Key、Value,我们经常碰到的算法大部分都可以实现。假如能把下面几个算法问题,用Map/Reduce方式实现,那么Map/Reduce编程可以说已经运用很纯熟了。 初级篇 0. 实现Word Count 中级篇 Map/Reduce方式实现矩阵相乘 Map/Reduce方式实现PageRank算法 Map/Reduce方式实现TF/IDF Map/Reduce实现图最短路径 Map/Reduce实现最小生成树算法 Map/Reduce实现Aprori算法 Map/Reduce实现 Kmeans算法 你能做出来几个? 。
2012-02-15 14:17 · Java · Distributed(分布式) · 评论(1)
Twitter Storm的一些关键概念
Twitter Storm的一些关键概念 这篇文章翻译自storm官方wiki: https://github.com/nathanmarz/storm/wiki/Concepts, 主要介绍storm的一些关键概念。 storm的一些关键概念如下: Topologies Streams Spouts Bolts Stream groupings Reliability Tasks Workers Configuration 先看一张storm里面各种对象的一个示意图: storm里面各个对象的示意图 计算拓补: Topologies 一个实时计算应用程序的逻辑在storm里面被封装到top…
2012-01-14 23:44 · Storm · 评论(0)
Twitter Storm简介
Twitter Storm简介 from: http://xumingming.sinaapp.com/109/twitter-storm简介/ 本文翻译自storm官方wiki: https://github.com/nathanmarz/storm/wiki/Rationale 背景 过去的十年是数据处理变革的十年, MapReduce, Hadoop以及一些相关的技术使得我们能处理的数据量比以前要大得多得多。但是这些数据处理技术都不是实时的系统 — 它们设计的目的也不是为了实时计算。没有什么办法可以简单地把hadoop变成一个实时计算系统。实时数据处理系统和批量数据处理系统在需求上有着…
2012-01-14 23:39 · Storm · 评论(0)
Linux下的各种压缩文件:tar gz bz2 tgz zip等
对于刚刚接触Linux的人来说,一定会给Linux下一大堆各式各样的文件名给搞晕。别 个不说,单单就压缩文件为例,我们知道在Windows下最常见的压缩文件就只有两种 ,一是,zip,另一个是.rar。可是Linux就不同了,它有.gz、.tar.gz、tgz、bz2、 .Z、.tar等众多的压缩文件名,此外windows下的.zip和.rar也可以在Linux下使用, 不过在Linux使用.zip和.rar的人就太少了。本文就来对这些常见的压缩文件进行一 番小结,希望你下次遇到这些文件时不至于被搞晕icon_smile.gif 在具体总结各类压缩文件之前呢,首先要弄清两个概念:打包和压缩。…
2011-10-19 12:20 · 笔记 · 评论(0)
CentOS6 安装及笔记
Centos 桌面/命令行 启动 vi /etc/inittab 找到id:x:initdefault: 桌面系统是id:5:initdefault:,即默认以X11(即图形界面)模式启动。 设置成id:3:initdefault: reboot重新启动 命令行下,要想在进入图形界面:startx,就行了。 CentOS 安装及笔记 vi /etc/yum.repos.d/CentOS-Base.repo scp -r root@192.168.32.214:/etc/yum.repos.d/CentOS-Base.repo /etc/yum.repos.d/ yum makecache ;…
2011-10-12 10:36 · 评论(0)
经典项目
中小规模即时统计分析分布式框架 http://code.google.com/p/cheep-worker/ 搜索/推荐引擎技术 (17) http://backsnow.iteye.com/category/120832 Mahout in action (21) http://running.iteye.com/category/144665 Neo4j: The Graph Database 图数据库 http://www.open-open.com/open315976.htm MYSQL访问尘 http://code.google.com/p/guzz/wiki/HomePageC…
2011-10-02 19:03 · 评论(0)
Linux MySql
安装: yum install mysql-server ; mysql-devel show databases; 权限 具体操作步骤: 关闭mysql: service mysqld stop 然后: mysqld_safe --skip-grant-tables 启动mysql: service mysqld start mysql -u root mysql> use mysql mysql> UPDATE user SET Password=PASSWORD('xxx') WHERE user='root'; mysql> flush privileges; mysql>\q my…
2011-10-02 09:35 · 评论(0)
SSh Agent admitted failure to sign using the key
现有2台机器 1、服务器192.168.1.112 2、个人机192.168.1.110 要使110无需密码通过ssh登入112 步骤 1、创建密钥 Java代码 收藏代码 miao@u32-192-168-1-110:~/.ssh$ ssh-keygen -t rsa Generating public/private rsa key pair. Enter passphrase (empty for no passphrase): (忽略) Enter same passphrase again: (忽略) Your identification has been saved in /h…
2011-10-02 09:03 · 评论(0)
Hadoop 、HBase 网页收藏
Hadoop 数据类型与文件结构剖析 Sequence, Map, Set, Array, BloomMap Files http://blog.nosqlfan.com/html/1217.html HBase 文件结构图 http://blog.nosqlfan.com/html/1135.html Avro入门1–序列化与远程通信 http://www.javabloger.com/article/hadoop-avro-rpc-java.html
2011-09-27 17:02 · Java · 评论(0)
C/C++ 学习资料
Boost学习: 中文经典入门: http://zh.highscore.de/cpp/boost/ 官方文档: http://www.boost.org/doc/libs/1_47_0/ Nginx学习: Nginx中文网 http://www.nginx.com.cn/ http://www.nginxs.com/ Native Client SDK http://code.google.com/intl/zh-CN/chrome/nativeclient/ 个人觉得比较经典的C++ 开源项目,整理如下: 1 、log4cplus log4cplus 是C++ 编写的开源的日志系统, 功…
2011-08-24 22:41 · C/C++ · 评论(0)
JAVA的IO系统 笔记
对于JAVA的IO系统,从开始学习JAVA开始到现在,一直都晕的很 后来工作了也没有用到,到了再后来,能看懂IO的程序!但是自己去写就麻烦了,一点都没有头绪 很多东西都搞不清除!这个假期决定要一步步的攻克自己的弊端! 呵呵 今天晚上从IO开始! 变学习变写这篇文章!希望能在文章结束的时候能搞定IO! 首先: “流”的理解 在JAVA中,一组有序的数据序列称为“流” 流分为输入流和输出流两种! JAVA的IO系统负责的就是程序的输入和输出! 好好看看java.io包!虽然这个包很复杂。 头晕! IO流: 1: 字节流 java.io.InputStream / java.io.OutputSt…
2011-04-20 23:03 · Java · 评论(1)
关于ie的内存泄漏与javascript内存释放
1.javascript内存释放的方法示例 把所有上级函数的参数即使设为null,并使用CollectGarbage来释放内存。 示例 <script> //32M function AllocMem() { var str="12345678"; for(var i=3;i<24;i++) str+=str; return str; } function A(a) { a=null; return r; function r() { } } var f=A(AllocMem()); alert(1); CollectGarbage(); //明显,已经释放了。 r=null; alert(…
2009-12-02 10:23 · UI · 评论(0)
JavaScript 笔记
///删除id为aaa的div function delDiv() { var div=document.getElementById("aaa"); div.removeNode(true); } 书上是这样说的: innerHTML 设置或获取位于对象起始和结束标签内的 HTML outerHTML 设置或获取对象及其内容的 HTML 形式 innerText 设置或获取位于对象起始和结束标签内的文本 outerText 设置(包括标签)或获取(不包括标签)对象的文本 没有例子,你明白什么意思吗,反正我没明白,下面我们举例来说吧: 如: 原html为: 1.innerHTML 运行脚本:…
2009-12-02 10:10 · UI · 评论(0)
ubuntu下远程控制Window桌面
远程控制windows服务器,控制windows的桌面是很简单的,利用ubuntu自带的终端服务客户端 (tsclient),使用RDP/RDPv5就可以连接windows了,前提当然是对方允许远程连接,终端服务客户端(tsclient)的使用和 windows自带的远程控制软件外观基本一样,设置都差不多。 、
2009-12-01 09:00 · OS/Ubuntu · 评论(0)