1
推荐
2116
阅读
6
推荐
3892
阅读
Hadoop集群系列（目录）
下面是Hadoop集群系列的目录安排，按照一星期发布一期的原则进行。希望大家的关注。 目录安排： 1）Hadoop集群_第1期_CentOS安装配置_V1.0 2）Hadoop集群_第2期_机器信息分布表_V1.1 3）Hadoop集群_第3期_VSFTP安装配置_V1.0 4）Hadoop集群_第4期_SecureCRT使用_V1.0 5）Hadoop集群_第5期_Hadoop安装...
1
推荐
2406
阅读
跟我学习Storm_Storm基本架构
Storm集群类似于一个Hadoop集群。 然而你在Hadoop的运行“MapReduce job”，在Storm上你运行 “topologies”。 “job”和“topologies”本身有很大的不同，其中一个关键的区别是，MapReduce的工作最终完成，而topologies处理消息永远保持（或直到你杀了它）。Strom集群有主要有两类节点：主节点和工作节点。 主节点上运行一个...
1
推荐
2377
阅读
跟我学习Storm_Storm基本概念
首先我们通过一个Storm和Hadoop的对比来了解Storm中的基本概念。 接下来我们再来具体看一下这些概念。Nimbus：负责资源分配和任务调度。Supervisor：负责接受nimbus分配的任务，启动和停止属于自己管理的worker进程。Worker：运行具体处理组件逻辑的进程。Task：worker中每一个spout/bolt的线程称为一个task...
1
推荐
2173
阅读
跟我学习Storm_Storm主要特点
Storm拥有低延迟、高性能、分布式、可扩展、容错等特性，可以保证消息不丢失，消息处理严格有序。Storm的主要特点如下所示：简单的编程模型。类似于MapReduce降低了并行批处理复杂性，Storm降低了进 行实时处理的复杂性。可以使用各种编程语言。你可以在Storm之上使用各种编程语言。默认支持Clojure、 Java、Ruby和P...
0
推荐
2149
阅读
跟我学习Storm_Storm简介
Storm是由专业数据分析公司BackType开发的一个分布式实时数据处理软件，可以简单、高效、可靠地处理大量的数据流。Twitter在2011年7月收购该公司，并于2011年9月底正式将Storm项目开源。Storm被托管在GitHub上，目前最新版本是0.9.0.1。软件核心部分使用Clojure开发，外围部分使用Java开发。Clojure（发音同closure...
0
推荐
2131
阅读
细细品味Storm_Storm简介及安装
前言 Storm是由专业数据分析公司BackType开发的一个分布式实时数据处理软件，可以简单、高效、可靠地处理大量的数据流。Twitter在2011年7月收购该公司，并于2011年9月底正式将Storm项目开源。Storm被托管在GitHub上，目前最新版本是0.9.0.1。软件核心部分使用Clojure开发，外围部分使用Java开发。Clojure（发音同closur...
0
推荐
2202
阅读
细细品味架构（第1期）_实时计算在点评
Hi，博友： 欢迎查阅《细细品味架构》系列，本系列将和我一起学习，并慢慢走近架构师的神秘世界。 本期目录：1、本期内容... 31.1 版权申明... 31.2 内容详情... 31.2.1 实时计算在点评的使用场景... 31.2.2 实时计算在业界的使用场景... 41.2.3 点评如何构建实时计算平台... 51.2.4 Storm基础知识简单介绍... 61....
0
推荐
2396
阅读
《细细品味Hive》系列课程
Hi，博友： 我是解耀伟，笔名是虾皮，最近我在极客学院录制Hive系列教程，也是督促自己学习一种方式，可以把自己的学习积累有方向，星期天也能做点有意义的事情。在做每一期的过程中，需要找资料，总结，先自己融合才能讲出来。由于是自己第一次做网上视频课，里面会有错误，还请把错误发给我（xieyaowei1986@163.com...
0
推荐
2378
阅读
PHP运行模式
1、运行模式关于PHP目前比较常见的五大运行模式：1）CGI（通用网关接口 / Common Gateway Interface）2）FastCGI（常驻型CGI / Long-Live CGI）3）CLI（命令行运行 / Command Line Interface）4）Web模块模式（Apache等Web服务器运行的模式）5）ISAPI（Internet Server Application Program Interface）备注：在PHP5.3以...
0
推荐
3734
阅读
数据摘要算法的测试效率(SHA、MD5和CRC32)
1、算法概述数据摘要算法是密码学算法中非常重要的一个分支，它通过对所有数据提取指纹信息以实现数据签名、数据完整性校验等功能，由于其不可逆性，有时候会被用做敏感信息的加密。数据摘要算法也被称为哈希（Hash）算法或散列算法。1.1 CRC8、CRC16、CRC32CRC（Cyclic Redundancy Check，循环冗余校验）算法出现时间较...
0
推荐
1872
阅读
SimpleDateFormat非线程安全
文章列表1）SimpleDateFormat的线程安全问题与解决方案2）深入理解Java：SimpleDateFormat安全的时间格式化
0
推荐
2185
阅读
带有时区的日期转换
1、日期样式 2、转换代码 import java.text.ParseException;
import java.text.SimpleDateFormat;
import java.util.Date;
import java.util.Locale;
public class Time {
public static void main(String[] args) {
&nb...
1
推荐
2661
阅读
学习Shell脚本编程（第5期）_表达式的比较
字符串操作符逻辑运算符用test比较的运算符数字比较符文件操作符 在Shell程序中，通常使用表达式比较来完成逻辑任务。表达式所代表的操作符有字符操作符、数字操作符、逻辑操作符、以及文件操作符。其中文件操作符是一种Shell所独特的操作符。因为Shell里的变量都是字符串，为了达到对文件进行操作的目的，于是...
0
推荐
2578
阅读
学习Shell脚本编程（第4期）_在Shell程序中的使用变量
变量的赋值变量的访问变量的输入 4.1 变量的赋值 在Shell编程中，所有的变量名都由字符串组成，并且不需要对变量进行声明。要赋值给一个变量，其格式如下： 注意：4.2 访问变量值 如果要访问变量值，可以在变量前面加一个美元符号"$"，例如： 一个变量给另一个变量赋值可以写成...