gaojingsong
- 浏览: 1124910 次
- 性别:
- 来自: 深圳
-
社区版块
- ( 4)
- ( 0)
- ( 80)
最新评论
-
gaojingsong：
jstl1point0 写道高级版本jdk可以直接安装不用配置 ...
【win7配置jdk 环境变量】 -
jstl1point0：
高级版本jdk可以直接安装不用配置了
【win7配置jdk 环境变量】 -
hdd901002：
光说明错误在哪里有什么用，解决方法啊。。。我也碰到了，一条jo ...
mycat源码解读--错误之【can't find table define in schema 】 -
masuweng：
【java之图片水印】 -
masuweng：
【java之多线程下载文件实现】
文章列表
- 博客分类：
- 大数据--storm
this release represents a major milestone in the evolution of apache storm, and includes an immense number of new features, usability and performance improvements, some of which are highlighted below.
storm 1.0.0版本增加了很多新的特性，可用性以及性能也得到了很大的改善，该版本是storm发展历程上一个里程碑式的版本，目前最新版本是1.0.2但是方法参数和包名有很大变动，因此升级时候 ...
- 2016-12-22 19:26
- 浏览 756
- 分类:开源软件
- 博客分类：
- 大数据--storm
1、what is samza?
apache samza is a distributed stream processing framework. it uses apache kafka for messaging, and apache hadoop yarn to provide fault tolerance, processor isolation, security, and resource management.
2、samza特性
simple api: unlike most low-level messaging system apis, ...
- 2016-09-12 22:05
- 浏览 784
- 分类:编程语言
- 博客分类：
- 大数据--zookeeper
- 大数据--storm
一、zookeeper在storm充当的作用
storm的所有的状态信息都是保存在zookeeper里面，nimbus通过在zookeeper上面写状态信息来分配任务，supervisor，task通过从zookeeper中读状态来领取任务，同时supervisor, task也会定义发送心跳信息到zookeeper，� ...
- 2016-07-27 19:30
- 浏览 1892
- 分类:企业架构
- 博客分类：
- 大数据--storm
java.library.path: "/usr/local/lib:/opt/local/lib:/usr/lib"
### storm.* configs are general configurations
# the local dir is where jars are kept
storm.local.dir: "storm-local"
storm.log4j2.conf.dir: "log4j2"
storm.zookeeper.servers:
- "localhost ...
- 2016-06-11 20:04
- 浏览 6981
- 分类:开源软件
- 博客分类：
- 大数据--storm
本例子主要演示，storm中的helloworld,从spout不断的随机产生单词，然后在bolt中进行组装输出。完整代码见附件。
详细代码如下：
// 实例化topologybuilder类 topologybuilder topologybuilder = new topologybuilder(); // 设置喷发节点并分配并发数，该并发数将会控制该对象在集群中的线程数。 topologybuilder.setspout("simplespout", new simplespout(), 1); // 设置 ...
- 2016-04-10 21:30
- 浏览 1619
- 分类:数据库
- 博客分类：
- 大数据--storm
storm命令行参数研究
[root@node1 ~]# stormcommands: activate classpath deactivate dev-zookeeper drpc help jar kill list localconfvalue logviewer monitor nimbus rebalance remoteconfvalue ...
- 2016-04-10 20:43
- 浏览 1100
- 分类:开源软件
- 博客分类：
- 大数据--storm
操作步骤：
1. 搭建zookeeper；2. 下载并解压storm发布版本；4. 修改storm.yaml配置文件；5. 启动storm各个后台进程。备注：storm高版本以后，不需要安装zeromq,jzmq 等一堆繁杂的组件，这是一个很大的改进
一、安装zookeeper[root@node1 opt]# mv zookeeper-3.4.6 zookeepe346[root@node1 opt]# mv apache-storm-0.9.6 storm096[root@node1 bin]# ./zkserver.sh startjmx enabled by defaultu ...
- 2016-04-09 12:49
- 浏览 1509
- 分类:开源软件
- 博客分类：
- 大数据--storm
stream grouping定义了一个流在bolt任务间该如何被切分。这里有storm提供的6个stream grouping类型：
1. 随机分组（shuffle grouping）：随机分发tuple到bolt的任务，保证每个任务获得相等数量的tuple。
2. 字段分组（fields grouping）：根据指定字段分割数据流，并分组。例如，根据“user-id”字段，相同“user-id”的元组总是分发到同一个任务，不同“user-id”的元组可能分发到不同的任务。
3. 全部分组（all grouping）：tuple被复制到bolt的所有任务。这种类型需 ...
- 2016-02-29 21:06
- 浏览 933
- 分类:开源软件
- 博客分类：
- 大数据--storm
一、安装zeromq-2.1.7.tar.gz[root@hadoop0 opt]# wget http://download.zeromq.org/zeromq-2.1.7.tar.gz--2015-11-20 17:49:28-- http://download.zeromq.org/zeromq-2.1.7.tar.gz resolving download.zeromq.org... 95.142.169.98 connecting to download.zeromq.org|95.142.169.98|:80... connected. http request sent, a ...
- 2015-11-25 23:09
- 浏览 1152
- 分类:数据库