我们先讨论一下是微服务
架构的发展历程是从单体式架构，到分布式架构，到SOA架构，再到微服务架构
Continue reading初识SpringCloud
Leave a Reply
Flink中的状态
Flink的时间语义和watermark
Flink的window
streaming流式计算是一种被设计用于处理无限数据集的数据处理引擎，但是在特殊情况下，我们需要把一些数据进行阶段是分割，而window就是一种切割无限数据为有限数据块的一种方案
Continue readingFlink任务调度原理
初识Flink
官方定义：Apache Flink is a framework and distributed processing engine for stateful computations over unbounded and bounded data streams. Flink has been designed to run in all common cluster environments perform computations at in-memory speed and at any scale.
Apache Flink 是一个框架和分布式处理引擎，用于在无边界和有边界数据流上进行有状态的计算。Flink 能在所有常见集群环境中运行，并能以内存速度和任意规模进行计算。
Continue readingJVM学习笔记（一）
JVM是Java Virtual Machine（Java虚拟机）的缩写，JVM是一种用于计算设备的规范，它是一个虚构出来的计算机，是通过在实际的计算机上仿真模拟各种计算机功能来实现的。
Continue readingAmabri设置HDFS、YARN高可用
HDFS/YARN高可用配置
Continue readingAmbari 添加自定义组件
HDP配置、组件安装
Continue readingAmbari安装
Apache Ambari是一种基于Web的工具，支持Apache Hadoop集群的创建、管理和监控。Ambari已支持大多数Hadoop组件，包括HDFS、MapReduce、Hive、Pig、 Hbase、Zookeeper、Sqoop和Hcatalog等；除此之外，Ambari还支持Spark、Storm等计算框架及资源调度平台YARN。
Ambari 自身也是一个分布式架构的软件，主要由两部分组成：Ambari Server 和 Ambari Agent。简单来说，用户通过Ambari Server通知 Ambari Agent 安装对应的软件；Agent 会定时地发送各个机器每个软件模块的状态给 Ambari Server，最终这些状态信息会呈现在 Ambari 的 GUI，方便用户了解到集群的各种状态，并进行相应的维护。