摘要: 一.数据仓库概念 将多数据源中的数据整合一起,进行数据分析,此时数据仓库对多种业务数据进行筛选和整合,可以用于数据分析、数据挖掘、数据报表。时效性T+1. 二.数据仓库的特点 主题性:数据仓库是针对某个主题来进行组织,比如滴滴出行,司机行为分析就是一个主题,所以可以将多种不同的数据源进行整合。而传统阅读全文
posted @ 2019-02-23 00:59 冰魄秋雨 阅读(1) 评论(0) 编辑
摘要: 一、MapReduce 原理 MapReduce 是一种变成模式,用于大规模的数据集的分布式运算。通俗的将就是会将任务分给不同的机器做完,然后在收集汇总。 MapReduce有两个核心:Map,Reduce,它们分别单独计算任务,每个机器尽量计算自己hdfs内部的保存信息,Reduce则将计算结果汇阅读全文
posted @ 2019-02-23 00:33 冰魄秋雨 阅读(1) 评论(0) 编辑
摘要: 一、虚拟机安装centos7需要显示IPv4地址时设置 修改ip addr 中显示ipv4 1. 修改 ONBOOT=no 为 ONBOOT=yes, 2. 同时需要添加HWADDR=00:0c:29:c8:b6:a7,其中后缀mac地址需要填写ip addr中ech33的ip6的mac 00:0c阅读全文
posted @ 2019-01-27 19:28 冰魄秋雨 阅读(6) 评论(0) 编辑
摘要: Redis缓存 "Redis 作为数据查询" "Redis 作为资源的存储" Redis 作为数据查询 redis mysql缓存模式一般采用cache Aside Pattern模式(该模式不是能够实现,缓存实现写入到数据库中,如果需要这样的,可以使用ignite缓存): 失效:应用777真钱老虎机先从cac阅读全文
posted @ 2019-01-17 01:12 冰魄秋雨 阅读(8) 评论(0) 编辑
摘要: flink初始 "flink是什么" "为什么使用flink" "flink的基础概念" "flink剖析" "实例" flink是什么 flink是一个用于有界和无界数据流进行有状态的计算框架。 flink提供了不同级别的抽象来开发流和批处理应用777真钱老虎机。 最底层是Stateful Stream pr阅读全文
posted @ 2019-01-15 00:23 冰魄秋雨 阅读(9) 评论(0) 编辑
摘要: 一、Flume是什么 Flume是一个数据,日志收集的一个组件,可以用于对777真钱老虎机,nginx等日志的收集,而且非常简单,省时的做完收集的工作。Flume是一个分布式、可靠、和高可用的海量日志采集聚合和传输的系统。支持在日志系统中定制各类数据发送方,用于收集日志,同时Flume对日志做简单的处理。 Fl阅读全文
posted @ 2018-12-30 13:16 冰魄秋雨 阅读(155) 评论(1) 编辑
摘要: 1. FLume初识 2. Flink 初识 3. hadoop 分布式安装 4. MapReduce实例阅读全文
posted @ 2018-12-30 13:15 冰魄秋雨 阅读(11) 评论(0) 编辑
摘要: 对于java虚拟机,像我这样工作才两年的会是比较陌生和神秘,但是时候,需要对JVM有一定的认识,并且能够设置一些参数。下面是自己学习到的内容。 这里需要使用一个java自带的一个工具,VisualVM。使用IDEA下载一个VisualVM。 一、查看777真钱老虎机的JVM内存 首先任务参数有不要设置,然后编写阅读全文
posted @ 2018-12-24 23:57 冰魄秋雨 阅读(302) 评论(3) 编辑
摘要: 一、JVM如何执行777真钱老虎机 Java777真钱老虎机如何做到跨平台的,其底层就是运行的JVM虚拟机,JVM虚拟机就Java编写的代码,首先先解析成class文件,JVM然后去解析class文件成机器码,最后执行。机器码是各个操作系统中可识别的,且能够执行的。 777真钱老虎机执行会分两个步骤 二、JVM结构 三、JVM类加载过阅读全文
posted @ 2018-12-23 23:37 冰魄秋雨 阅读(12) 评论(0) 编辑
posted @ 2018-12-22 23:04 冰魄秋雨 阅读(4) 评论(0) 编辑
博聚网