My Love

I will be stronger


  • 主页

  • 关于我

  • 标签

  • 分类

  • 归档

Hive常用函数总结

发表于 2019-01-05 | 分类于 大数据
字数统计: 7k | 阅读时长 ≈ 31

关系运算

  1. 等值比较:=

    语法:A=B

    操作类型:所有基本类型

    描述:如果表达式A与表达式B相等,则为True,否则为False

    举例:

    1
    2
    hive> select 1 from lxw_dual where 1=1;
    1
阅读全文 »

详解Java中的synchronized

发表于 2019-01-04 | 分类于 java
字数统计: 8.5k | 阅读时长 ≈ 34

Synchronized

Synchronized methods enable a simple strategy for preventing thread interference and memory consistency errors: if an object is visible to more than one thread, all reads or writes to that object’s variables are done through synchronized methods.
—— JDK Document - Synchronized Methods

Synchronized方法支持使用一种简单的策略来防止线程间的干扰和内存一致性错误:如果一个对象对多个线程可见,则对该对象变量的所有读写都是通过通过Synchronized方法完成。

阅读全文 »

YARN的原理

发表于 2018-12-27 | 分类于 大数据
字数统计: 3.3k | 阅读时长 ≈ 11

YARN是Hadoop生态中重要的资源调度和管理框架,理解好YARN的原理和执行流程对集群的资源分配和管理有很大帮助。

阅读全文 »

Flume的安装及配置及原理

发表于 2018-12-26 | 分类于 大数据
字数统计: 3.6k | 阅读时长 ≈ 17
Flume是一个高可用、高可靠、分布式的海量数据采集、聚合、传输的系统。 Flume作为一个日志收集工具,非常轻量级,基于一个个Flume Agent,能够构建一个复杂而强大的日志手机系统。运行在服务器上的进程将需要关注的日志文件采集到指定的存储服务,这个进程就叫Flume Agent。 本地环境 Hadoop版本:2.7.6 操作系统 : manjaro-64bit 内存 : 8GB CPU : i7-4770S 前期准备 Flume安装包:下载链接 。 Flume安装和配置 ...
阅读全文 »

配置本地Hadoop环境

发表于 2018-12-26 | 分类于 大数据
字数统计: 1.6k | 阅读时长 ≈ 7
进行大数据开发一般都离不开Hadoop环境,Hadoop慢慢也变成了一个生态环境的代名词,这里记录一下Hadoop本地伪分布式环境的搭建。 本地环境 操作系统 : manjaro-64bit 内存 : 8GB CPU : i7-4770S 前期准备 Hadoop2.7.6,下载链接。 JDK1.8,下载链接。 配置工作解压和配置环境变量 将hadoop-2.7.6.tar.gz和jdk-8u191-linux-x64.tar.gz拷贝到本地~/apps目录下(这里我习惯将软件安装 ...
阅读全文 »
1…678…17
Jony Chiao

Jony Chiao

bulabula

84 日志
12 分类
22 标签
GitHub E-Mail
© 2017 — 2022 Jony Chiao
访问人数 访问总量 次