大数据学习

安装 这篇将会介绍怎么安装、运行和配置InfluxDB。 准备 安装InfluxDB包需要root或是有管理员权限才可以。 网络 InfluxDB默认使用下面的网络端口： TCP端口8086用作InfluxDB的客户端和服务端的http api通信 TCP端口8088给备份和恢复数据的RPC服务使用 另外，InfluxDB也提供了多个可能需要自定义端口的插件，所以的端口映射都可以通过配置文件修改，对于默认安装的InfluxDB，这个配置文件位于/etc/influxdb/influxdb.conf。 NTP InfluxDB使用服务器本地时

什么是MongoDB ? MongoDB 是一个基于分布式文件存储的数据库，介于关系数据库和非关系数据库之间，是非关系数据库当中功能最丰富，最像关系数据库的。他支持的数据结构非常松散，是类似json的bson格式，因此可以存储比较复杂的数据类型。Mongo最大的特点是他支持的查询语言非常强大，其语法有点类似于面向对象的查询语言，几乎可以实现类似关系数据库单表查询的绝大部分功能，而且还支持对数据建立索引。 MongoDB 是由C++语言编写的，是一个基于分布式文件存储的开源数据库系统。 在高负载的情况下，添加更多的节点，可以保证服务器性能。 MongoDB 旨在为WEB应用提供可扩

maven项目创建 在~/bigdata下创建空文件夹neo4j后作为我们的项目目录(或其他指定文件夹),切换到项目目录：1 cd ~/bigdatamkdir neo4jcd neo4j 在该目录下我们使用maven命令创建一个maven项目: nbu@ecs:~/bigdata/neo4j$ mvn archetype:generate -DgroupId=org.nbubigdata.neo4j -DartifactId=neo4j_java -DarchetypeArtifactId=maven-archetype-quickstart -Dinteractiv

Neo4j 是基于 Java 的图形数据库，运行 Neo4j 需要启动 JVM 进程，因此必须安装 JAVA SE 的 JDK 可以从 Oracle 官方网站下载 https://www.oracle.com/java/technologies/downloads/ 注意一下 Neo4j 和 Java 版本的对应关系，如果服务器上已经有 JDK，通过java -version查看一下版本，如果是 1.8.xx 的版本，下载 Neo4j 3.xx 的版本。Neo4j 4.xx 的版本需要 jdk 的 version 是 11。 安装 1、下载 community 版本

Spark 快速入门指南 – Spark 安装与基础使用 准备工作 需要安装JDK 本教程使用的JDK1.8，可参考JDK安装 安装 Spark 官网下载地址：http://spark.apache.org/downloads.html spark-x.x.x-bin-hadoopXX.tgz 版本的spark可以不安装Hadoop 本实验由于已安装过Hadoop,则选择spark-2.4.8-bin-without-hadoop.tgz版安装 对于spark-2.4.8-bin-without-hadoop.tgz版spark，需要预先装Had

ZooKeeper 是 Apache 软件基金会的一个软件项目，它为大型分布式计算提供开源的分布式配置服务、同步服务和命名注册。 ZooKeeper 的架构通过冗余服务实现高可用性。 Zookeeper 的设计目标是将那些复杂且容易出错的分布式一致性服务封装起来，构成一个高效可靠的原语集，并以一系列简单易用的接口提供给用户使用。 一个典型的分布式数据一致性的解决方案，分布式应用程序可以基于它实现诸如数据发布 / 订阅、负载均衡、命名服务、分布式协调 / 通知、集群管理、Master 选举、分布式锁和分布式队列等功能。 谁适合阅读本教程？ 本教程是为专业的程序开发

安装 [Kafka] 下载 kafka 两种方式 手动下载 下载地址：Apache Kafka 点击这里从百度云盘下载（提取码：dzfb） 手动下载移动到/opt/software 目录下准备安装 解压 kafka nbu@ecs:~$ cd /opt/software/nbu@ecs:/opt/software$ tar -zxvf kafka_2.10-0.10.1.0.tgznbu@ecs:/opt/software$ sudo mv kafka_2.10-0.10.1.0 /usr/local/kafkanbu@ecs:/opt/software$ c

1 客户端工具 1.1 实验介绍 1.1.1 关于本实验 本实验主要描述openGauss数据库的客户端工具的使用和连接数据库的方法。 1.1.2 实验目的 掌握gsql客户端工具本地连接数据库的方法; 掌握gsql客户端工具远程连接数据库的方法; 掌握gsql客户端工具使用方法； 掌握图形化界面客户端工具Data Studio的安装及使用方法。 1.2 gsql客户端工具 gsql是openGauss提供在命令行下运行的数据库连接工具，可以通过此工具连接服务器并对其进行操作和维护，除了具备操作数据库的基本功能，gsql还提供了若干高

一、建立WordCount工程 # 创建工程文件夹~/bigdata/flink/wordcountnbu@ecs:~$ mkdir -p bigdata/flink/wordcountnbu@ecs:~$ cd bigdata/flink/wordcount# 创建项目package org.nbubigdata.flinknbu@ecs:~/bigdata/flink/wordcount$ mkdir -p src/org/nbubigdata/flink# 创建输出文件夹classes 用于保存编译后的class文件及jar包nbu@ecs:~/bigdata/flink/w

Flume 安装部署 安装地址 1） Flume 官网地址 http://flume.apache.org/ 2）文档查看地址 http://flume.apache.org/FlumeUserGuide.html 3）下载地址 http://archive.apache.org/dist/flume/ 安装部署 1）将 apache-flume-1.7.0-bin.tar.gz 上传到 linux 的/opt/software 目录下 2）解压 apache-flume-1.7.0-bin.tar.gz 到/u