51dev.com IT技术开发者社区

51dev.com 技术开发者社区

Linux_Centos7_设置MySql定时备份

Linux_Centos7_设置MySql定时备份

一、查看是否安装了必要的组件[root@localhost/]#rpm-qa|grepcroncronie-1.4.11-14.el7_2.1.x86_64cronie-anacron-1.4.11-14.el7_2.1.x86_64crontabs-1.11-6.20121102git.el7.n...

Linux_MySql_tar_安装(转)

Linux_MySql_tar_安装(转)

系统版本:CentOs7.*Mysql版本:5.7.17(自己测试版本)根据博主【大大的橙子】博文转载记录(大部分照搬了,只修改少许部分)一、基本环境部署#卸载系统自带的Mariadb[root@hdp265dnsnfs~]#rpm-qa|grepmariadbmariadb-libs-5.5.44...

Java_按位与&,按位或,取反,左移,右移运算符

Java_按位与&,按位或,取反,左移,右移运算符

//按位与运算&System.out.println(0&0);//0System.out.println(0&1);//0System.out.println(1&1);//1System.out.println("===========");//按位或运算符|Sy...

MySql_创建用户并赋予权限

MySql_创建用户并赋予权限

MySql两种创建用户方式win+rcmdC:UsersAdministrator>mysql-uroot-proot#方式一mysql>insertintomysql.user(Host,User,Password)values("localhost","eRrsr",password...

Linux_10个需要了解的Linux网络和监控命令(转)

Linux_10个需要了解的Linux网络和监控命令(转)

源文地址:http://www.linuxde.net/2013/10/15325.html1.hostnamehostname没有选项,显示主机名字hostname–d显示机器所属域名hostname–f显示完整的主机名和域名hostname–i显示当前机器的ip地址2.pingping将数据包发...

异常处理_Maven之web项目java.lang.LinkageError

异常处理_Maven之web项目java.lang.LinkageError

浏览器运行项目异常如下:HTTPStatus500-typeExceptionreportmessagedescriptionTheserverencounteredaninternalerror()thatpreventeditfromfulfillingthisrequest.exception...

Hadoop.2.x_常用端口及定义方法(转)

Hadoop.2.x_常用端口及定义方法(转)

组件 节点默认端口配置用途说明HDFSDataNode50010dfs.datanode.addressdatanode服务端口,用于数据传输HDFSDataNode50075dfs.datanode.http.addresshttp服务的端口HDFSDataNode50475dfs.da...

Hive_配置远程Metastore

Hive_配置远程Metastore

注:待测试一、准备两三台linux机器,最好是hadoop集群环境 机器A:10.0.0.2 机器B:10.0.0.3 机器C:10.0.0.4二、个机器安装信息机器A安装mysql(用于存储元数据信息)与Hive(用于开启hiveserver)机器B可是作为mysql的主备机器C作为hivecli...

异常处理_Maven多模块web项目整合ssm+dubbo

异常处理_Maven多模块web项目整合ssm+dubbo

异常如下:[ERROR][org.springframework.web.context.ContextLoader.initWebApplicationContext(ContextLoader.java:215)]-Contextinitializationfailedorg.springfra...

Hadoop_常用存储与压缩格式

Hadoop_常用存储与压缩格式

HDFS文件格式file_format:  TEXTFILE   默认格式  RCFILE     hive0.6.0和以后的版本  ORC      hive0.11.0和以后的版本  PARQUET    hive0.13.0和以后的版本,该数据格式企业中最常用  AVRO      hive0...

Oozie_初识

Oozie_初识

Oozie任务调度框架(基于工作流)oozie运行于hadoop集群,对hive,mr,flume,Soop,spark,shell等框架进行任务流调度如:job1-->job2&job3-->job4&job5...其中,job1用于采集数据,job2与job3用于数据...

Oozie_示例

Oozie_示例

Oozie官方示例解压oozie-examples.tar.gz  将examples/上传到HDFS家目录    $bin/hdfsdfs-put/opt/cdh-5.6.3/oozie-4.0.0-cdh5.3.6/examplesexamples  试运行自带的wordcount示例examp...

Flume_企业中日志处理

Flume_企业中日志处理

企业中的日志存放_1201611/20161112.log.tmp  第二天文件变为20161112.log与20161113.log.tmp拷贝一份flume-conf.properties.template改名为dir-mem-hdfs.properties实现监控某一目录,如有新文件产生则上传...

Flume_使用

Flume_使用

案例一:source:hive.logchannel:memory sink:logger输出拷贝一份flume-conf.properties.template改名为hive-mem-log.propertieshive-mem-log.properties  a1.sources=s1...

Flume_常见的几个问题

Flume_常见的几个问题

在HDFS的文件默认生成文件大小1K,如何设置文件大小和数量拷贝一份flume-conf.properties.template改名为hive-mem-size.propertieshive-mem-size.properties  a1.sources=s1  a1.channels=c1  a1...