ppjj

2022年10月31日

Hadoop错误2_Hadoop伪分布式下，运行WordCount时，Input path does not exist错误原因

摘要：在伪分布式下，按照下面两个博客，分别以命令行方式和Eclipse执行WordCount程序时，都会出现同样的错误，（Eclipse：http://blog.csdn.net/wang_zhenwei/article/details/47422775）（命令行方式：http://blog.csdn 阅读全文

posted @ 2022-10-31 18:16 ppjj 阅读(711) 评论(0) 推荐(0) 编辑

Cannot initialize Cluster. Please check your configuration for mapreduce.framework .name and the cor

摘要：背景利用ambari搭建的新环境，跑数据出现了不少问题，但如下问题困扰了很长时间，直到今天才得以解决，每次报错。按照网上的各种方式都不行。a56爆大奖在线娱乐知道问题点肯定在spark2.3.1 集成hive3.1.0的版本问题上，因为hive3.1.0新增了很多功能，如事务等，发布时间没有长时间的积累，出问题很容阅读全文

posted @ 2022-10-31 18:07 ppjj 阅读(246) 评论(0) 推荐(0) 编辑

Exceptioninthread “main“ org.apache.hadoop.mapred.InvalidJobConfException: Output directory not set.

摘要： Driver有七个步骤。今天在写的时候不细心造成一个错误。这是错误的 //6、设置输入路径和输出路径 FileInputFormat.setInputPaths(job,new Path("D:\\BaiduNetdiskDownload\\Hadoop\\ziliao\\11_input\\in 阅读全文

posted @ 2022-10-31 17:59 ppjj 阅读(165) 评论(0) 推荐(0) 编辑

完美解决 java: 无效的目标发行版: 11

摘要： 1、问题描述经过研究才发现，这是因为作者使用了jdk8进行编译，而试图使用jdk11的功能，这就必然会导致版本问题，因为jdk8支持1-8这个区间的功能，如何解决这个问题呢？ image-20220415205000583 2、平台JDK版本首先介绍如何在IDEA上添加新版本，点击Project 阅读全文

posted @ 2022-10-31 17:55 ppjj 阅读(2984) 评论(0) 推荐(0) 编辑

2022年10月20日

org.apache.hadoop.fs.UnsupportedFileSystemException: No FileSystem for scheme “hdfs“

摘要： Configuration configuration = new Configuration(); FileSystem fs = FileSystem.get(new URI("hdfs://172.17.0.123:9000"), configuration, "hadoop"); 可能是没有阅读全文

posted @ 2022-10-20 14:59 ppjj 阅读(605) 评论(0) 推荐(0) 编辑

Hadoop写入时报没有权限org.apache.hadoop.security.AccessControlException): Permission denied: user=root

摘要： Caused by: org.apache.hadoop.ipc.RemoteException(org.apache.hadoop.security.AccessControlException): Permission denied: user=root, access=WRITE, inode 阅读全文

posted @ 2022-10-20 14:55 ppjj 阅读(814) 评论(0) 推荐(0) 编辑

2022年9月29日

Linux系统strac命令

摘要： strace :监控程序的执行状况在linux 空间下，运行一个程序时，操作系统会将应用程序封装一个进程的形式，参与操作系统的调度，可以使用strace 跟踪程序运行的情况。基本功能监控用户进程与内核进程的交互追踪进程的系统调用、信号传递、状态变化一、系统调用分类文件和设备访问：ope 阅读全文

posted @ 2022-09-29 10:29 ppjj 阅读(302) 评论(0) 推荐(0) 编辑

2022年9月26日

Linux tcpdump 命令使用详解

摘要：文章目录一、介绍二、基础用法三、进阶用法四、总结和建议一、介绍在日常工作中，a56爆大奖在线娱乐们总是能遇上各种各样奇怪的网络问题，比如a56爆大奖在线娱乐这台机器怎么 ping 不通了，a56爆大奖在线娱乐的 ssh 怎么又连不上了，这个控制台怎么又访问不了了等等各种网络问题，当然有时候可以通过 ping、telnet、arp 这些命令和阅读全文

posted @ 2022-09-26 11:55 ppjj 阅读(1433) 评论(0) 推荐(0) 编辑

2022年8月26日

spring中后置处理器

摘要： Spring后置处理器（BeanPostProcessor）（BeanFactoryPostProcessor) Spring的后置处理器，在应用Spring框架开发中非常重要，Spring底层的核心，就通过各种后置处理器去完成IOC容器的启动，AOP代理对象的创建。 Spring的后置处理器有两大阅读全文

posted @ 2022-08-26 23:06 ppjj 阅读(1788) 评论(0) 推荐(1) 编辑

使用jad反编译jar/war包项目

摘要：使用jd-gui，只能反编译具体一个.class文件，不能完成整个项目的反编译；而jad.exe能够满足反编译整个项目的需求。首先，下载jad.exe 下载地址：https://varaneckas.com/jad/ 解压后，发现点击jad.exe 无法启动，只会闪一下便退出。研究后发现，ja 阅读全文

posted @ 2022-08-26 21:42 ppjj 阅读(1104) 评论(0) 推荐(0) 编辑

公告