浪浪山下那个村
浪浪山下那个村
代码仓
PuaSE
我的开源
留言板
AboutMe
管理登录
2025年06月28日
浏览 1.08K
大数据
用idea 运行Zookeeper是报错 com.codahale.metrics.Reservoir找不见
问题现象 用idea 运行Zookeeper是报错 com.codahale.metrics.Reservoir找不见。 问题原因 Zookeeper-server下面的pom.xml 里面引用jar的时候加了<scope>provided&l ......
阅读更多
2025年06月15日
浏览 1.42K
大数据
distributedShell 样例源码详解
简介 distributedShell是Yarn自带的应用程序，和MR类似，当前工具可以用来对Yarn进行压测。 使用示例 参考命令如下： ./bin/hadoop jar ./share/hadoop/yarn/hadoop-yarn-applicati ......
阅读更多
2025年06月08日
浏览 976
大数据
HDFS 报错：Permission denied: user=dr.who, access=WRITE, inode="/":hadoop01
背景 新建的HDFS使用web短上传文件的时候报错： Permission denied: user=dr.who, access=WRITE, inode="/":hadoop01 解决 在core-site.xml中增加下面配置,其中hadoop01 ......
阅读更多
2025年05月25日
浏览 956
大数据
DistCp源码解析
说明 DistCp（分布式拷贝）是用于大规模集群内部和集群之间拷贝的工具。 它使用Map/Reduce实现文件分发，错误处理和恢复，以及报告生成。 它把文件和目录的列表作为map任务的输入，每个任务会完成源列表中部分文件的拷贝。 由于使用了Map/Redu ......
阅读更多
2025年05月25日
浏览 664
大数据
leaseManager详解
简介 HDFS作为一个分布式文件系统，只允许一个客户端同时对一个文件进行修改操作。租约就是为了实现独占的写操作的机制。 HDFS租约的主要实现类是LeaseManager。 Lease 的使用场景如下： 客户端在申请创建新的文件或者向文件追加都会先向N ......
阅读更多
2025年05月16日
浏览 1.06K
大数据
webhdfs详解
简介 hdfs提供了一种除了通过rpc的方式进行文件操作的方式之外，还提供了http的方式对文件进行操作的方式：webhdfs。支持HDFS 的完整FileSystem / FileContext接口。 其中Router和NameNode都支持了webhd ......
阅读更多
2025年04月13日
浏览 10
大数据
Hadoop Yarn的ResourceManager压测指南
Hadoop自带的hadoop-sls只能用于压测调度器，可在实际中影响ResourceManager性能的因素比较多，不能只看调度器。 当前项目可构造海量的Fake NM节点，用于模拟线上RM的巨大压力场景，进行优化。 详细参见：https://gith ......
阅读更多
2025年04月13日
浏览 650
大数据
【Hadoop仿真】如何在仿真NodeManager中实现心跳
Hadoop自带的hadoop-sls只能用于压测调度器，可在实际中影响ResourceManager性能的因素比较多，不能只看调度器。当前项目可构造海量的Fake NM节点，用于模拟线上RM的巨大压力场景，进行优化。首先需要对NM进行仿真。
阅读更多
2025年03月29日
浏览 631
大数据
Mapredcue作业启动
Mapreduce作业启动源码解析，从源码开始理解Mapreduce。
阅读更多
2025年03月09日
浏览 1.15K
博客相关
Gitea 自建代码仓流量大坑
背景 前端时间租的腾讯云服务器是按照流量计费的，最近一段时间流量走的老快了，并且发现默认1G的带宽老是卡。 原因 通过分析nginx的日志发现有大量的爬虫在大批量的访问代码仓。导致占用了大量带宽。 解决 nginx中过滤爬虫 在nginx中配置下面信息，过 ......
阅读更多
上一页
下一页
1
2
3
4
5
6
7
8
9
10
访问最多的文章
32.3K浏览
debian 11 安装clang-15
24.87K浏览
博客接入Google 广告
20.6K浏览
Linux 安装常见编译工具安装
19.65K浏览
About Me
15.04K浏览
国产动漫详细列表
存档
2026 年 07 月
6
2026 年 06 月
2
2026 年 05 月
1
2026 年 04 月
3
2026 年 03 月
2
2025 年 12 月
2
2025 年 11 月
1
2025 年 10 月
2
2025 年 07 月
1
2025 年 06 月
3
2025 年 05 月
3
2025 年 04 月
2
2025 年 03 月
3
2024 年 12 月
1
2024 年 11 月
1
2024 年 10 月
1
2024 年 09 月
2
2024 年 08 月
1
2024 年 07 月
1
2024 年 06 月
2
2024 年 05 月
1
2024 年 04 月
1
2024 年 03 月
1
2023 年 12 月
1
2023 年 11 月
5
2023 年 10 月
2
2023 年 09 月
5
2023 年 08 月
2
2023 年 07 月
2
2023 年 05 月
5
2023 年 04 月
2
2023 年 02 月
1
2023 年 01 月
4
2022 年 12 月
3
2022 年 11 月
3
2022 年 08 月
1
2022 年 07 月
2
2022 年 05 月
1
2022 年 04 月
1
2022 年 02 月
1
2022 年 01 月
1
2021 年 12 月
1
2021 年 11 月
2
2021 年 10 月
0
2021 年 08 月
1
2021 年 05 月
1
2021 年 04 月
2
2021 年 03 月
1
2021 年 02 月
0
2021 年 01 月
1
2020 年 12 月
1
2020 年 11 月
14
2020 年 10 月
4
2020 年 09 月
8
2020 年 08 月
5
2020 年 07 月
5
2020 年 06 月
4
2020 年 05 月
9
2020 年 04 月
13
2020 年 03 月
4
2020 年 02 月
3
2020 年 01 月
5
2019 年 12 月
6
2019 年 11 月
2
2019 年 10 月
1
2019 年 09 月
5
2019 年 08 月
6
2019 年 07 月
2
2019 年 06 月
1
浪浪山下那个村
应无所住，而生其心。
文章
192
评论
354
浏览
243.68w
公告
转载请注明转载自"浪浪山旁那个村"
本网站由
提供CDN加速
本网站由提供OHTTPS提供自动部署证书
分类
编程语言
16
大数据
66
数据库
38
生活相关
3
AI相关
25
读书+追剧
3
博客相关
14
其他
26
标签
原创
44
redis
42
转载
37
hadoop
32
机器学习
21
flink
18
源码
16
linux
11
Java
11
博客
10
访问最多的文章
32,303浏览
debian 11 安装clang-15
24,869浏览
博客接入Google 广告
20,602浏览
Linux 安装常见编译工具安装
19,648浏览
About Me
15,038浏览
国产动漫详细列表
存档
2026 年 07 月
6
2026 年 06 月
2
2026 年 05 月
1
2026 年 04 月
3
2026 年 03 月
2
2025 年 12 月
2
2025 年 11 月
1
2025 年 10 月
2
2025 年 07 月
1
2025 年 06 月
3
2025 年 05 月
3
2025 年 04 月
2
2025 年 03 月
3
2024 年 12 月
1
2024 年 11 月
1
2024 年 10 月
1
2024 年 09 月
2
2024 年 08 月
1
2024 年 07 月
1
2024 年 06 月
2
2024 年 05 月
1
2024 年 04 月
1
2024 年 03 月
1
2023 年 12 月
1
2023 年 11 月
5
2023 年 10 月
2
2023 年 09 月
5
2023 年 08 月
2
2023 年 07 月
2
2023 年 05 月
5
2023 年 04 月
2
2023 年 02 月
1
2023 年 01 月
4
2022 年 12 月
3
2022 年 11 月
3
2022 年 08 月
1
2022 年 07 月
2
2022 年 05 月
1
2022 年 04 月
1
2022 年 02 月
1
2022 年 01 月
1
2021 年 12 月
1
2021 年 11 月
2
2021 年 10 月
0
2021 年 08 月
1
2021 年 05 月
1
2021 年 04 月
2
2021 年 03 月
1
2021 年 02 月
0
2021 年 01 月
1
2020 年 12 月
1
2020 年 11 月
14
2020 年 10 月
4
2020 年 09 月
8
2020 年 08 月
5
2020 年 07 月
5
2020 年 06 月
4
2020 年 05 月
9
2020 年 04 月
13
2020 年 03 月
4
2020 年 02 月
3
2020 年 01 月
5
2019 年 12 月
6
2019 年 11 月
2
2019 年 10 月
1
2019 年 09 月
5
2019 年 08 月
6
2019 年 07 月
2
2019 年 06 月
1