MapReduce大纲

1.Writable序列化序列化就是把内存中的对象,转换成字节序列(或其他数据传输协议)以便于存储(
2019年02月09日 427次浏览

二分查找的边界问题

使用二分查找时,特别是涉及左右边界时,不同的写法会产生不同的效果, right 是闭区间还是开区间 以及 left<right 还是 left<=right 会影响最终的返回结果。public class BinarySearch { /** * 查找左边界: *
算法 2021年07月26日 92次浏览

解决IDEA问题 Cause: zip END header not found

IDEA在编译Gradle项目时会自动下载对应版本的Gradle-XXX.zip,因为某些原因经常会下载失败,进而造成错误:Cause: zip END header not found.解决办法也很简单,就是把损坏的压缩包删除,尝试重写编译。默认的下载位置在 用户目录/.gradle/wrappe
2021年04月16日 138次浏览

osv流程简解

demo3d.pyMain函数入口从xs.dat输入地震图像goPlanar 计算地震平面度goFaultOrientScan 计算投票面和最终投票得分图goSurfaceVoting 计算投票面和最终投票得分图goFaultSurfaces 构造断层面demo3d.pyMain函数入口def ma
脚本 开发 日常 2019年11月23日 642次浏览

HadoopHA之ResourceManager HA

配置Yarn在配置完成NameNodeHA的基础上,只需再配置一下yarn-site.xml即可。&
zookeeper 2019年02月15日 394次浏览

HaoopHA之NameNode HA

先配置好Haoop集群配置ZookeeperHaoopHA的自动故障转移需要Zookeeper的支持
zookeeper 2019年02月15日 355次浏览

Java操作Zookeeper

ZooKeeper的操作较为简单,下面是一个简单的客户端操作实例客户端监听服务器上下线的简单实现:G
zookeeper 2019年02月14日 456次浏览

MapReduce编程规范

案例:MapReduceDemoREADME中给出了对应知识点Mapper阶段用户自定义的Mappe
2019年02月09日 723次浏览

HDFS回收站

默认回收站默认值fs.trash.interval=0,0表示禁用回收站,可以设置删除文件的存活时间
2019年02月05日 346次浏览

HDFS快照管理

快照相当于对目录做一个备份。并不会立即复制所有文件,而是指向同一个文件。当写入发生时,才会产生新文件
2019年02月05日 407次浏览