个人技术分享

每日两题 / 131. 分割回文串 && 42. 接雨水（LeetCode热题100）

数据量较小，考虑直接暴力，每次dfs：以bg作为左区间，往右遍历，找到一段回文串区间后，将回文串插入。第i个位置的雨水高度为：左边最高柱子与右边最高柱子的最小值。，并以下一个下标为bg，再次进行dfs，dfs后记得回溯。先预处理左右两边的最高柱子高度，然后线性遍历一遍即可。

中国区 AWS 控制台集成 ADFS 登录

本文将使用一台 Windows Server 2019 服务器实现自建 AD + ADFS 环境集成到中国区 AWS 控制台进行单点登录.参考文档: https://aws.amazon.com/cn/blogs/china/adfs-bjs/生产环境建议先给本地连接设置静态 IP 地址, 不设置也没事儿, 后面配置功能的时候会有 Warning 提示, 测试环境忽略不碍事. 管理员身份打开 PowerShell 执行下面命令:创建 AD 账号ADFS 基础配置安装 Firefox 或 Chr

中国区 AWS 控制台集成 ADFS 登录

本文将使用一台 Windows Server 2019 服务器实现自建 AD + ADFS 环境集成到中国区 AWS 控制台进行单点登录.参考文档: https://aws.amazon.com/cn/blogs/china/adfs-bjs/生产环境建议先给本地连接设置静态 IP 地址, 不设置也没事儿, 后面配置功能的时候会有 Warning 提示, 测试环境忽略不碍事. 管理员身份打开 PowerShell 执行下面命令:创建 AD 账号ADFS 基础配置安装 Firefox 或 Chr

Hadoop 客户端 FileSystem加载过程

hadoop-hdfs-project/hadoop-hdfs/src/main/resources/META-INF/services，可以看到，这个目录下有一个org.apache.hadoop.fs.FileSystem文件。一般我们会这么使用，那么问题来了，FileSystem是个抽象类，我们到底用哪一个呢？通过 loadFileSystems这个方法会加载文件中的所有类，并且根据scheme生成一个map，key是scheme，value是fs。2、如果配置里没有，这个时候用加载的。

hadoop hdfs优势和缺点

hdfs优点高容错性适合处理大数据可构建再廉价的机器上hdfs缺点不适合做低延迟数据访问毫秒级的存储数据做不到无法高效的对大量小文件进行存储不支持并发写入 文件随机修改一个文件只能有一个writer 不允许多个线程同时写仅支持数据追加 不支持文件的随机修改hdfs组织结构namenode 就是master 他是一个主管 管理者管理hdfs的名称空间配置副本策略管理数据块映射信息处理客户端读写请求datanode 就是slave namenode下达