avatar
文章
490
标签
26
分类
11

秋叶半金

秋叶半金

hadoop2
发表于2025-07-30
HDFS 2NN 2NN不是NN的热备,当NN挂掉了,不能立马恢复NN。 工作: ​ a. 辅助NN,分担工作量,比如定期合并Fsimage和Edits,并推送给NN。 ​ b. 辅助恢复NN。 Client 工作: ​ a. 文件切分 ​ b. 与NN交互,获取文件位置信息 ​ c. 与DN交互,读写信息 HDFS文件块HDFS分块存储,dfs.blocksize参数配置,2.x/3.x默认为128mb,1.x默认为64mb 寻址时间:查询block的时间。 寻址时间为传输时间的1%,为最佳状态。 普通磁盘传输速率为100mb/s,固态200~300mb/s。 block大小=传输时间×传输速率=寻址时间/0.01×传输速率。 一般寻址时间为10ms,因此一般以128mb与256mb为主。虽然是100mb,但是取二进制整数为128mb。 为什么块的大小不能太小与太大? 太小,增加寻址时间。 太大,传输时间大于寻址时间,并发性太低,效率低。 HDFS写流程 选择节点问题? 1. 节点间通讯 负载均衡 传输架构 ...
道德经6_7章
发表于2025-07-30
  谷神不死,是谓玄牝。玄牝之门,是谓天地之根。绵绵呵!其若存!用之不堇。  天长,地久。天地之所以能长且久者,以其不自生也,故能长生。是以圣人后其身而身先,外其身而身存,非以其无私邪?故能成其私。
道德经4_5章
发表于2025-07-29
  道冲,而用之有弗盈也。渊呵!似万物之宗。锉其兑,解其纷,和其光,同其尘。湛呵!似或存。吾不知其谁之子,象帝之先。  天地不仁,以万物为刍狗;圣人不仁,以百姓为刍狗。天地之间,其犹橐龠乎?虚而不屈,动而俞出。多闻数穷,不若守于中。
领导谈话
发表于2025-07-28
  原则性、灵活性、了解机制。  思维转变。
hadoop(一)
发表于2025-07-24
  Hadoop是一个分布式系统基础架构,现在通常指一个分布式hadoop生态圈,用于海量数据存储与分析计算。 Hadoop 3.x组成 common hdfs yarn mapreduce NameNode DateNode Secondary node NameNode(nn):存储元数据 DataNode: 存储文件块数据以及校验和 Secondary NameNode node(2nn) : 每个一段时间对NameNode进行元数据备份。 yarn resource manager Node Manager applicationMaster container 容器 说明: 1.有多个客户端 2. 集群可以运行多个ApplicationMaster 3. 每个NodeManager可以有多个Container(默认1g-8g内存) hadoop安装 ip配置与主机名称hadoop /etc/sysconfig/network-script/ens33 /etc/hostname /etc/hostsVMwindows 配置文件/etc/pr ...
道德经-第三章
发表于2025-07-24
  不上贤,使民不争;不贵难得之货,使民不为盗;不见可欲,使民不乱。是以圣人之治也,虚其心⑤,实其腹,弱其志,强其骨,恒使民无知、无欲也。使夫知不敢、弗为而已,则无不治矣。  这种无为而治的方式,我认为只有在前期这种国家刚起步,人民生活没有好的保障,此时人民更关注的是吃的饱、穿的暖,而后期一旦没有生存上的担忧,那么此时人的思维就会转向别处,此时不能无为了,因为人开始有知和有欲了,需要干涉了。  道家这种思想很有意思,与法家相反,不是约束人,不是针对不好的行为进行约束,而是针对本源来说,否定的是引起人不好行为的事物。
《道德经》一二章
发表于2025-07-23
第一章  道可道也,非恒道也。名可名也,非恒名也。无名,万物之始也;有名,万物之母也。故恒无欲也,以观其眇;恒有欲也,以观其所缴。两者同出,异名同谓。玄之又玄,众眇之门。 第二章  天下皆知美之为美,恶已;皆知善,斯不善矣。有无之相生也,难易之相成也,长短之相刑也,高下之相盈也,音声之相和也,先后之相随也,恒也。是以圣人居无为之事,行不言之教,万物作而弗始,为而弗志也,成功而弗居也。夫唯弗居,是以弗去。
水德、黑红、玄
发表于2025-07-22
水德引用链接 水德   天下莫柔于水,而攻坚强者莫之能胜也,以其无以易之也。水(柔)之胜刚也,弱之胜强也。天下莫弗知也,而莫之能行也。故圣人之言云曰:“受邦之诟,是谓社稷之主;受邦之不详,是谓天下之王。正言若反。”   水具有柔顺、不争、无孔不入的特性,难以替代。  人们都知道柔胜刚的道理,但极少有人能真正践行。 黑红  以黑为底色,红为浮色,水为主、火为辅。 玄  玄色为黑红色,黑里带微赤,本色是月已落,日未出的天的颜色。 名字  玄熠,玄为黑红色,玄武者,幽冥也,属阴,熠为明亮,熠熠生辉者,为明也,二者虽矛盾,但不冲突。
动态
发表于2025-07-18
  
禅道
发表于2025-07-16
  禅道是否定的哲学。   否定的哲学是我们不指定具体范围,而是去画出错误区域,而在其余范围给予最大的自由与空间发挥。这样就有余地,或者是有退路,有主观能动性,这就是禅道的智慧,不会一棒子打死,而是会给予自由,让他们自己去想,去思考,这样悟出的道理才是真正属于自己的真理,才会刻骨铭心。   野狐禅的故事-不昧因果   宝剑未出匣时在哪里-不在外面  宝剑出匣时在哪里-不在里面   没有人说岭南有消息  有人说岭南没有消息  有人不说岭南有消息
123…49
avatar
秋叶半金
文章
490
标签
26
分类
11
最新文章
《清平乐·浮落苍海》2026-01-23
《秋凉》2025-11-03
《朗日骑行》2025-09-29
道德经28章2025-08-14
道德经22章2025-08-09
分类
  • 动态2
  • 娱乐1
  • 技术11
    • Hexo1
    • java2
    • markdown1
    • mysql6
    • 脚本1
标签
你的灯还亮着吗 青训 脚本 小说 易经 tas 道德经 hadoop 索引 mysql 读书 自我思考 孙子兵法 Hexo 星宿 电影 自我价值观 思考 markdown 算法 记录 提升 java 诗词 动态 tag
归档
  • 一月 20261
  • 十一月 20251
  • 九月 20251
  • 八月 20256
  • 七月 202514
  • 五月 20255
  • 四月 202514
  • 一月 20257
网站资讯
文章数目 :
490
本站访客数 :
本站总访问量 :
最后更新时间 :
©2020 - 2026 By 秋叶半金
框架 Hexo|主题 Butterfly