道德经28章
知其雄,守其雌,为天下溪。为天下溪,常德不离,复归于婴儿。知其白,守其黑,为天下式,为天下式,常德不忒,复归于无极。知其荣,守其辱,为天下谷。为天下谷,常德乃足,复归于朴。朴散则为器,圣人用之,则为官长,故大制不割。
道德经22章
夫唯不争,故天下莫能与之争。 只不争,还不够,不争非真不争,而是给人一种自己没有争的意愿,做好自我的工作,无孔不入地渗入,因此这个是不争之争,往往能立于幸存之地。
道德经18_19章
十八章 大道废,有仁义;智慧出,有大伪;六亲不和,有孝慈;国家昏乱,有忠臣。
好的品质需要淬炼出来,淬炼往往是在相反的环境中,这样淬炼出的更纯粹。
十九章 绝圣弃智,民利百倍;绝仁弃义,民复孝慈;绝巧弃利,盗贼无有。此三者以为文不足,故令有所属;见素抱朴,少私寡欲;绝学无忧。
见素抱朴,少私寡欲。
道德经十六章
致虚极,守静笃。
道德经15章
浊以静之徐清,安以动之徐生。
道德经-10、11章
第十章 载营魄抱一,能无离乎?专气致柔,能如婴儿乎?涤除玄鉴,能无疵乎?爱民治国,能无为乎?天门开阖,能为雌乎?明白四达,能无知乎?生之畜之,生而不有,为而不恃,长而不宰,是谓玄德。
第十一章 三十辐共一毂,当其无,有车之用。埏埴以为器,当其无,有器之用。凿户牖以为室,当其无,有室之用。故有之以为利,无之以为用。
总结 聚精合魂,专气致柔,净欲如婴,持而不盈,开阖能雌。 无方能为用,有容方可纳,无欲则为刚。
道德经八九章
第八章 上善若水。水善利万物而不争,处众人之所恶,故几于道。居,善地;心,善渊;与,善仁;言,善信;政,善治;事,善能;动,善时。夫唯不争,故无尤。
第九章 持而盈之,不如其已;揣而锐之,不可长保。金玉满堂,莫之能守;富贵而骄,自遗其咎。功成身退,天之道也。
hadoop2
HDFS
2NN
2NN不是NN的热备,当NN挂掉了,不能立马恢复NN。
工作:
a. 辅助NN,分担工作量,比如定期合并Fsimage和Edits,并推送给NN。
b. 辅助恢复NN。
Client
工作:
a. 文件切分
b. 与NN交互,获取文件位置信息
c. 与DN交互,读写信息
HDFS文件块HDFS分块存储,dfs.blocksize参数配置,2.x/3.x默认为128mb,1.x默认为64mb
寻址时间:查询block的时间。
寻址时间为传输时间的1%,为最佳状态。
普通磁盘传输速率为100mb/s,固态200~300mb/s。
block大小=传输时间×传输速率=寻址时间/0.01×传输速率。
一般寻址时间为10ms,因此一般以128mb与256mb为主。虽然是100mb,但是取二进制整数为128mb。
为什么块的大小不能太小与太大?
太小,增加寻址时间。
太大,传输时间大于寻址时间,并发性太低,效率低。
HDFS写流程
选择节点问题?
1. 节点间通讯
负载均衡
传输架构
...
道德经6_7章
谷神不死,是谓玄牝。玄牝之门,是谓天地之根。绵绵呵!其若存!用之不堇。 天长,地久。天地之所以能长且久者,以其不自生也,故能长生。是以圣人后其身而身先,外其身而身存,非以其无私邪?故能成其私。
道德经4_5章
道冲,而用之有弗盈也。渊呵!似万物之宗。锉其兑,解其纷,和其光,同其尘。湛呵!似或存。吾不知其谁之子,象帝之先。 天地不仁,以万物为刍狗;圣人不仁,以百姓为刍狗。天地之间,其犹橐龠乎?虚而不屈,动而俞出。多闻数穷,不若守于中。