MapReduce为什么不适合做迭代计算(为什么说mapreduce不适合实时数据处理?)

大数据学习路线

老铁们,大家好,相信还有很多朋友对于MapReduce为什么不适合做迭代计算和为什么不建议递归的相关问题不太懂,没关系,今天就由我来为大家分享分享MapReduce为什么不适合做迭代计算以及为什么不建议递归的问题,文章篇幅可能偏长,希望可以帮助到大家,下面一起来看看吧!

本文目录

  1. MapReduce为什么不适合做迭代计算
  2. C语言全局变量和局部变量会冲突吗为什么
  3. 为什么许多程序员从来都不用break或者continue语句

MapReduce为什么不适合做迭代计算

磁盘写入太多,每一次mapreduce都要落盘,但spark只有在shuffle才会,sparkrdd是就是rdd方法的一次次递归调用,适合迭代次数多的计算

C语言全局变量和局部变量会冲突吗为什么

全局变量要慎用,看你定义的全局变量是对整个工程的还是单个文件的。建议不要甚至禁止使用对整个工程的全局变量。因为不同的文件或不同线程来回调用形容是你的出现崩溃并且很难找出来。对整个文件的全局变量最好加上static这样这个变量就仅仅限制在当前这个文件中了。局部变量一般在函数内部定义,注意不要和文件头定义的全局变量重名了,要不机器会分不清的。

为什么许多程序员从来都不用break或者continue语句

写程序应该尽量的避免使用break和continue

for、while循环语句里出现return是没有问题的,但如果你的循环里出现了break和continue,往往是因为对循环的逻辑没有考虑情况,考虑周全了基本不需要break和continue。因为用了break和continue之后会让循环的逻辑和终止的条件变得复杂,难以确保正确的结果。

情景一:下面一段代码表示name里含有“bad”这个词,就跳过后面的循环代码。

这是一种“负面”的描述,它不是告诉你什么时候“做”一件事,而是告诉你什么时候“不做”一件事。想要弄清楚它到底要干什么,就必须搞清楚continue会导致哪些语句被跳过了,然后脑袋得有个逆向逻辑,才能知道它到底想做什么。

这就是为什么含有break和continue的循环很难理解,它们靠“控制流”来描述“不做什么”,而“跳过做什么”,到最后你也没有搞清楚它到底“要做什么”。

其实上面的代码其实完全可以摒弃continue:

这种代码是一种更加“正面”地描述,表示name不含“bad”的时候,就将它加到goodNames的链表里。当你再次读到这段代码时,就能清晰地呈现出它的条理和结构。

情景二:for和while循环头部有唯一终止循环的条件,但在循环体中加入break,实际增加了一个退出条件。

当condition2成立的时候,break就会退出循环。但往往只需要把这个条件合并到循环头部,就可以去掉break,而不需要再进行逆向思维。

情景三:很多break退出循环后,接下来就是一个return

下面函数检查names链表里是否存在一个名字,包含“bad”,包含就通过break跳出,并通过return返回结果。

这种break往往可以直接换成returntrue,而不是对result变量进行赋值,需要通过break出去后,最后才通过return返回。如果循环结束了还没有return,就返回false。改完后同时消除了break语句和result这个变量。

很多的例子通过消除continue和break,无一例外使得代码变得条理清晰容易理解,也更容易确保正确结果。如果代码中出现了continue可以将continue的条件方向,如果代码中出现了break可以将break的条件合并到循环头部的终止条件里去掉break,而剩下的1%特别复杂的逻辑可以把循环里复杂的部分提取出来做成函数调用,这样就彻底地消除了continue和break。

编程不当当是一门技术,而且是一门艺术。

编程是一种创造性的工作,并不是说你写了多少多少万行代码了你就很牛逼。如果总是匆匆忙忙写出了代码,却不会回过头的推敲、修改和提炼,是很难精通这门艺术的。一个好的程序员删掉的代码比留下来的代码要多得多,如果你看见他写了很多代码,却没有删掉多少,那他的代码中一定有很多的垃圾。

好的代码不可能一蹴而就,代码灵感总是零零星星的陆续到来,所以再厉害的程序员都是通过很长一段时间的沉淀才能写出简单而优雅的代码。如果此时你反复提炼代码已经不再有进展不烦暂时放下过几个星期或者几个月再回过头来看,又会获得焕然一新的灵感。

以上个人浅见,欢迎批评指正。

认同我的看法,请点个赞再走,感谢!

喜欢我的,请关注我,再次感谢!

文章分享结束,MapReduce为什么不适合做迭代计算和为什么不建议递归的答案你都知道了吗?欢迎再次光临本站哦!

MapReduce

声明:本文内容来自互联网不代表本站观点,转载请注明出处:https://bk.77788889.com/12/108055.html

相关推荐