• itzzy
    2018-12-06
    文中老师提到是工作一段时间读研的,我自己也有读研的想法,从现在开始准备,也要1-2年才能考的上,读完研出来33,34了,担心没公司要,互联网还是看重年龄的,特别迷茫,希望老师给些建议,感谢!
     1
     31
  • 老男孩
    2018-12-08
    看到这篇文章,我想起了一首歌《you raise me up》。因为我的背景过往不入流。想想周边工作的同事大多都是好学校毕业的,或者学历很高,感觉到很自卑。就怕别人问我是哪个学校毕业的😑,总是纠结于过往,高中三年为什么不好好读书?有时候想放弃,算了吧我这样的不适合混程序员这行业,不如去做一个歌手。2014年几乎半年在家里待着,不想上班也找不到合适的工作。直到看到《大型网站技术架构》那本书,我犹豫了片刻,因为我担心买了书不看放在家里当装饰品。最后我还是在当当上买了一本,没想到的是,我居然用了三个晚上把这本书读完了!趁热打铁,我用书中的内容知识去找工作,把面试的人都说蒙了。两周后我从新开始了工作。刚开始我对系统的理解只停留在模块组件功能实现,所谓的架构也只是逻辑分层而已。对于大型网站是个什么东西完全没有概念,对了这本书,至少我可以装逼了🤔。所以看到智慧老师的这个专栏,我片刻的犹豫都没有。因为我很怀念当年读完《大型网站技术架构》那本书以后,那种装逼的感觉。😎
     2
     13
  • 杰之7
    2018-12-06
    通过过去接近一个月的大数据技术学习,真把老师所授的每一篇文章都认真读过,也写了一些阅读记录,今天我先用自己的话梳理一下自己对大数据架构结构的理解。首先因为有海量数据储存的需求,Google发表的大数据技术的三驾马车的论文,分布式文件系统、分布式计算框架、分布式数据库。然后人们开发了相关的产品。在储存上开发了HDFS、Hbase,在分布式计算框架上开发了基于批处理的Mapreduce、spark的计算框架,数据仓库Spark SQL、Hive,基于流处理的Flink、Spark streaming
    Storm等,在资源调度上有了Yarn,上述的这些技术通过部署在同一集群中完成大数据技术的计算。然后,我写一点我一个月左右的学习感受,没有在学习学习过计算机,真的哪怕我当时学了计算机,一样也是浑浑噩噩,不会有所成绩。现在我开始学习大数据技术,肯定一定会坚持和老师学完并在每一篇文章后面留下我的足迹。就如老师在文章中分享的王小波先生文字那样,人活着就是要感受自身的一些经历,做自身喜欢的事,见到自己喜欢的人,足够了。现在我从零开始学习大数据技术,就是相信我甚至笃信我可以做好这件事,也相信不久或者未来会遇见更多有趣的人和事。也遇见了您,在每一篇文章中,我能通过您的文字理解大数据架构的原理和和技术,把大多数人认为有难度的内容用通俗易懂的方式传授给我们,也渴望在接下来的短暂两个月里继续和您一同学习成长。
    展开
    
     8
  • 在路上
    2019-01-08
    我也是非计算机专业出身,不入流学校毕业,然后通过自己努力并不比别人差,和清华北大毕业的一起工作也不觉得比我强呢,哈哈,跟着老师一起加油。
     1
     7
  • gogo
    2018-12-06
    看到我的昵称的时候,还有点小害怕呢! 加油💪!
    
     5
  • godtrue
    2019-09-28
    😅老师所言感同身受,我也是不入流的学校,但在我们学校我应该算是非常刻苦的学生,学的是计算机及应用,软硬件都有学,不过当时并认识不到这些基础理论的重要性,毕业时都没信心从事编程工作,工作后发现确实如此,工作中使用的技术,那必须一个个重新学。再后来就发现基础没打好,很容易到瓶颈期,英语一样,要么是台阶要么是拦路虎,工作两三年时,都觉得自己不适合编程,不过从农村出来没背景也没有其他更多更好的选择,赶上了好时代,就算以后可能还会踟蹰,现在也必须拼命学习,因为,每次回老家都能深深的体会到和父辈们吃的苦比起来,学习这件事简单的不得了。
    付出时间和精力,带上大脑和心灵,其实就是在旅行,在知识的海洋里,在多线程的工厂里,在大数据的森林里,在分布式的迷宫里,在io的管道里…

    作者回复: 加油

    
     2
  • 追梦小乐
    2018-12-09
    不甘目前重复业务的工作,工作之余一直在看大数据这一块,决心进入这个领悟去看看有着什么不一样的风景!所以在看到与大数据相关的专栏出来毫不犹豫就买了,一路坚持看下来,之前不太理解的一些知识点有了更进一步的理解,我是通过这个专栏第一次认识了老师,感觉老师不但技术深度高,对人生哲学认知这一块也理解很深刻!
    
     2
  • 走小調的凡世林
    2019-12-01
    请教下老师,我们有个需求:根据各种自定义规则(比如分辨率、大小等)计算海量资源的分数(资源可以是图片、视频、音频)。总分100,图片分辨率太小或视频太大都要扣分,最后算出一个资源总分,这种需求可以用spark实现吗?主要考虑算分过程可能比较耗时,且资源数量较多。如果可以的话如何实现呢?老师是否可以提供下思路,感谢!

    作者回复: 听起来,在你们这个需求场景中,每张图片的分数计算是独立的,感觉自己开发一个分布式程序就可以搞定。

    这样的场景也可以用Spark,不过因为没有关联计算,计算复杂度比较低,虽然数据量大,但是每张图片都是独立的,其实不复杂,用不用Spark都可以。

     1
     1
  • 盖饭
    2019-03-26
    老师这期答疑,恰如其分的为快要看不下去的人打了个鸡血。
    
     1
  • cwx0220
    2019-03-04
    我只愿蓬勃生活在此时此刻,无所谓去哪,无所谓见谁。那些我将要去的地方,都是我从未谋面的故乡。以前是以前,现在是现在。我不能选择怎么生,怎么死;但我能决定怎么爱,怎么活。终极一生,到最后不因虚度光阴而悔恨,不因碌碌无为而遗憾。有人和我一样是从帅张那过来的么?😀
    
     1
  • REAL_MADIRD
    2018-12-10
    老师对人生的理解跟我很像,曾经我也想着人生就要干大事,可是慢慢的就被生活一次次的打回原形,渐渐的接受了自己是个普通人的事实。可是那有怎么样呢,只要我每天都在学习,每天都有进步,我的每一天都生活的有意义,那我连起来的人生也就有了意义,况且我还年轻,要走的路还很长,说不准什么时候,积累的量变就转化成了质变,这也许就是我活着的意义。
    
     1
  • 风轻扬
    2018-12-07
    同问关于在职考研,烦请解惑,谢谢
    
     1
  • 往事随风,顺其自然
    2018-12-06
    能不能多讲些原理性工作
    
     1
  • 🐱您的好友William...
    2018-12-06
    《沉默的大多数》也不错,一次在飞机场买的,坐飞机的过程中看完的,非常好,据说和《我的精神家园》有重复的文章,也可以看一看,开启独立思考新篇章。
    
     1
  • 纯洁的憎恶
    2018-12-06
    我的硕士方向就是图形学,我当时觉得图形学的成果看起来很好玩,但要做研究都是枯燥复杂的数学公式,我很佩服老师通过兴趣自己学通了计算机和图形学。与老师相比,我可能要算是比较入流大学的不入流的学生,工作已经好几年了,工作内容早已和计算机无关。看着当初一起在实验室通宵的同学们,一个一个都在财富自由的道路上高歌猛进时,我既羡慕又彷徨。不知是不是自己的选择出来问题。
    
     1
  • linazi
    2018-12-06
    跟着老师 听完 读完 思考完
    终于把之前的大数据碎片概念可以拉成一条线了
    计算 存储 资源管理
    围绕着它们衍生出各种各样的产品 技术 框架
    不再杂乱了
    
     1
  • 王平
    2019-12-09
    做一些有趣的事情,这个很有感触。作为技术人员,阅读技术文章,往往并不是想解决什么问题。只想看看他在用什么思路解决什么问题。当发现跟你原本推动不谋而合时,就是兴趣所在。而不是兴趣的初级阶段,拿出个demo或者只言片语炫技而已。这大概就是古人常说的道法术的区别。
    
    
  • iandbeyond
    2019-09-22
    老师,一直有个问题很困惑,我们是装备制造行业,一台设备的参数有几千个,1秒采集一次数据,持续采集,成百上千台设备,一直想不清楚用HDFS还是HBase来做存储好些。

    作者回复: 如果只是存储,那么HDFS和HBase都可以。关键是看你存储以后做什么用,如果是做离线的数据统计,那么就用HDFS;如果要即时查找,那么就用HBase。

     1
    
  • 周小桥
    2019-05-24
    木子的话很受用。
    
    
  • 路平
    2019-05-19
    《企业应用架构模式》,已下单。
    
    
我们在线,来聊聊吧