Spark优化笔记
优化杂谈优化点一：资源 spark作业在运行的时候能占用多少资源：cpu、memory 分配”足够多“的资源，在一定范围内，增加资源 和 性能提升 成正比的 Spark on YARN 作业跑在规划好的YARN的队列中
12345678910./bin/spark-submit -
...
浅谈四层和七层负载均衡
发表于
|
分类于
linux
浅谈四层和七层负载关于负载均衡，经常听到四层负载均衡和七层负载均衡的说法，他们之间有什么关系和区别呢，今天就简单总结概括下。
概述
用一句话来说，四层负载均衡就是工作在计算机网络OSI七层分层的第四层（传输层）的，七层负载军和则是工作在第七层（应用层）的。
也就是说，四层负载均衡是基于IP+端口的
...
storm创建DRPC远程客户端
发表于
|
分类于
bigdata
创建DRPC远程客户端DRPCClient创建方法如下：
12//conf map, drpc server, port no, timeout for the callnew DRPCClient(conf, "192.168.0.217", 3772, 5000);
conf如下：
12Con
...
研一前的暑假，深度学习初体验
选导师 在五月二十七号左右，再次来到一所新的城市，即将在这里度过我研究生的三年，之所以来这么早，是因为希望研究生阶段，能够跟着一个研究方向，自己比较感兴趣的导师。找的第一个导师比较偏学术一些，而我又希望自己在研究生阶段能够有一定的项目经历，所以在经过思考
...
Hello World
发表于
Welcome to Hexo! This is your very first post. Check documentation for more info. If you get any problems when using Hexo, you can find the answer in
...