大数据
-
怀疑不如坚定，这个标题有点绕，哈哈
本文的由来是因为偶然在咱们的QQ群中看到的聊天而来的。 嗯，果然很强势啊，能拿到这个薪水真心不错了。小编一激动去查了一下，发现此粉丝购买了不少小强老师的课(http://edu.51cto.com/lecturer/4626073.html) 我…
-
Redis过期策略及实现原理
我们在使用redis时，一般会设置一个过期时间，当然也有不设置过期时间的，也就是永久不过期。 当我们设置了过期时间，redis是如何判断是否过期，以及根据什么策略来进行删除的。 redis设置过期时间：expire key tim…
-
sqlserver查询表名的注释的快捷键设置方法
在sqlsersver中的【工具】--》【选项】--》【键盘】的查询快捷方式中设置 ctrl+3=sp_select_talberowName
-
非平衡数据的处理方法
更多大数据分析、建模等内容请关注公众号《bigdatamodeling》 在分类问题中常常遇到一个比较头疼的问题，即目标变量的类别存在较大偏差的非平衡问题。这样会导致预测结果偏向多类别，因为多类别在损失函数中所占权…
-
master jps 没有namenode问题
在主节点机器上执行命令/opt/modules/app/hadoop-2.7.4/sbin/start-all.sh（相当于执行/opt/modules/app/hadoop-2.5.0/sbin/start-dfs.sh和/opt/modules/app/hadoop-2.5.0/sbin/start-yarn.sh）然后jps发现没有name…
-
大数据常见错误
1、用./bin/spark-shell启动spark时遇到异常：java.net.BindException: Can't assign requested address: Service 'sparkDriver' failed after 16 retries! 解决方法：add export SPARK_LOCAL_IP="127.0.0.1" to sp…
-
三、zookeeper--实现NN和RM的HA
一、hdfs namenode HA 1、概述 在hadoop1.0的时候，hdfs集群中namenode存在单点故障的问题，当namenode不可用的时候，就会导致整个hdfs集群服务不可用。另外如果需要临时对namenode进行设计或者其他操作时，停掉n…
-
为什么大数据工程师比Java程序员工资高
为什么大数据工程师比Java程序员工资高 科多大数据开发课程培养的主要是Java工程师和开发工程师，授课内容包含Java和大数据部分。 Java作为一门主流的编程开发语言和职场技能，已经得到越来越多的应届毕业生和职场…
-
3.一致性协议 2PC协议(ZooKeeper手记)
2PC和3PC来历 在分布式系统中，每一个机器节点都能明确知道，自己在进行的事务操作是否成功(可以理解为单机操作)，但是却无法直接获取到其他分布式节点的操作结果。因此，当一个事务操作需要跨越多个分布式节点的时…
-
Soot生成控制流图
1.将soot.jar文件复制到工程bin目录下；2.在cmd中执行如下命令java -cp soot-trunck.jar soot.tools.CFGViewer --soot-classpath .;"%JAVA_HOME%"/jre/lib/rt.jar com.wauoen.paper.classes.Activity其中…