开源

  • Scala中包、类、对象、成员访问权限理解

    本文通过下面一个程序简单分析下包、类、对象访问权限的情况: package spark {   package navigation {     private[spark] class Navigator {…

    大数据 2021年11月16日
  • win7 设置环境变量后,需要重新电脑问题

    设置环境变量后,需要关闭cmd,然后运行set,也行环境变量就改变了。如果没有可以进行以下操作: 打开任务管理器,找到所有的explorer.exe进程,然后将其结束掉。 2、重新打开explorer.exe进程即可。 环境变量所在…

    大数据 2021年11月16日
  • 业务相关同步机制

    【现象】:竞猜系统规定一个用户每天只可以领取免费筹码一次,并发领取筹码时发现相 同用户重复领取问题 【原因分析】:出现重复领取是因为开始没有加线程加锁,在多并发时容易出现重复领取的情况。 【解决方案】:…

    大数据 2021年11月16日
  • SonarQube简介

    Sonar是一个用于代码质量管理的开源平台,用于管理源代码的质量 通过插件形式,可以支持包括java,C#,C/C++,PL/SQL,Cobol,JavaScrip,Groovy等等二十几种编程语言的代码质量管理与检测 Sonar可以从以下七个维度检测代…

    大数据 2021年11月16日
  • Web 日志mapreduce 预处理清洗

    WEB访问日志 即指用户访问网站时的所有访问、浏览、点击行为数据。比如点击了哪一个链接,在哪个网页停留时间最多,采用了哪个搜索项、总体浏览时间等。而所有这些信息都可被保存在网站日志中。通过分析这些数据,…

    大数据 2021年11月16日
  • (六) appium 1.6 使用与APP-inspector定位

    1.6起放弃uiautomation; 改用xcuiteest机制; 环境基础:xcode8,ios9.3以上 1. 安装最新版1.6.3 安装cnpm: npm install -g cnpm --registry=https://registry.npm.taobao.org 安装appium1.6.3: cnpm install -g…

    大数据 2021年11月16日
  • 大数据要学什么?看看这份大数据课程大纲

    大数据领域每年都会涌现出大量新的技术,成为大数据获取、存储、处理分析或可视化的有效手段。大数据技术能够将大规模数据中隐藏的信息和知识挖掘出来,为人类社会经济活动提供依据,提高各个领域的运行效率,甚至…

    大数据 2021年11月16日
  • Token 认证的来龙去脉

    不久前,我在在前后端分离实践中提到了基于 Token 的认证,现在我们稍稍深入一些。 通常情况下,我们在讨论某个技术的时候,都是从问题开始。那么第一个问题: 为什么要用 Token? 而要回答这个问题很简单——因为它…

    大数据 2021年11月16日
  • 算法和算法实现

    算法是一切程序设计的灵魂和基础。 很多开发者都知道“程序=数据结构+算法”这个著名的公式,简单点来说,我更喜欢表单成为“后台程序=数据+逻辑”。 1 什么是算法?      字面含义:    &nbs…

    大数据 2021年11月16日
  • python url采集

    python利用百度做url采集pip install tableprintparamiko==2.0.8语法:python url_collection.py -h输出帮助信息python url_collection.py 要采集的信息 -p 页数 -t 进程数 -o 保存的文件名以及格式新建文件touch u…

    大数据 2021年11月16日