大数据

  • 免费资源 | ActiveReports 报表控件发布多平台 Demo 代码集合

    近期,ActiveReports 产品开发组的小伙伴针对大家比较关注的报表功能、常见问题、经典实现,特意准备了一个Demo代码集合,涉及WinFormss / ASP.NET / MVC 多个技术平台,包含导出、打印、WebViewer、HTML5Viewer、…

    大数据 2021年11月16日
  • 什么时候触发GC

    Young GC----针对年轻代 当Eden区满了的时候,会触发Young GC Full GC----针对整个堆 1. 在发生Young GC的时候,虚拟机会检测之前每次晋升到老年代的平均大小是否大于年老代的剩余空间,如果大于,则直接进行Full G…

    大数据 2021年11月16日
  • 三、hive--jdbc的使用

    一、jdbc连接mysql代码示例 public class TestConnector { final static String USER = "root"; final static String PASSWORD = "wjt86912572"; final static String URL = "jdbc:mysql://bigdata121:3306/metasto…

    大数据 2021年11月16日
  • Web服务的性能测试

    引言1. 尝试去理解是把更多的努力放在测试上还是在生产中更快的解决问题,权衡两者。 2. 一个失败的测试不会直接影响到用户,但是一旦产品开始工作,便开始影响。 测试应该一直将终端用户的视角铭记于心,去保证软…

    大数据 2021年11月16日
  • Thrift 资源清理代码剖析

    void TSocket::close() {  if (socket_ != -1) { #ifdef _WIN32      shutdown(socket_, SD_BOTH);      ::closesocket(socket_);#else      shutdown(socket_, SHUT_RDWR);      ::close(socket_);#endif   }  soc…

    大数据 2021年11月16日
  • 光模块接口类型大盘点

    今天来讲一讲光模块接口类型 光模块是可以发射和接收模拟信号的光学器件。电信号通过光模块的发射端后转化为光信号,再经过接收端将光信号转化为电信号以此实现光电转换。 要想让他们实现信息交换,需要将两个光模…

    大数据 2021年11月16日
  • Flink在美团的实践与应用

    作者: 刘迪珊 本文整理自8月11日在北京举行的Flink Meetup,分享嘉宾刘迪珊(2015年加入美团数据平台。致力于打造高效、易用的实时计算平台,探索不同场景下实时应用的企业级解决方案及统⼀化服务)。 美团实时计算平…

    大数据 2021年11月16日
  • 超大数据下大批量随机键值的查询优化方案

    一、问题描述 键值查询是很常见的查询场景,在数据表上建有索引后,即使表中数据记录数巨大(几亿甚至几十亿行),用键值查询出单条记录也会很快,因为建立索引后的复杂度只有 logN(以 2 为底)次, 10 亿行数据也…

    大数据 2021年11月16日
  • Hadoop2.6.0学习笔记(三)Hadoop序列化

    鲁春利的工作笔记,谁说程序员不能有文艺范?   序列化和反序列化在分布式数据处理中,主要应用于进程建通信和永久存储两个领域。 序列化(serialization)就是结构化的数据转换为字节流以便在网络上传输或写…

    大数据 2021年11月16日
  • 三、hadoop用户认证--kerberos

    一、HDFS权限问题:默认情况下,HDFS的权限认证是开启的,通过在 hdfs-site.xml中设置 dfs.permissions 为true或者false来开启、关闭。所以当客户端进入hdfs 的用户没有权限时,是无法对hdfs进行操作的。这时候可通…

    大数据 2021年11月16日