hadoop中HDFS的NameNode原理 1. hadoop中HDFS的NameNode原理 1.1. 组成 包括HDFS（分布式文件系统），YARN（分布式资源调度系统），MapReduce（分布式计算系统），等等。 1.2. HDFS架构原理 比如现在要上传一个1T的大文件，提交给HDFS的 Active NameNode （用以存放文...

2019-08-16 12:30:57 文件IE磁盘系统PSAccessHTTPS集群数据备份web

记一次mysql主从同步因断电产生的不能同步问题 1236 and 1032 背景： 项目新上线一个月，qa需要测试断电服务拉起，服务拉起成功后，发现mysql主从异常 以下是发现的问题以及解决方案 问题1： Slave_IO_Running: No 一方面原因是因为网络通信的问题也有可能是日志读取错...

2019-08-16 12:30:37 文件ESET服务器mysql磁盘数据同步系统AVtheSQL

Redis 集群 Redis 集群 1 redis集群简介 1.1 集群的概念 所谓的集群，就是通过添加服务器的数量，提供相同的服务，从而让服务器达到一个稳定、高效的状态（高可用）。 1.2 使用redis集群的必要性 问题：我们已经部署好了redis，并且能启动一个redis，实现数据的读写，...

2019-08-16 12:26:04 文件服务器用户IE系统缓解AV集群防火墙AE

Git总结 一、Git是什么？ Git是目前世界上最先进的分布式版本控制系统。 Git是一款免费、开源的分布式版本控制系统，用于敏捷高效地处理任何或小或大的项目。 可以有效、高速的处理从很小到非常大的项目版本管理。Git 是 Linus Torvalds 为了帮助管理 Linux 内核开发而...

2019-08-16 12:19:07 文档文件ESET服务器定义LinuxqqtxtWindows网速

缓存世界中的三大问题及解决方案 Redis 经常用于系统中的缓存，可以极大地提高了系统性能和效率，但同时也带来一些问题。一个是数据一致性问题。从严格意义上讲，只要使用缓存，就会出现一致性问题，这是无法解决的。另一个问题是本文将讨论的缓存穿透，缓存击穿和缓存...

2019-08-16 12:17:34 服务器用户12306系统访问次数PS用户查询timAV服务器集群

[Spring cloud 一步步实现广告系统] 15. 使用开源组件监听Binlog 实现增量索引准备 MySQL Binlog简介 什么是binlog? 一个二进制日志，用来记录对数据发生或潜在发生更改的SQL语句，并以而进行的形式保存在磁盘中。 binlog 的作用？ 最主要有3个用途： 数据复制（主从同...

2019-08-16 12:15:42 java 对象文件ESET服务器定义mysqlwordIE磁盘广告投放

一次难得的分库分表实践 背景 前不久发过两篇关于分表的文章： 一次分表踩坑实践的探讨 分表后需要注意的二三事 从标题可以看得出来，当时我们只做了分表；还是由于业务发展，截止到现在也做了分库，目前看来都还比较顺利，所以借着脑子还记得清楚来一次复盘。 先来回...

2019-08-16 12:08:48 mysql瓶颈用户系统PSAVSQL数据库备份查询速度

RocketMQ中Broker的HA策略源码分析 Broker的HA策略分为两部分 ①同步元数据 ②同步消息数据 同步元数据 在Slave启动时，会启动一个定时任务用来从master同步元数据 1 if (role == BrokerRole.SLAVE) { 2 if ( null != slaveSyncFuture) { 3 slaveSyncFuture.cancel( fa...

2019-08-16 12:08:05 文件IE磁盘数据同步EtsyPSkeeptimCFAV

[Apache Pulsar] 企业级分布式消息系统-Pulsar入门基础 Apache Pulsar Pulsar是一个支持多租户的、高性能的服务与服务之间消息通讯的解决方案，最初由雅虎开发，现在由Apache软件基金会管理。 Pulsar在Yahoo的生产环境运行了三年多，助力Yahoo的主要应用，如Yahoo Mail...

2019-08-16 12:07:03 文档路由模定义用户IE磁盘雅虎系统硬盘C++

维恩贝特面试JAVA后台开发 1 自我介绍 2 链表和数组区别 （数组空间连续，且有下标，查找快，但是增删数据效率不高，链表的空间不连续，查找起来慢，但是对数据的增删效率高，链表可以随意扩大，数组不能） 3 sort方法的实现 （ArrayList的sort方法调用的其实是Arrays...

2019-08-16 12:01:27 java后台开发mysql2345共享AVSQL数据库对象mysqldump备份