365体育投注_365bet体育在线—①触*即發

摘要:上一篇文章讲了LogSegment和Log的初始化,这篇来讲讲Log的主要操作有哪些。 一般来说Log 的常见操作分为 4 大部分。 高水位管理操作 日志段管理 关键位移值管理 读写操作 其中关键位移值管理主要包含Log Start Offset 和 LEO等。 高水位HighWatermark 高 阅读全文
posted @ 2020-06-21 16:05 luozhiyun 阅读(85) 评论(0) 推荐(1) 编辑
摘要:分布式系统和一致性问题 一致性问题(consensus problem)是分布式系统需要解决的一个核心问题。分布式系统一般是由多个地位相等的节点组成,各个节点之间的交互就好比几个人聚在一起讨论问题。让365bet体育在线们设想一个更具体的场景,比如三个人讨论中午去哪里吃饭,第一个人说附近刚开了一个火锅店,听说味道非常 阅读全文
posted @ 2020-06-17 10:05 luozhiyun 阅读(77) 评论(0) 推荐(0) 编辑
摘要:365bet体育在线们先回想一下Kafka的日志结构是怎样的? Kafka 日志对象由多个日志段对象组成,而365体育投注日志段对象会在磁盘上创建一组文件,包括消息日志文件(.log)、位移索引文件(.index)、时间戳索引文件(.timeindex)以及已中止(Aborted)事务的索引文件(.txnindex)。当然,如 阅读全文
posted @ 2020-06-07 23:00 luozhiyun 阅读(40) 评论(0) 推荐(0) 编辑
摘要:https://www.luozhiyun.com/archives/291 Linux的文件系统 文件系统的特点 文件系统要有严格的组织形式,使得文件能够以块为单位进行存储。 文件系统中也要有索引区,用来方便查找一个文件分成的多个块都存放在了什么位置。 如果文件系统中有的文件是热点文件,近期经常被 阅读全文
posted @ 2020-06-07 17:07 luozhiyun 阅读(190) 评论(1) 推荐(0) 编辑
摘要:365bet体育在线的博客: https://www.luozhiyun.com/archives/273 InnoDB页 将数据划分为若干个页,以页作为磁盘和内存之间交互的基本单位,InnoDB中页的大小一般为 16 KB。也就是在一般情况下,一次最少从磁盘中读取16KB的内容到内存中,一次最少把内存中的16KB内 阅读全文
posted @ 2020-04-20 19:59 luozhiyun 阅读(70) 评论(0) 推荐(0) 编辑
摘要:365bet体育在线的博客:https://www.luozhiyun.com/archives/269 '==' VS 'is' '=='操作符比较对象之间的值是否相等。 'is'操作符比较的是对象的身份标识是否相等,即它们是否是同一个对象,是否指向同一个内存地址。 如: Python 会为 10 这个值开辟一块内 阅读全文
posted @ 2020-04-12 15:42 luozhiyun 阅读(141) 评论(0) 推荐(0) 编辑
摘要:365bet体育在线的个人博客排版更舒服: https://www.luozhiyun.com/archives/264 列表和元组 列表是动态的,长度大小不固定,可以随意地增加、删减或者改变元素(mutable)。 而元组是静态的,长度大小固定,无法增加删减或者改(immutable)。 如果你想对已有的元组做任何 阅读全文
posted @ 2020-04-05 10:38 luozhiyun 阅读(94) 评论(0) 推荐(0) 编辑
摘要:365bet体育在线的个人博客排版更舒服: https://www.luozhiyun.com/archives/260 基本概念 Kafka 体系架构 Kafka 体系架构包括若干 Producer、若干 Broker、若干 Consumer,以及一个 ZooKeeper 集群。 在 Kafka 中还有两个特别重要 阅读全文
posted @ 2020-03-08 18:04 luozhiyun 阅读(560) 评论(0) 推荐(0) 编辑
摘要:365bet体育在线的个人博客:https://www.luozhiyun.com/ 为什么需要Spark? MapReduce的缺陷 第一,MapReduce模型的抽象层次低,大量的底层逻辑都需要开发者手工完成。 第二,只提供Map和Reduce两个操作。 举个例子,两个数据集的Join是很基本而且常用的功能,但是 阅读全文
posted @ 2020-03-01 11:53 luozhiyun 阅读(217) 评论(0) 推荐(0) 编辑
摘要:365bet体育在线的博客:https://www.luozhiyun.com/ 内存 内存是五大组成部分里面的存储器,365bet体育在线们的指令和数据,都需要先加载到内存里面,才会被CPU拿去执行。 365bet体育在线们的内存需要被分成固定大小的页(Page),然后再通过虚拟内存地址(Virtual Address)到物理内存地址(Physica 阅读全文
posted @ 2020-02-29 17:49 luozhiyun 阅读(226) 评论(0) 推荐(0) 编辑