Hadoop-28 ZooKeeper集群 ZNode简介概念和测试 数据结构与监听机制 持久性节点 持久顺序节点 事务ID Watcher机制
章节内容 上节我们完成了： ZooKeeper 集群配置ZooKeeper 集群启动ZooKeeper 集群状况查看Follower 和 Leader 节点 背景介绍 这里是三台公网云服务器，每台 2C4G，搭建一个Hadoop的学习环境，供我学习。 之前已经在 VM 虚拟机上搭建过一次，但是没留下笔记，这次趁着前几天薅羊毛的3台机器，赶紧尝试在公网上搭建体验一下。 2C4G 编号 h1212C4G...
【数据结构】单链表 双向链表
除所有值为key的节点得到链表的长度清空链表 Java中的LinkedList实现的接口构造方法常用方法双向链表的优劣 ArrayList和LinkedList对比链表练习 链表 链表就是一种物理存储结构上非连续存储结构，数据元素的逻辑顺序是通过链表中的引用链接次序实现的 。 也是线性表。 数据域：存储数据元素信息的域。 指针域：存储直接后继的信息。 链表的分类 链表根据三个条件分类： 有头无头：有没...
数据结构——算法概述
法定义 算法是一组有限的、明确的步骤或指令，用于解决特定问题。这些步骤必须是计算机可以执行的操作。通俗地理解，算法就是解决特定问题的方法。 算法的表示形式 伪代码：使用接近自然语言的方式描述算法，但更结构化、更接近编程语言。伪代码方便人们理解和交流算法。 自然语言：用日常语言描述算法的步骤。尽管自然语言易于理解，但由于缺乏结构和精确性，容易引起歧义。 流程图：以图形方式表示算法的流程，通过各种符号和箭...
我对《RAG/大模型/非结构化数据知识库类产品》技术架构的思考、杂谈
/大模型应用产品的落地交付的场景考虑，以实际场景出发，谈谈我对知识库类产品的技术架构的思考总结。2、业务功能/技术组件拆解抽象 图3-业务架构在文章的标题中，我已经标注了范围: RAG、大模型、非结构化数据我们从这三个方面出发，在软件层面，我们如何来考虑这些新型的技术名词，将他们从技术/产品功能的角度进行拆解，实现对应的功能交付给我们的客户。从业务的功能诉求来看，主要有几个方面： 知识库：客户...
005 数据结构
文章目录 线性结构树结构图结构 线性结构 数组：连续内存空间中的数据集合，通过索引访问元素，适合快速读取但插入和删除操作相对复杂。 栈：后进先出的数据结构，只允许在栈顶进行插入（压栈）和删除（弹栈）操作，常用于函数调用和递归等场景 队列：先进先出的数据结构，一端插入（入队），另一端删除（出队），常用于任务调度和缓冲处理等。 链表：由节点组成，每个节点包含数据和指向下一个节点的指针，适合动态数据插入和...
软件工程-第4章结构化编码和测试
程序的视觉组织：恰当地利用空格，空行和缩进来增加程序的层次性和清晰度。 ②数据说明标准化：为使程序中的数据说明更易于理解和维护。应数据说明的次序规范化，说明语句中变量安排有序化，使用注释说明复杂数据结构。 ③语句结构简单化。 ④输入/输出方法规范化： 结构化程序设计应遵循以下重要原则： 使用语言中的顺序，选择，重复等有限的基本控制结构表示程序逻辑。 选用的控制结构只准许有一个入口和一个出口。 复杂结...
深度学习在蛋白质结构预测的新突破：AlphaFold、RoseTTAFold与ESMFold
在蛋白质结构预测和功能预测领域，基于机器学习的方法最近取得了显著的进展。特别是深度学习技术在这个领域中展现出了强大的能力，代表性的技术有 DeepMind 的 AlphaFold 和 RoseTTAFold。这些技术利用了大量的生物数据和先进的神经网络架构，极大地推动了蛋白质研究的边界。 1. AlphaFold DeepMind 的 AlphaFold 是近年来蛋白质结构预测领域的突破性成就。Alp...
【系统架构设计师】计算机组成与体系结构 ③ ( 层次化存储结构 | 寄存器 | 高速缓存 | 内存 | 外存 )
文章目录 一、层次化存储结构1、层次化存储结构2、层次化存储结构 - 示例说明3、程序员可操作的部分 计算机 采用 分级存储结构 , 主要目的是 为了 解决 容量 / 价格 / 速度 之间的矛盾 ; 一、层次化存储结构 1、层次化存储结构 计算机 存储器 按照存储速度 由快到慢 进行排序 : CPU 寄存器 : 在 CPU 内部 , 速度最快 , 每秒可操作几十亿次 , 其容量只有 几个字节到几十个...
软件工程-第三章结构化设计
结构化设计属于软件工程的系统设计阶段，通常划分成两个步骤：结构化总体设计和结构化详细设计。 总体设计阶段的主要任务是设计软件的结构，即确定程序的组成模块及模块间的关系。 详细设计阶段的主要任务是设计出程序的详细规格说明。 3.1结构化设计概述 结构化设计方法是一种面向数据流的传统软件设计方法，以数据流为中心构建软件分析模型和软件设计模型。 总体设计阶段的软件设计模型包括软件体系结构模型，软件接口模型和...
【PyTorch单点知识】神经元网络模型剪枝prune模块介绍（上，非结构化剪枝）
本和内存占用。这对于部署模型到资源受限的设备（如移动设备或嵌入式系统）特别有用。 本文将通过实例介绍torch.nn.utils.prune模块中的各个方法，由于内容较多分为上、下两篇。本篇主要介绍非结构化剪枝。 1. 剪枝prune主要功能分类 torch.nn.utils.prune模块提供了一系列的剪枝方法，包括但不限于： 无结构剪枝：这种剪枝方法可以独立地移除网络中的权重，而不考虑权重之间的结...