当前位置： 首页 > news >正文

【架构面试】一、架构设计认知

news 来源：原创 2025/5/23 11:16:05

涉及分布式锁、中间件、数据库、分布式缓存、系统高可用等多个技术领域，旨在考查候选人的技术深度、架构设计能力与解决实际问题的能力。

在这里插入图片描述

1. 以 Redis 是否可以作为分布式锁为例：

  • 用 Redis 实现分布式锁会存在哪些问题？

    • 死锁：如果锁持有者崩溃，锁不会被释放。解决方法：设置锁的过期时间。
    • 竞争条件：多个进程同时获取锁。解决方法：使用 SETNX 或 Redisson 等客户端支持的加锁机制。
    • 释放锁失败：由于锁的释放通常需要持有者来释放，其他进程无法主动释放锁。解决方法：锁的释放必须由持有者原子操作完成，且使用 Lua 脚本 来避免竞争。

  • Redis 如何实现多节点之间的数据一致性？

    • 复制和持久化：通过主从复制和 AOF（Append Only File）来实现数据同步和持久化。
    • 哨兵机制：通过 Redis Sentinel 实现自动故障转移和监控，保证高可用性。
    • 集群模式：Redis 集群通过分片实现数据的分布式存储，各个节点通过一致性哈希来分配和同步数据。

2. 中间件相关：

  • 如何回答实现一个 RPC 框架？

    • 服务注册与发现：使用 ZooKeeper 或 Consul 进行服务的注册与发现。
    • 请求路由：客户端根据服务名称从注册中心获取服务地址，路由到具体的服务节点。
    • 网络通信：使用高效的序列化协议（如 Protobuf、Thrift）和网络协议（如 HTTP/2、gRPC）进行数据传输。
    • 负载均衡：支持多种负载均衡策略（如轮询、加权随机、哈希等）来分发请求。
    • 容错机制：支持超时、重试、断路器等机制来保证服务的可靠性。

  • MQ 如何实现消息的不丢失、不重复消费以及积压等问题？

    • 不丢失：使用持久化存储（如 Kafka 的日志存储）和消息确认机制（ACK）来保证消息不丢失。
    • 不重复消费：通过消息的去重标识（如唯一 ID）来避免重复消费，或者通过幂等性设计。
    • 积压问题：可以通过消费端的并发消费、消息队列的分区机制、以及合理的消费速率来解决积压问题。使用死信队列（DLQ）处理无法消费的消息。

3. 分布式缓存相关：

  • 在高并发场景下，分布式缓存的解决方案是什么？
    • 缓存穿透：使用 Bloom Filter 预过滤非法请求。
    • 缓存雪崩：设置缓存的过期时间为随机值，避免同一时刻大量缓存失效。
    • 缓存击穿：使用互斥锁或分布式锁来保证同一时间只有一个请求去加载数据。
    • 一致性哈希：通过一致性哈希算法来保证缓存数据均匀分布，减少缓存重建的成本。
    • 缓存降级：当缓存不可用时，可以使用本地存储或者通过异步加载机制进行降级处理。

4. 互联网高性能高可用设计相关：

  • 如何判断你的系统是高可用的？
    • 容错能力：系统可以容忍单点故障，并且能够自动恢复。使用冗余、主备模式、健康检查等机制。
    • 自动扩展：系统可以根据负载自动扩展或收缩，保证高并发时的性能。
    • 负载均衡：多个节点之间通过负载均衡算法均匀分配流量，避免单点瓶颈。
    • 故障转移：采用集群部署、分布式数据库和缓存，具备自动故障转移能力（如 Redis Sentinel、Zookeeper）。
    • 监控与报警：实时监控系统各项指标，如响应时间、CPU 使用率、内存使用情况，及时报警并快速定位问题。

在这里插入图片描述

在这里插入图片描述

  1. 架构设计认知
    • 面试重要性：面试中架构设计问题回答得好，易获面试官认可，可掩盖个别技术问题回答的不足。
    • 回答思路：应立足于点、连接成线、扩散成面。以交易系统拆分为例，从订单、促销、报价系统层面及复杂度评估层面，全面阐述拆分逻辑，体现对系统设计的思考和理解。
    • 底层逻辑：架构拆分目的是系统解耦，使系统职责单一、功能内聚，提高研发团队响应业务需求速度和开发效率，是管理在技术上提效的手段。
  2. 分析问题认知
    • 系统设计与战略定位关系：技术人员做系统设计需与公司或部门战略定位对齐，满足业务方和管理者不同诉求，系统设计原则应针对系统现阶段业务发展主要矛盾提出。
    • 实例分析：老系统架构改造时，业务发展使主要矛盾变为研发效率无法匹配业务需求，此时架构核心原则应围绕提升研发效率，合理拆分系统边界。
    • 面试要点：面试回答系统设计问题时，要依据系统所处阶段主要矛盾，避免只强调高性能、高可用，展现解决业务领域主要问题的技术认知。
  3. 能力边界认知
    • 高级研发工程师与架构师区别：高级研发工程师对系统的驾驭边界在模块或子系统层面，架构师至少在全系统层面，高级架构师在某一领域层面，架构师需掌握多系统层面的复杂度和解决问题的思考逻辑。
    • 成长建议：研发工程师应养成归纳总结习惯，形成知识体系和方法论，跳出舒适区，争取扩展能驾驭系统边界的机会。

在这里插入图片描述

如何用架构师视角进行技术面试

以电商点评系统改造为例：

  1. 架构师视角面试要点

    • 技术面试回答系统设计问题时，避免陷入技术细节，应从架构师全局技术视角阐述设计过程，展现解决问题的思维。
    • 以电商点评系统初期同步RPC调用接口为例，业务发展后出现性能低、可用性受影响、需求迭代慢等问题，可引入MQ异步解耦并拆分业务逻辑。
    • 在这里插入图片描述

  2. 系统复杂度分析方法

    • 分析系统复杂度能明确设计原则，避免架构设计偏离方向，防止出现设计与实际需求不匹配的情况。
    • 互联网软件复杂度包括功能性和非功能性复杂度。功能性方面，业务发展导致系统耦合、协作效率低；非功能性方面，通过计算点评系统消息处理量，可知其复杂度不在高性能，而在高可用性，如消息队列故障会影响业务。

  3. 点评系统架构方案设计

    • 明确点评系统改造复杂度来源后，确定方案设计目标，即解决功能性复杂度带来的系统耦合和开发效率问题，以及保证非功能性复杂度中的高可用性。
    • 提出多种架构方案，如采用开源MQ（如Kafka、RocketMQ等）、基于Redis实现消息队列、内存队列加MySQL等，并分析各方案技术可行性和优缺点。

  4. 架构方案评估标准

    • 架构师常用设计原则（如系统无单点、可降级、可监控等）控制项目技术风险，这些原则是评估架构方案的重要手段。
    • 针对点评系统，从功能性复杂度考虑团队能力、IT成本等与方案的匹配度；从非功能性复杂度依据系统无单点、可水平扩展、可降级原则评估方案。
    • 在这里插入图片描述

  5. 技术实现与面试总结

    • 确定架构方案后，需说明技术落地实现方式和深层原理，如基于Redis实现消息队列的多种方式及其优缺点。
    • 总结系统改造面试四部回答法：谈复杂来源（结合业务场景和阶段）、谈解决方案（基于复杂度来源，区分主次问题）、谈评估标准（从功能性和非功能性角度）、说技术实现（讲出实现原理）。架构师视角是全局视角，涵盖空间和时间全局。

在这里插入图片描述

分布式技术

  1. 分布式面试与CP理论重要性：在互联网技术面试里，分布式技术是必考内容，尤其在一线互联网公司对候选人的要求中，分布式系统设计是关键考察点。
    在这里插入图片描述

  2. CP理论原理剖析

    • 基本概念：CP理论中的C代表数据一致性，A代表服务可用性，P代表分区容错性，在分布式系统中，P必须保留，所以要在C和A之间进行选择，保证一致性选CP模型，保证可用性选AP模型。
    • 原理示例：以分布式系统及其副本在正常和网络分区情况下的数据同步与读取为例，解释CP原理。在正常情况下，系统数据能正常同步，节点数据一致且都可用；但网络分区时，数据同步受阻，需在一致性和可用性间权衡。
    • 实际权衡：实际中网络分区虽常见，但多数时间不存在。不同分布式系统要依据业务场景和需求在CP间权衡，由此产生了新模型，如PAC PLC模型。该模型规定，网络分区时在A和C间取舍，无网络分区时在L（延迟）和C间取舍。
    • 在这里插入图片描述

  3. BASE理论及实践应用

    • 理论引入：BASE理论是CP理论的延伸，由Basically Available（基本可用）、Soft state（软状态）和Eventually consistent（最终一致性）组成，作用是保证系统可用性，通过最终一致性代替强一致性，是分布式系统重要的经验总结。

    • 在这里插入图片描述

    • 实践案例：在电商网站双11场景中，通过关闭次要功能（服务降级）、延后预售商品支付时间（流量消峰）、使用延时队列处理抢购请求等方式实现基本可用性；用户下单时先在前台计数，后台异步批量处理库存扣减，体现软状态和最终一致性，这种数据处理方式在互联网设计中很常见。

    • 在这里插入图片描述
      在这里插入图片描述

  4. 不同层次面试要点

    • 初中级研发工程师：回答问题时要充分理解CP理论原理，不能仅停留在概念层面，要有自己的思考，并将理论与实际结合，展示处理问题的思考逻辑。
    • 高级研发工程师及架构师：除掌握CP理论外，还要展示知识体系和技术判断力。以Redis能否作为分布式锁为例，先指出实际问题，再依据CP理论分析其技术选型错误，进而扩展到分布式存储系统知识体系，从多维度分析问题，形成自己的知识体系和技术判断力，面试中要展现造轮子的能力（实际不推荐造轮子）。

  5. 面试答题思路总结：遇到理论性知识考察，可从三个层面回答：

    • 展示理论深度：阐述知识点的工作原理、优劣势、适用场景等。
    • 结合落地经验：将理论与落地方案的技术实现相结合，体现技术闭环思维。
    • 展示知识体系：这是程序员向上发展的基础能力，知识体系和技术判断力体现架构师的能力边界。
    • 在这里插入图片描述
      在这里插入图片描述

  1. 分布式系统面试核心要点

    • 面试常以业务场景设问，如设计海量商品存储架构，考察分布式系统中数据的存储、分布复制及相关协议算法。
    • 核心考察点包括数据分配（如哈希分片、范围分片）、数据复制（主从模式保证高可用）和数据一致性（通过一致性协议解决）。
    • 在这里插入图片描述

  2. 数据分片策略

    • 哈希分片：以商品id为例，通过哈希函数计算并取模确定分片。优点是数据分布均匀、实现简单；缺点是节点变动时需重新计算哈希值，导致大规模数据迁移 。

    • 一致性哈希：将存储节点和数据映射到哈希环上，按顺时针查找存储节点。常采用带虚拟节点的方式，能提升稳定性，减少节点变动时的数据迁移，但仍存在无法避免单一热点问题等局限。

    • 在这里插入图片描述

    • 例如当增加节点E时，商品100和1001需要迁移到节点E

    • 在这里插入图片描述

    • 范围分片：结合业务逻辑，如按商品类目分片，可使数据更均衡。通过分配元数据节点调度数据，客户端需请求分配元数据服务获取实际节点地址。该方式灵活性高、易扩展，但增加了系统复杂性。

  3. 数据一致性与相关算法
    在这里插入图片描述

    • etcd与raft协议：为保证分配元数据服务的可用性和数据一致性，可使用etcd集群。etcd基于raft协议实现数据共识，相比Paxos算法，raft算法更适用于工业界。Paxos算法虽能解决一致性前提下提高系统可用性的问题，但时间复杂度高，很少被直接采用。
    • 最终一致性算法（Gossip协议）：在一些对可用性要求高的场景，raft算法不适用，可选择基于Gossip协议的实现方式。它通过谣言传播机制实现最终一致性，适合动态变化的分布式系统。共识算法的选择与数据副本数量相关，副本少、节点少适合广播方式的协议，副本多、节点多适合最终一致性协议。
    • 在这里插入图片描述
    • 谣言传播

在这里插入图片描述

  1. 面试应对策略
    • 回答时要基于常见的分库分表解决方案，如哈希取模、一致性哈希等，展示解决架构设计问题的思路，权衡系统可用性与一致性。
    • 若涉及算法原理考察，需掌握basic Paxos、multi Paxos、raft等分布式系统中数据一致性共识算法。

在这里插入图片描述

分布式系统事务一致性

在这里插入图片描述

  1. 分布式事务问题引入：系统拆分后，一次写操作需协调多个子系统，引出分布式事务问题，即多个分布在不同服务器的小操作组成大操作，需保证同时成功或失败。以京都旅行系统下单场景为例，订单、商品、促销系统协同操作，体现其典型性。同时指出面试中候选者常选两阶段提交（2PC）方案，但实际多基于消息队列（MQ）实现分布式一致性。

  2. 面试答题套路：建议先介绍主流分布式事务一致性方案，再阐述可实现方案及知识点。可提及2PC或TCC与面试官交流，但要明确其在工业界落地代价大，仅适用于部分业务场景，如金融支付领域。

  3. 在这里插入图片描述

  4. 基于两阶段提交的解决方案：2PC是数据库领域解决分布式事务的典型协议，处理过程分准备和提交两个阶段，由协调者和参与者共同完成。涉及分布式事务规范。以具体系统为例，讲述其运行方式，包括事务管理器和资源管理器的作用。同时介绍了2PC存在的问题，如准备阶段加锁导致死锁、性能低下，提交阶段故障会使数据库阻塞，还可能出现数据不一致情况。

  5. 基于MQ的方案：在高并发场景下，通过放弃强一致性选择最终一致性提高系统可用性。以订单系统下单为例，将扣减优惠券事件放入MQ，由优惠券系统执行，实现业务解耦和流量消费。

  • 但MQ存在自动应答机制导致消息丢失的问题，需手动发送应答解决。
  • 大促时消息积压，订单系统无法感知下游操作，可通过让订单系统知道消费响应，利用定时任务扫描未完成消息重新投递进行补偿。
  • 实现方式是订单系统先将消息持久化到本地数据库，设置状态为待发送，投递消息后，若收到优惠券系统消费成功的通知消息，再将本地消息状态设为已完成。如此，即使 MQ 出现消息丢失，也能从订单系统本地数据库扫描未完成消息重新投递，确保订单系统和优惠券系统最终操作的一致性。
  • 基于MQ方案的考核点在于可落地性，实现生产者和消费者双向确认即可，且具有业务解耦和流量削峰优势。
  1. 实际工作中的考量：实际工作中并非所有业务都对事务一致性要求很高，更高要求意味着更多成本，这也是架构复杂度来源之一。回答分布式事务问题时，应站在业务实际场景考虑 。

分布式锁

  1. 分布式锁面试问题引入
    • 概念：分布式锁用于协调分布式系统同步访问共享资源，系统获取访问权限后才能写入数据，其他系统需等待锁释放。
    • 面试考察要点：面试官常问分布式锁问题并深挖细节，如控制并发访问、解决资源冲突等，在下单、优惠券等场景均有考察。
    • 常见面试问题：包括如何实现分布式锁，如基于关系型数据库或分布式缓存实现；还会追问服务器挂掉时防止死锁的方法，以及不借助第三方组件设计分布式锁等问题。
  2. 分布式锁需解决的核心问题
    • 核心问题：设计分布式锁需解决可用性、死锁、脑裂三个核心问题。可用性确保锁服务始终可用；死锁问题指客户端能获取锁，即使锁资源的客户端崩溃或网络不可达；脑裂问题是集群同步时数据不一致，导致多个进程同时拿到同一把锁。
    • 问题解决的重要性：只有解决这些核心问题，才能评估分布式锁的优劣，回答面试提问时应从解决这些问题出发。
  3. 基于关系数据库实现分布式锁
    • 实现方法：先查询数据库是否存在记录，借助数据库行锁（如MySQL的select for update）锁住数据，将查询和插入操作放在同一事务中提交。
    • 存在问题：基于MySQL行锁可能出现交叉死锁，高并发场景下性能存在缺陷。
    • 相关延伸问题：涉及数据库事务隔离级别，隔离级别影响并发处理能力，级别越高，系统并发性能越差；还可基于乐观锁（如版本号机制）实现分布式锁。
  4. 基于分布式缓存实现分布式锁
    • 以Redis为例的实现方式：加锁时为键设置值并设置过期时间（避免死锁），解锁时通过Lua脚本保证删除操作的原子性，并确保执行客户端是加锁客户端。
    • 优缺点：优点是性能高效、实现方便，跨集群部署可避免单点故障；缺点是低版本Redis存在死锁风险，超时时间设置不合理会导致分布式锁不可靠。
    • 超时时间设置难题：可通过续约方式设置超时时间，但实现较复杂，需结合业务场景。
    • Redis集群高可用问题及解决方案：Redis集群数据同步异步，可能导致多个应用服务器同时获取锁。Redis官方的RedLock算法可解决此问题，客户端向多个独立Redis实例依次申请加锁，若能和半数以上实例成功加锁且总耗时未超锁有效时间，则加锁成功。
  5. 分布式锁设计原则
    • 互斥性：在分布式系统环境下，对于共享资源，同一时间只能有一个线程或进程进行操作，保证数据一致性和正确性。
    • 高可用：锁服务无单点风险，集群环境下部分机器故障不影响锁服务。
    • 锁释放具备失效机制：防止死锁，进程崩溃或解锁失败时能被动解锁。
    • 可重入：获取锁的节点可再次获取锁资源。

在这里插入图片描述

  1. 基于Zookeeper实现分布式锁
  • 利用临时顺序节点实现互斥性：Zookeeper 中，客户端在特定目录下创建临时顺序节点。由于顺序节点编号唯一且递增，创建编号最小节点的客户端获得锁。其他客户端创建节点后，通过监听编号前一个节点来等待锁释放，保证同一时刻只有一个客户端能获取锁进行资源操作 。
  • 保障高可用性：Zookeeper 采用集群模式，多个节点保存相同数据副本。某节点故障时，其他节点可继续提供服务，客户端能重新连接到可用节点，避免单点故障，确保分布式锁服务稳定。
  • 具备锁失效机制防止死锁：创建的临时节点与客户端会话绑定，客户端崩溃或网络故障导致会话超时，临时节点自动删除，即锁自动释放，后续等待客户端可获取锁，避免死锁。
  • 支持可重入性：客户端可通过维护本地锁持有记录，每次请求操作前检查是否已持有锁。若已持有，直接执行操作；若未持有，按获取锁流程获取。Zookeeper 可根据客户端 ID 等标识判断节点是否由同一客户端创建，实现可重入功能。

RPC技术在面试中的考察

在这里插入图片描述

  1. RPC技术面试考察点概述

    • RPC是微服务架构基础，开发常需使用相关框架，面试常考察此技术。
    • 候选人对RPC面试问题存在误区，认为仅考察常见基础问题，这些问题易找到答案，难以区分技术能力。
    • 面试官多从实践操作和原理掌握两个角度递进考察候选人。

  2. RPC超时问题与实践能力考察

    • 以电商app商品详情页场景为例，面试官会问RPC调用链路超时时间设置及考虑问题，不能简单认为app调用网关超时时间大于网关调用后端服务超时时间之和。
    • RPC超时设置涉及超时重试机制、调用链平均响应时间、依赖服务耗时、重传次数、服务降级等技术问题。
    • 回答超时时间设置和重传次数问题，需综合考虑微服务的tp99请求耗时和业务场景，讲清网关调用下游服务的串并行方式、服务依赖关系，区分核心与非核心服务及相应处理策略，做到理论与实践结合。
    • 在这里插入图片描述

  3. RPC原理性知识考察

    • 以电商app高并发场景为例，考察如何设计RPC框架承载大量请求，可从优化网络多元性能（选择高性能网络编程IO模型）和选择合适序列化方式（提升封包和解包性能）两个角度分析。
    • RPC调用涉及网络通信，默认用TCP保证数据传输可靠性，因传输数据需为二进制，所以有序列化和反序列化过程，同时要约定RPC协议解决网络传输中的连包和半包问题。

  4. RPC调用流程与序列化问题

    • RPC通信流程核心组成部分包括协议、序列化和反序列化以及网络通信。一次完整调用包括调用方序列化请求参数、通过TCP传输，服务提供方接收、分割、反序列化数据，调用方法，再序列化结果并回传，调用方接收后反序列化应答对象。

    • 在这里插入图片描述

    • 常见序列化方式有JSON（易用、应用广泛但空间开销大）、Hessian（性能和体积表现好）、Protobuf（序列化后体积小、兼容性好）。回答序列化方式选型问题，要综合考虑时间和空间开销、兼容性等因素。

    • 在这里插入图片描述

    • 在这里插入图片描述

  5. RPC网络通信性能与IO模型

    • 提升RPC网络通信性能关键在于选择高性能网络编程IO模型，需掌握网络编程中的五种IO模型（同步阻塞IO、同步非阻塞IO、IO多路复用、信号驱动以及异步IO），实际开发中常用BIO和NIO。

    • 在这里插入图片描述

    • BIO网络模型中每个socket对应一个独立线程，存在socket连接数量受限、不适用于高并发场景、有两处阻塞（等待客户端连接和等待客户端发送数据）的问题。

    • 在这里插入图片描述

    • NIO网络模型用一个线程处理多个连接，提高了工作线程利用率，减少了所需线程数量，通过selector选择器实现socket连接和数据读写分离，是目前主流RPC框架广泛使用的IO多路复用模型的基础。

    • 在这里插入图片描述

  6. RPC技术扩展考核点及总结

    • 对于高级研发工程师，还会考察Reactor模型及其三种编程模型（单线程、多线程以及主从Reactor线程模型），以及Java中的高性能网络编程框架Netty。
    • 程序员应具备造轮子的能力，建议阅读成熟RPC框架（如阿里Dubbo、谷歌gRPC）的源代码。
    • 还具备连接管理、负载均衡、请求路由、熔断降级、优雅关闭等高级功能，了解这些功能在面试中可作为加分项。

[ 本章完 ]

相关文章：

【架构面试】一、架构设计认知

涉及分布式锁、中间件、数据库、分布式缓存、系统高可用等多个技术领域，旨在考查候选人的技术深度、架构设计能力与解决实际问题的能力。 1. 以 Redis 是否可以作为分布式锁为例： 用 Redis 实现分布式锁会存在哪些问题？ 死锁：如果…...

编程日记 2025/5/23 11:16:05

【Redis】常见面试题

什么是Redis？ Redis 和 Memcached 有什么区别？ 为什么用 Redis 作为 MySQL 的缓存？ 主要是因为Redis具备高性能和高并发两种特性。 高性能：MySQL中数据是从磁盘读取的，而Redis是直接操作内存，速度相当快…...

编程日记 2025/5/23 10:31:07

解决vsocde ssh远程连接同一ip，不同端口情况下，无法区分的问题

一般服务器会通过镜像分身或者容器的方式，一个ip分出多个端口给多人使用，但如果碰到需要连接同一user，同一个ip,不同端口的情况，vscode就无法识别，如下图所示，vscode无法区分该ip下不同端口的连接&#xff…...

编程日记 2025/5/23 11:07:02

Java设计模式—观察者模式

观察者模式 目录 观察者模式1、什么是观察者模式？2、观察者模式优缺点及注意事项？3、观察者模式实现？4、手写线程安全的观察者模式？ 1、什么是观察者模式？ - 实例：现实生活中很多事物都是依赖存在的&#x…...

编程日记 2025/5/23 10:24:38

Lua 环境的安装

1.安装Lua运行环境 本人采用的是在windows系统中使用cmd指令方式进行安装，安装指令如下： winget install "lua for windows" 也曾使用可执行程序安装过，但由于电脑是加密电脑，最后都已失败告终。使用此方式安装可以安…...

编程日记 2025/5/23 11:49:14

MySQL回表详解：原理、优化与实践

1. 简介 在MySQL的查询过程中，“回表”（又叫“二次查询”）是一个常见的概念，尤其在使用覆盖索引（covering index）或联合索引（composite index）时，回表操作常常会对查询性…...

编程日记 2025/5/19 4:18:33

算法——位运算

位运算知识点 01.01. 判定字符是否唯一 面试题 01.01. 判定字符是否唯一 - 力扣（LeetCode） class Solution { public:bool isUnique(string astr) {//鸽巢原理if(astr.size()>26) return false;int bitmap 0;for(auto ch:astr){char i ch-a;//判断…...

编程日记 2025/5/23 9:38:44

CVE-2025-0411 7-zip 漏洞复现

文章目录 免责申明漏洞描述影响版本漏洞poc漏洞复现修复建议 免责申明 本文章仅供学习与交流，请勿用于非法用途，均由使用者本人负责，文章作者不为此承担任何责任 漏洞描述 此漏洞 （CVSS SCORE 7.0） 允许远程攻击者绕…...

编程日记 2025/5/23 11:34:01

深度学习笔记——循环神经网络之LSTM

大家好，这里是好评笔记，公主号：Goodnote，专栏文章私信限时Free。本文详细介绍面试过程中可能遇到的循环神经网络LSTM知识点。 文章目录 文本特征提取的方法1. 基础方法1.1 词袋模型（Bag of Words, BOW）工作…...

编程日记 2025/5/23 10:15:29

超分辨率体积重建实现术前前列腺MRI和大病理切片组织病理学图像的3D配准

摘要： 磁共振成像（MRI）在前列腺癌诊断和治疗中的应用正在迅速增加。然而，在MRI上识别癌症的存在和范围仍然具有挑战性，导致即使是专家放射科医生在检测结果上也存在高度变异性。提高MRI上的癌症检测能力对于减少这种变异性并最大化MRI的临床效用至关重要。迄今为止，这种改…...

编程日记 2025/5/23 10:08:13

React第二十五章(受控组件/非受控组件)

React 受控组件理解和应用 React 受控组件 受控组件一般是指表单元素，表单的数据由React的 State 管理，更新数据时，需要手动调用setState()方法，更新数据。因为React没有类似于Vue的v-model，所以需要自己实现绑定事件…...

编程日记 2025/5/20 8:46:16

Vue演练场基础知识（七）插槽

为学习Vue基础知识，我动手操作通关了Vue演练场，该演练场教程的目标是快速体验使用 Vue 是什么感受，设置偏好时我选的是选项式 单文件组件。以下是我结合深入指南写的总结笔记，希望对Vue初学者有所帮助。 文章目录 十五. 插槽插槽…...

编程日记 2025/5/23 10:46:46

16 分布式session和无状态的会话

在我们传统的应用中session存储在服务端，减少服务端的查询压力。如果以集群的方式部署，用户登录的session存储在该次登录的服务器节点上，如果下次访问服务端的请求落到其他节点上就需要重新生成session，这样用户需要频繁的登录。 …...

编程日记 2025/5/9 17:57:48

docker 部署 java 项目详解

在平常的开发工作中，我们经常需要部署项目，开发测试完成后，最关键的一步就是部署。今天我们以若依项目为例，总结下部署项目的整体流程。简单来说，第一步：安装项目所需的中间件；第二步&#xff1…...

编程日记 2025/5/23 11:57:47

csapp笔记——2.3节整数运算

目录 无符号加法 补码加法 补码的非 无符号乘法 补码乘法 乘以常数 除以2的幂 无符号加法 对于的整数x,y，定义表示将x与y的和截为w位 由此推得检测无符号加法是否溢出得方法是判断结果是否比x，y中的任何一个小。 无符号数的逆元定义为使得的y&am…...

编程日记 2025/5/23 10:29:40

【阅读笔记】基于图像灰度梯度最大值累加的清晰度评价算子

本文介绍的是一种新的清晰度评价算子，基于图像灰度梯度最大值累加 一、概述 目前在数字图像清晰度评价函数中常用的评价函数包括三类：灰度梯度评价函数、频域函数和统计学函数，其中灰度梯度评价函数具有计算简单，评价效果好等优…...

编程日记 2025/5/22 22:09:25

Docker 系列之 docker-compose 容器编排详解

文章目录 前言一、Docker-compose简介二、Docker-compose 的安装三、Docker-compose卸载四、Docker-compose常用命令4.1 Docker-compose命令格式4.2 docker-compose up4.3 docker-compose ps4.4 docker-compose stop4.5 docker-compose -h4.6 docker-compose down4.7 docker-co…...

编程日记 2025/5/23 11:05:31

C++资料

InterviewGuide 首页 - 八股精 Releases halfrost/LeetCode-Go GitHub GitHub - GrindGold/CppGuide: 「C/C学习面试指南」一份涵盖大部分 C 程序员所需要掌握的知识。入门、进阶、深入、校招、社招，准备 C 学习& 面试，首选 CppGuide&#xff0…...

编程日记 2025/5/22 4:15:02

7-Zip Mark-of-the-Web绕过漏洞复现(CVE-2025-0411)

免责申明： 本文所描述的漏洞及其复现步骤仅供网络安全研究与教育目的使用。任何人不得将本文提供的信息用于非法目的或未经授权的系统测试。作者不对任何由于使用本文信息而导致的直接或间接损害承担责任。如涉及侵权，请及时与我们联系，我们将尽快处理并删除相关内容。 0x0…...

编程日记 2025/5/23 7:45:43

将本地项目上传到 GitLab/GitHub

以下是将本地项目上传到 GitLab 的完整步骤，从创建仓库到推送代码的详细流程： 1. 在 GitLab 上创建新项目 登录 GitLab，点击 New project。选择 Create blank project。填写项目信息： Project name: 项目名称（如 my-p…...

编程日记 2025/5/23 10:34:50

基于SpringBoot+WebSocket的前后端连接，并接入文心一言大模型API

前言： 本片博客只讲述了操作的大致流程，具体实现步骤并不标准，请以参考为准。 本文前提：熟悉使用webSocket 如果大家还不了解什么是WebSocket，可以参考我的这篇博客： rWebSocket 详解：全双工…...

编程日记 2025/5/23 10:31:07

2.2.3 代码格式与风格指南

编写清晰、规范的代码是提高代码可读性、可维护性和团队协作效率的关键。虽然好多人说工控行业都是一帮电工，没有什么素质，这完全是误解，任何程序所在的行业，都需要个人保证其代码风格能够很好与团队进行协作，在过去一…...

编程日记 2025/5/23 10:13:58

数仓的数据加工过程-ETL

ETL代表Extract Transform和Load。ETL将所有三个数据库功能组合到一个工具中，以从一个数据库获取数据并将其放入另一个数据库。 提取：提取是从数据库中提取(读取)信息的过程。在此阶段，从多个或不同类型的来源收集数据。 转换：转…...

编程日记 2025/5/23 10:20:17

类与对象(中)

类的6个默认成员函数 如果一个类中什么成员都没有，简称为空类。 空类中真的什么都没有吗？并不是，任何类在什么都不写时，编译器会自动生成以下 6 个默认成员函数。默认成员函数：用户没有显式实现，编译器会生…...

编程日记 2025/5/23 11:30:47

FastExcel的使用

前言 FastExcel 是一款基于 Java 的开源库，旨在提供快速、简洁且能解决大文件内存溢出问题的 Excel 处理工具。它兼容 EasyExcel，提供性能优化、bug 修复，并新增了如读取指定行数和将 Excel 转换为 PDF 的功能。 FastExcel 的主要功能 高性…...

编程日记 2025/5/23 12:09:51

微信小程序1.3 开发工具的使用2

内容提要 1.1 编辑器区域 1.2 调试器区域 1.3 工具栏区域 1.4 云开发 1.5 常用快捷键 1.1 编辑器区域 1.2 调试器区域 1.3 工具栏区域 1.4 云开发 1.5 常用快捷键...

编程日记 2025/5/23 11:45:37

pytest自动化测试 - pytest夹具的基本概念

<< 返回目录 1 pytest自动化测试 - pytest夹具的基本概念 夹具可以为测试用例提供资源(测试数据)、执行预置条件、执行后置条件&#xff0c;夹具可以是函数、类或模块&#xff0c;使用pytest.fixture装饰器进行标记。 1.1 夹具的作用范围 夹具的作用范围&#xff1a; …...

编程日记 2025/5/23 9:34:05

个人网站搭建

搭建 LNMP环境搭建&#xff1a; LNMP环境指&#xff1a;Linux Nginx MySQL/MariaDB PHP&#xff0c;在debian上安装整体需要300MB的磁盘空间。MariaDB 是 MySQL 的一个分支&#xff0c;由 MySQL 的原开发者维护&#xff0c;通常在性能和优化上有所改进。由于其轻量化和与M…...

编程日记 2025/5/23 13:11:05

doris：Insert Into Values

INSERT INTO VALUES 语句支持将 SQL 中的值导入到 Doris 的表中。INSERT INTO VALUES 是一个同步导入方式&#xff0c;执行导入后返回导入结果。可以通过请求的返回判断导入是否成功。INSERT INTO VALUES 可以保证导入任务的原子性&#xff0c;要么全部导入成功&#xff0c;要么…...

编程日记 2025/5/20 5:46:02

Linux 环境变量

目录 一、环境变量的基本概念 1.常见环境变量 2.查看环境变量方法 ​3.几个环境变量 环境变量&#xff1a;PATH 环境变量&#xff1a;HOME 环境变量&#xff1a;SHELL 二、和环境变量相关的命令 三、库函数getenv&#xff0c;setenv 四、环境变量和本地变量 五、命令行…...

编程日记 2025/5/21 13:27:55

人工智能在数字化转型中的角色：从数据分析到智能决策

引言 在数字化转型浪潮中&#xff0c;人工智能&#xff08;AI&#xff09;正迅速崛起&#xff0c;成为推动企业创新和变革的关键力量。面对日益复杂的市场环境和激烈的行业竞争&#xff0c;企业亟需借助技术手段提高运营效率、优化决策过程&#xff0c;并增强市场竞争力。而AI…...

编程日记 2025/5/21 1:25:53

Spring Boot 自动配置

目录 什么是自动配置&#xff1f; Spring 加载 Bean ComponentScan Import 导入类 导入 ImportSelector 接口的实现类 SpringBoot 原理分析 EnableAutoConfiguration Import(AutoConfigurationImportSelector.class) AutoConfigurationPackage SpringBoot 自动配置流…...

编程日记 2025/5/23 10:29:33

PyQt6医疗多模态大语言模型（MLLM）实用系统框架构建初探（下.代码部分）

医疗 MLLM 框架编程实现 本医疗 MLLM 框架结合 Python 与 PyQt6 构建，旨在实现多模态医疗数据融合分析并提供可视化界面。下面从数据预处理、模型构建与训练、可视化界面开发、模型 - 界面通信与部署这几个关键部分详细介绍编程实现。 6.1 数据预处理 在医疗 MLLM 框架中，多…...

编程日记 2025/5/23 4:47:34

【LC】1148. 文章浏览 I

题目描述&#xff1a; Views 表&#xff1a; ------------------------ | Column Name | Type | ------------------------ | article_id | int | | author_id | int | | viewer_id | int | | view_date | date | ----------------------…...

编程日记 2025/5/23 2:29:34

Linux学习笔记——网络管理命令

一、网络基础知识 TCP/IP四层模型 以太网地址&#xff08;MAC地址&#xff09;&#xff1a; 段16进制数据 IP地址&#xff1a; 子网掩码&#xff1a; 二、接口管命令 ip命令&#xff1a;字符终端&#xff0c;立即生效&#xff0c;重启配置会丢失 nmcli命令&#xff1a;字符…...

编程日记 2025/5/20 10:49:22

Arduino大师练成手册 --控制 OLED

要在 Arduino 上使用 U8glib 库控制带有 7 个引脚的 SPI OLED 显示屏&#xff0c;你可以按照以下步骤进行&#xff1a; 7pin OLED硬件连接 GND&#xff1a;连接到 Arduino 的 GND 引脚。 VCC&#xff1a;连接到 Arduino 的 5V 引脚。 D0&#xff08;或 SCK/CLK&#xff09;…...

编程日记 2025/5/21 21:56:32

2024年终总结

距离放假还有一个小时&#xff0c;闲来无事&#xff0c;写篇总结。 最近关注我的朋友不少&#xff0c;关注我的多半都是因为几篇博客。既然关注了&#xff0c;我也想分享点工作中的经验给大家。 今年的节点是跳槽。 4月份跳槽的&#xff0c;跳槽之前呢在上家公司还有3W多奖金…...

编程日记 2025/5/21 6:22:47

Kafka 消费端反复 Rebalance: `Attempt to heartbeat failed since group is rebalancing`

文章目录 Kafka 消费端反复 Rebalance: Attempt to heartbeat failed since group is rebalancing1. Rebalance 过程概述2. 错误原因分析2.1 消费者组频繁加入或退出2.1.1 消费者故障导致频繁重启2.1.2. 消费者加入和退出导致的 Rebalance2.1.3 消费者心跳超时导致的 Rebalance…...

编程日记 2025/5/22 5:33:19

【Linux】Linux编译器-g++、gcc、动静态库

只要积极创造&#xff0c;机遇无时不有&#xff1b;只要善于探索&#xff0c;真理无处不在。&#x1f493;&#x1f493;&#x1f493; 目录 ✨说在前面 &#x1f34b;知识点一&#xff1a;Linux编译器-g、gcc •&#x1f330;1. 背景知识 •&#x1f330;2. gcc如何完成 •…...

编程日记 2025/5/22 21:06:27

android12源码中用第三方APK替换原生launcher

一、前言 如何用第三方的apk替换原生launcher呢&#xff1f;我是参考着这位大神的博客https://blog.csdn.net/hyu001/article/details/131044358做的&#xff0c;完美实现。 这边博客中又加入了我个人的一些改变&#xff0c;整理的。 二、步骤 1.在/packages/apps/MyApp文件…...

编程日记 2025/5/20 8:47:34

Ubuntu20.04 深度学习环境配置(持续完善)

文章目录 常用的一些命令安装 Anaconda创建conda虚拟环境查看虚拟环境大小 安装显卡驱动安装CUDA安装cuDNN官方仓库安装 cuDNN安装 cuDNN 库验证 cuDNN 安装确认 CUDA 和 cuDNN 是否匹配&#xff1a; TensorRT下载 TensorRT安装 TensorRT 本地仓库配置 GPG 签名密钥安装 Tensor…...

编程日记 2025/5/23 10:35:32

Java 实现Excel转HTML、或HTML转Excel

Excel是一种电子表格格式&#xff0c;广泛用于数据处理和分析&#xff0c;而HTM则是一种用于创建网页的标记语言。虽然两者在用途上存在差异&#xff0c;但有时我们需要将数据从一种格式转换为另一种格式&#xff0c;以便更好地利用和展示数据。本文将介绍如何通过 Java 实现 E…...

编程日记 2025/5/21 0:32:21

jQuery小游戏

jQuery小游戏&#xff08;一&#xff09; 嘻嘻&#xff0c;今天我们来写个jquery小游戏吧 首先&#xff0c;我们准备一下写小游戏需要准备的佩饰&#xff0c;如果&#xff1a;图片、音乐、搞怪的小表情 这里我准备了一些游戏中需要涉及到的图片 游戏中使用到的方法 eval() 函…...

编程日记 2025/5/18 4:05:46

Cpp::静态 动态的类型转换全解析(36)

文章目录 前言一、C语言中的类型转换二、为什么C会有四种类型转换&#xff1f;内置类型 -> 自定义类型自定义类型 -> 内置类型自定义类型 -> 自定义类型隐式类型转换的坑 三、C强制类型转换static_castreinterpret_castconst_castdynamic_cast 四、RTTI总结 前言 Hell…...

编程日记 2025/5/21 21:57:20

【PostgreSQL内核学习 —— （WindowAgg（一））】

WindowAgg 窗口函数介绍WindowAgg理论层面源码层面WindowObjectData 结构体WindowStatePerFuncData 结构体WindowStatePerAggData 结构体eval_windowaggregates 函数update_frameheadpos 函数 声明&#xff1a;本文的部分内容参考了他人的文章。在编写过程中&#xff0c;我们尊…...

编程日记 2025/5/23 13:22:25

SQL-leetcode—1158. 市场分析 I

1158. 市场分析 I 表&#xff1a; Users ----------------------- | Column Name | Type | ----------------------- | user_id | int | | join_date | date | | favorite_brand | varchar | ----------------------- user_id 是此表主键&#xff08;具有唯一值的列&#xff…...

编程日记 2025/5/18 23:26:06

opensips中各个模块的解释

模块名称作用说明aaa_diameter提供基于 Diameter 协议的认证、授权和计费服务&#xff0c;适用于移动运营商和ISP的计费系统。aaa_radius提供基于 RADIUS 协议的认证、授权和计费功能&#xff0c;常用于无线网络接入和VPN等场景。auth_jwt用于支持基于 JSON Web Token (JWT) 的…...

编程日记 2025/5/21 23:04:55

【C++初阶】第11课—vector

文章目录 1. 认识vector2. vector的遍历3. vector的构造4. vector常用的接口5. vector的容量6. vector的元素访问7. vector的修改8. vector<vector\<int\>>的使用9. vector的使用10. 模拟实现vector11. 迭代器失效11.1 insert插入数据内部迭代器失效11.2 insert插入…...

编程日记 2025/5/20 13:09:01

SpringBoot开发（二）Spring Boot项目构建、Bootstrap基础知识

1. Spring Boot项目构建 1.1. 简介 基于官方网站https://start.spring.io进行项目的创建. 1.1.1. 简介 Spring Boot是基于Spring4框架开发的全新框架&#xff0c;设计目的是简化搭建及开发过程&#xff0c;并不是对Spring功能上的增强&#xff0c;而是提供了一种快速使用Spr…...

编程日记 2025/5/21 0:02:48

vim如何设置自动缩进

:set autoindent 设置自动缩进 :set noautoindent 取消自动缩进 &#xff08;vim如何使设置自动缩进永久生效&#xff1a;vim如何使相关设置永久生效-CSDN博客&#xff09;...

编程日记 2025/5/10 21:52:39