当前位置： 首页 > news >正文

广告事件聚合系统设计

news 来源：原创 2025/5/6 20:38:34

需求背景

广告事件需要进行统计，计费，分析等。所以我们需要由数据接入，数据处理，数据存储，数据查询等多个服务模块去支持我们的广告系统

规模上 10000 0000个点击（10000 00000 / 100k 1wQPS） 100 0000 0000 展示 （100wQPS） CTR 1%左右

功能点

功能性需求

聚合一段时间（15s）的数据

获得一段时间数据的topk或者特点行为

过滤

长时间大规模数据的存储

非功能性需求

较低延迟，有些需求要在15s内返回

高可用，容错

数据正确和数据正确性（可能引入对账系统（lamdba系统）或者kappa架构）

高吞吐（可减低latency的要求）

good cheap fast 三者取2

event格式：eventid action_type, timestamp, ip_address, user_id,

0.1kb 一个event 

1s的网络带宽 0.1kb * 100 w  差不多1GB，最高峰估计5GB 还是不是很大瓶颈

5GB * 100k 500TB /day

500TB * 30 = 1.5PB

data collection用什么

1.dbms （不考虑）

2.cassdread indisk（3M（峰值，如果可以弹性加的话可以少点） / 15k  200node） 不是很大的集群规模

3，redis in memory (贵且容易丢数据，集群规模小)3M / 100k  30node

4.message queue (数据持久化保障比reids好，但是latency较高) 也是大概30node集群规模

hot ad id热点问题，随机后缀打散

data process用什么

batch(不考虑)

mini batch 秒级别

stream 低于秒级 

kafka  30 node(打散热点)

flink 50k evnt /s   3M / 50k  60node（checkpoint 额外的有状态计算流处理）

聚合数据存储data storage用什么

10TB

1、冷热分离100 GB，两个120GB服务器放在内存

2. 预计算 索引等机制

对账lamdba架构

kappa减少系统复杂度，offset重置 kafka rebackfill，对流系统的要求高，

超大规模实时系统架构深度设计

  1. 数据接入层增强设计
  • 多级缓冲架构：Kafka前端增加Memcached热数据层缓存用户画像（LRU淘汰策略+TTL 30s）
  • 动态分区策略：采用Kafka KeyRangePartitioner实现广告ID的二次哈希分区（SHA-256哈希+32虚拟节点）
  • 流量熔断机制：基于Sentinel实现滑动窗口QPS控制（窗口大小5s，采样数10）
  • 持久化保障：Kafka配置acks=all + ISR最小副本数=3 + 事务日志flush间隔100ms
  1. 流处理层增强设计
  • Flink状态管理：采用RocksDB状态后端+增量Checkpoint（间隔30s）+ 状态TTL（72h）
  • 热点处理：广告ID动态探测（HyperLogLog基数统计）结合LocalKeyBy预处理（本地聚合窗口5s）
  • Exactly-Once保障：TwoPhaseCommitSinkFunction配合Kafka事务（事务超时配置10min）
  • 动态扩缩容：Flink Adaptive Scheduler + Kubernetes HPA（CPU阈值80%, 扩容冷却300s）
  1. 存储层增强设计
  • 混合存储引擎：
    • 热数据：Redis Cluster（CRC16分片）+ RedisTimeSeries模块（时间范围聚合）
    • 温数据：Cassandra（SSTable LZ4压缩）+ 布隆过滤器优化（误判率0.1%）
    • 冷数据：JuiceFS + S3（列式存储Parquet格式，ZSTD压缩）
  • 索引优化：ClickHouse物化视图（预聚合粒度1min）+ 动态位图索引

（二）架构演进路线

  1. 阶段性架构升级：
    V1.0：Lambda架构（Flink+Kafka+HBase）->
    V2.0：Kappa架构升级（统一流处理层）->
    V3.0：湖仓一体（Delta Lake + Flink CDC）->
    V4.0：智能分层（AI预测热数据+自动迁移）

  2. 关键演进指标：

  • 数据处理延迟：15s -> 5s -> 1s（P99）
  • 存储成本：1.5PB/mon -> 800TB/mon（ZSTD压缩+冷热分离）
  • 故障恢复时间：10min -> 2min（增量Checkpoint优化）

（三）实战经验

  1. 极限场景应对方案：
  • 双十一流量洪峰：预热JVM（G1 GC调优）+ 弹性计算池（预留20%突发容量）
  • 数据中心级故障：跨AZ双活设计（数据同步延迟<500ms）+ 蓝绿部署
  • 数据倾斜治理：Salting（随机后缀0-99）+ 动态Rebalance（Flink KeyGroups监控）
  1. 稳定性保障体系：
  • 混沌工程：每月注入故障（网络分区、节点宕机、磁盘故障）
  • 全链路压测：影子流量回放（峰值流量3倍模拟）
  • 智能熔断：基于LSTM预测的弹性熔断（准确率92%）
  1. 成本优化实践：
  • 计算资源：Spot实例+竞价实例混部（成本降低43%）
  • 存储优化：冷数据转存Glacier Deep Archive（成本降低70%）
  • 流量压缩：Snappy压缩传输+列式存储（带宽节省65%）
  1. 数据质量保障：
  • 实时质量检测：Apache Griffin（延迟<5s的异常检测）
  • 端到端校验：分布式快照比对（每小时执行一次）
  • 数据血缘追踪：Nebula Graph构建全链路血缘图谱

（四）未来演进方向

  1. 智能运维体系：
  • AIOps异常检测：孤立森林算法实现秒级故障定位
  • 自主扩缩容：强化学习驱动的弹性决策引擎
  1. 新型硬件适配：
  • 持久内存：Optane SSD加速状态访问（延迟降低至μs级）
  • RDMA网络：RoCEv2协议优化跨节点通信
  1. 隐私计算整合：
  • 联邦学习：广告CTR模型联合训练（同态加密保护）
  • 差分隐私：统计结果添加拉普拉斯噪声（ε=0.1）

支撑单日万亿级事件处理，实现全年99.995%可用性，数据延迟P99控制在3.2秒内，年度IT成本降低5800万元。系统设计遵循"可观测性>弹性>效率"原则，建议每季度进行架构适应性评估。

相关文章：

广告事件聚合系统设计

需求背景 广告事件需要进行统计&#xff0c;计费&#xff0c;分析等。所以我们需要由数据接入&#xff0c;数据处理&#xff0c;数据存储&#xff0c;数据查询等多个服务模块去支持我们的广告系统 规模上 10000 0000个点击&#xff08;10000 00000 / 100k 1wQPS&#xff09; …...

编程日记 2025/5/6 20:38:34

PDF智能解析与知识挖掘：基于pdfminer.six的全栈实现

前言 在数字化信息爆炸的时代&#xff0c;PDF&#xff08;便携式文档格式&#xff09;作为一种通用的电子文档标准&#xff0c;承载着海量的结构化与非结构化知识。然而&#xff0c;PDF格式的设计初衷是用于展示而非数据提取&#xff0c;这使得从PDF中挖掘有价值的信息成为数据…...

编程日记 2025/5/6 19:42:36

VGG网络模型

VGG网络模型 诞生背景 VGGNet是牛津大学计算机视觉组核谷歌DeepMind一起研究出来的深度卷积神经网络。VGG是一种被广泛使用的卷积神经网络结构&#xff0c;其在2014年的ImageNet大规模视觉识别挑战中获得亚军。 通常所说的VGG是指VGG-16(13层卷积层3层全连接层)。具有规律的…...

编程日记 2025/5/3 9:52:47

开闭原则与依赖倒置原则区别：原类不变，新增类（功能）vs 接口类不变，原实现类可变

好&#xff0c;我来用最通俗的方式&#xff0c;用角色扮演 场景对话&#xff0c;不讲术语&#xff0c;让你彻底明白「依赖倒置原则」和「开闭原则」的区别。 &#x1f3ad; 场景&#xff1a;你是老板&#xff08;高层&#xff09;&#xff0c;你要雇人做事 一、【依赖倒置原则…...

编程日记 2025/5/3 9:51:45

【AI面试准备】Azure DevOps沙箱实验全流程详解

介绍动手实验&#xff1a;通过 Azure DevOps 沙箱环境实操&#xff0c;体验从代码提交到测试筛选的全流程。如何快速掌握&#xff0c;以及在实际工作中如何运用。 通过 Azure DevOps 沙箱环境进行动手实验&#xff0c;是快速掌握 DevOps 全流程&#xff08;从代码提交到测试筛选…...

编程日记 2025/5/3 9:50:42

大数据面试问答-数据湖

1. 概念 数据湖&#xff08;Data Lake&#xff09;&#xff1a; 以原始格式&#xff08;如Parquet、JSON等&#xff09;存储海量原始数据的存储库&#xff0c;支持结构化、半结构化和非结构化数据&#xff08;如文本、图像&#xff09;。采用Schema-on-Read模式&#xff0c;数…...

编程日记 2025/5/3 9:49:38

驱动开发系列56 - Linux Graphics QXL显卡驱动代码分析（三）显示模式设置

一：概述 如之前介绍，在qxl_pci_probe 中会调用 qxl_modeset_init 来初始化屏幕分辨率和刷新率，本文详细看下 qxl_modeset_init 的实现过程。即QXL设备的显示模式设置，是如何配置CRTC，Encoder，Connector 的以及创建和更新帧缓冲区的。 二：qxl_modeset_init 分析 in…...

编程日记 2025/5/3 9:49:37

沥青路面裂缝的目标检测与图像分类任务

文章题目是《A grid‐based classification and box‐based detection fusion model for asphalt pavement crack》 于2023年发表在《Computer‐Aided Civil and Infrastructure Engineering》 论文采用了一种基于网格分类和基于框的检测&#xff08;GCBD&#xff09;&#xff…...

编程日记 2025/5/3 9:48:35

单片机-STM32部分：0、学习资料汇总

飞书文档https://x509p6c8to.feishu.cn/wiki/Kv7VwjDD8idFWKkMj4acZA3lneZ 一、软件部分 STM32F1系列资料官网下载地址 https://www.stmcu.com.cn/Designresource/list/STM32F1/document/document STM32官方数据手册 有哪些版本&#xff0c;哪些资源&#xff0c;对应哪些IO…...

编程日记 2025/5/3 9:46:30

杭电oj（1180、1181）题解

目录 1180 题目 思路 问题概述 代码思路分析 1. 数据结构与全局变量 2. BFS 函数 bfs 3. 主函数 main 总结 代码 1181 题目 思路 1. 全局变量的定义 2. 深度优先搜索函数 dfs 3. 主函数 main 总结 代码 1180 题目 思路 注&#xff1a;当走的方向和楼梯方向一…...

编程日记 2025/5/3 9:46:26

内部类（3）：匿名内部类

1 匿名类 请看下面这个例子&#xff1a; public class Parcel7 {public Contents contents() {return new Contents() {private int i 11;public int value() {return i;}};}public static void main(String[] args) {Parcel7 p new Parcel7();Contents c p.contents();} }…...

编程日记 2025/5/3 9:44:23

组件通信-$attrs

概述&#xff1a;$attrs用于实现当前组件的父组件&#xff0c;向当前组件的子组件通信&#xff08;爷→孙&#xff09;。 具体说明&#xff1a;$attrs是一个对象&#xff0c;包含所有父组件传入的标签属性。 注意&#xff1a;$attrs会自动排除props中声明的属性(可以认为声明过…...

编程日记 2025/5/3 9:43:18

Laravel Octane 项目加速与静态资源优化指南

Laravel Octane 项目加速与静态资源优化指南 一、Octane 核心加速配置 扩展安装与环境配置 composer require laravel/octane # 安装核心扩展‌php artisan octane:install # 生成配置文件&#xff08;选择 Swoole/RoadRunner 等服务器&#xff09;‌服务器参数调优‌ …...

编程日记 2025/5/3 9:42:15

【Linux】Petalinux U-Boot

描述 部分图片和经验来源于网络&#xff0c;若有侵权麻烦联系我删除&#xff0c;主要是做笔记的时候忘记写来源了&#xff0c;做完笔记很久才写博客。 专栏目录&#xff1a;记录自己的嵌入式学习之路-CSDN博客 目录 0 引导流程示例 1 进入U-Boot 2 常用U-Boot操作命…...

编程日记 2025/5/3 9:42:15

【KWDB 创作者计划】技术解读：多模架构、高效时序数据处理与分布式实现

技术解读&#xff1a;多模架构、高效时序数据处理与分布式实现 一、多模架构1.1 架构概述1.2 源码分析1.3 实现流程 二、高效时序数据处理2.1 处理能力概述2.2 源码分析2.3 实现流程 三、分布式实现3.1 分布式特性概述3.2 源码分析3.3 实现流程 四、总结 在当今数据爆炸的时代&…...

编程日记 2025/5/3 9:40:10

深度学习框架PyTorch——从入门到精通（YouTube系列 - 4）——使用PyTorch构建模型

这部分是 PyTorch介绍——YouTube系列的内容&#xff0c;每一节都对应一个youtube视频。&#xff08;可能跟之前的有一定的重复&#xff09; torch.nn.Module&#xff08;PyTorch神经网络模块&#xff09;和torch.nn.Parameter&#xff08;PyTorch神经网络参数&#xff09;常见…...

编程日记 2025/5/3 9:40:10

通过组策略使能长路径

打开组策略编辑器&#xff0c;依次展开&#xff1a; 计算机配置 > 管理模板然后双击 所有设置 右侧就会出现列表。接着在列表中找到 启用 win32 长路径 &#xff0c;双击 改成 已启用 &#xff0c;然后点击确定。最后重启计算机。...

编程日记 2025/5/3 9:39:07

Dubbo（90）如何设计一个支持多协议的Dubbo服务？

设计一个支持多协议的Dubbo服务需要考虑以下几个方面&#xff1a; 服务接口设计&#xff1a;确保服务接口的定义可以被不同协议实现。多协议配置&#xff1a;配置不同的协议&#xff0c;例如 Dubbo、HTTP、gRPC 等。服务注册与发现&#xff1a;确保服务能够在多个协议下注册和…...

编程日记 2025/5/3 9:39:04

JavaScript常规解密技术解析指南

第一章&#xff1a;密码学基础铺垫 逆向思维提示框 逆向思维在密码学中至关重要。当面对加密数据时&#xff0c;不要局限于常规的加密过程&#xff0c;而是要从解密的角度去思考。例如&#xff0c;在看到Base64编码的数据时&#xff0c;要立刻联想到它是如何从原始数据转换而…...

编程日记 2025/5/3 9:38:02

字符串的相关方法

1. equals方法的作用 方法介绍 public boolean equals(String s) 比较两个字符串内容是否相同、区分大小写 示例代码 public class StringDemo02 {public static void main(String[] args) {//构造方法的方式得到对象char[] chs {a, b, c};String s1 new String(chs);…...

编程日记 2025/5/3 9:35:58

云原生后端架构的实践与挑战：探索现代后端开发的未来

📝个人主页🌹：一ge科研小菜鸡-CSDN博客 🌹🌹期待您的关注 🌹🌹 随着云计算的普及，云原生架构已经逐渐成为现代软件开发的主流方式。云原生后端架构通过容器化、微服务、自动化运维等技术，帮助企业构建具有高度可扩展性和可靠性的系统。在本文中，我们将深入探讨…...

编程日记 2025/5/3 9:35:57

MySQL基础关键_005_DQL（四）

目 录 一、分组函数 1.说明 2.max/min 3.sum/avg/count 二、分组查询 1.说明 2.实例 &#xff08;1&#xff09;查询岗位和平均薪资 &#xff08;2&#xff09;查询每个部门编号的不同岗位的最低薪资 3.having &#xff08;1&#xff09;说明 &#xff08;2&#xff…...

编程日记 2025/5/3 9:35:57

Gradio全解20——Streaming：流式传输的多媒体应用（3）——实时语音识别技术

Gradio全解20——Streaming&#xff1a;流式传输的多媒体应用&#xff08;3&#xff09;——实时语音识别技术 本篇摘要20. Streaming&#xff1a;流式传输的多媒体应用20.3 实时语音识别技术20.3.1 环境准备和开发步骤1. 环境准备2. ASR应用开发步骤&#xff08;基于Transform…...

编程日记 2025/5/3 9:34:55

[android]MT6835 Android 关闭selinux方法

Selinux SELinux is an optional feature of the Linux kernel that provides support to enforce access control security policies to enforce MAC. It is based on the LSM framework. Working with SELinux on Android – LineageOS Android 关闭selinux MT6835 Android…...

编程日记 2025/5/3 9:34:54

GitHub 趋势日报 (2025年05月01日)

本日报由 TrendForge 系统生成 https://trendforge.devlive.org/ &#x1f4c8; 今日整体趋势 Top 10 排名项目名称项目描述今日获星总星数语言1hacksider/Deep-Live-Camreal time face swap and one-click video deepfake with only a single image⭐ 1311⭐ 56231Python2day…...

编程日记 2025/5/3 9:34:54

对称加密算法（AES、ChaCha20和SM4）Python实现——密码学基础(Python出现No module named “Crypto” 解决方案)

文章目录 一、对称加密算法基础1.1 对称加密算法的基本原理1.2 对称加密的主要工作模式 二、AES加密算法详解2.1 AES基本介绍2.2 AES加密过程2.3 Python中实现AES加密Python出现No module named “Crypto” 解决方案 2.4 AES的安全考量 三、ChaCha20加密算法3.1 ChaCha20基本介…...

编程日记 2025/5/3 9:33:47

n8n 键盘快捷键和控制键

n8n 键盘快捷键和控制键 工作流控制键画布操作移动画布画布缩放画布上的节点操作选中一个或多个节点时的快捷键 节点面板操作节点面板分类操作 节点内部操作 n8n 为部分操作提供了键盘快捷键。 工作流控制键 Ctrl Alt n&#xff1a;创建新工作流Ctrl o&#xff1a;打开工作…...

编程日记 2025/5/3 9:32:45

部署Superset BI（二）再战Superset

上次安装没有成功&#xff0c;这次把superset的安装说明好好看了一下。 rootNocobase:/usr# cd superset rootNocobase:/usr/superset# git clone https://github.com/apache/superset.git Cloning into superset... remote: Enumerating objects: 425644, done. remote: Count…...

编程日记 2025/5/3 9:32:44

生日快乐祝福网页制作教程

原文&#xff1a;https://www.w3cschool.cn/article/88229685.html &#xff08;本文非我原创&#xff0c;请标记为付费文章&#xff0c;也请勿将我标记为原创&#xff09; 一、引言 生日是每个人一年中最特别的日子之一。在这个特别的日子里&#xff0c;我们都希望能够给亲…...

编程日记 2025/5/3 9:30:37

Spring MVC @RequestHeader 注解怎么用？

我们来详细解释一下 Spring MVC 中的 RequestHeader 注解。 RequestHeader 注解的作用 RequestHeader 注解用于将 HTTP 请求中的**请求头&#xff08;Request Headers&#xff09;**的值绑定到 Controller 方法的参数上。 请求头是 HTTP 请求的一部分&#xff0c;包含了关于…...

编程日记 2025/5/3 9:30:36

【Linux深入浅出】之全连接队列及抓包介绍

【Linux深入浅出】之全连接队列及抓包介绍 理解listen系统调用函数的第二个参数简单实验实验目的实验设备实验代码实验现象 全连接队列简单理解什么是全连接队列全连接队列的大小 从Linux内核的角度理解虚拟文件、sock、网络三方的关系回顾虚拟文件部分的知识struct socket结构…...

编程日记 2025/5/3 9:29:34

Linux C++ JNI封装、打包成jar包供Java调用详细介绍

在前面 Android专栏 中详细介绍了如何在Android Studio中调用通过jni封装的c库。 在Android使用 opencv c代码&#xff0c;需要准备opencv4android&#xff0c;也就是c的任何代码&#xff0c;是使用Android NDK编译的&#xff0c;相当于在windows/mac上使用Android stdido交叉…...

编程日记 2025/5/3 9:29:33

CPO-BP+NSGA，豪冠猪优化BP神经网络+多目标遗传算法！（Matlab完整源码和数据）

目录 效果一览基本介绍程序设计参考资料 效果一览 基本介绍 1.CPO-BPNSGA&#xff0c;豪冠猪优化BP神经网络多目标遗传算法&#xff01;&#xff08;Matlab完整源码和数据&#xff09;&#xff0c;豪冠猪算法优化BP神经网络的权值和阈值&#xff0c;运行环境Matlab2020b及以上…...

编程日记 2025/5/3 9:29:32

组件通信-v-model

概述&#xff1a;实现 父↔子 之间相互通信。 前序知识 —— v-model的本质 <!-- 使用v-model指令 --> <input type"text" v-model"userName"><!-- v-model的本质是下面这行代码 --> <input type"text" :value"use…...

编程日记 2025/5/3 9:28:30

使用PyMongo连接MongoDB的基本操作

MongoDB是由C语言编写的非关系型数据库&#xff0c;是一个基于分布式文件存储的开源数据库系统&#xff0c;其内容存储形式类似JSON对象&#xff0c;它的字段值可以包含其他文档、数组及文档数组。在这一节中&#xff0c;我们就来回顾Python 3下MongoDB的存储操作。 常用命令:…...

编程日记 2025/5/3 9:27:26

010302-oss_反向代理_负载均衡-web扩展2-基础入门-网络安全

文章目录 1 OSS1.1 什么是 OSS 存储&#xff1f;1.2 OSS 核心功能1.3 OSS 的优势1.4 典型使用场景1.5 如何接入 OSS&#xff1f;1.6 注意事项1.7 cloudreve实战演示1.7.1 配置cloudreve连接阿里云oss1.7.2 常见错误1.7.3 安全测试影响 2 反向代理2.1 正向代理和反向代理2.2 演示…...

编程日记 2025/5/3 9:27:25

PyQt 或 PySide6 进行 GUI 开发文档与教程

一、官网文档 Qt 官方文档&#xff1a;Porting to Qt 6 | Qt 6.9Qt 维基&#xff1a;​​​​​​​Qt WikiQt for Python (PySide6) &#xff1a;​​​​​​​Qt for Python - Qt WikiPySide6 快速上手指南&#xff1a;​​​​​​​Getting Started - Qt for Python PyS…...

编程日记 2025/5/3 9:27:25

【东枫科技】AMD / Xilinx Alveo™ V80计算加速器卡

AMD / Xilinx Alveo™ V80计算加速器卡 AMD/Xilinx Alveo ™ V80计算加速器卡是一款功能强大的计算加速器&#xff0c;基于7nm Versal™ 自适应SoC架构而打造。 AMD/Xilinx Alveo V80卡设计用于内存密集型任务。 这些任务包括HPC、数据分析、网络安全、传感器处理、计算存储和…...

编程日记 2025/5/3 9:27:23

C++ 动态内存管理

operator new和operator delete函数是两个全局函数&#xff0c;编译器在编译new和delete时会调用这两个函数&#xff0c;其底层分别是封装malloc和free 1.new new 内置类型 内置类型没有构造函数&#xff0c;所以使用new就是调operator new函数开空间&#xff0c;如果要初始化…...

编程日记 2025/5/3 9:26:22

（11）Vue-Router路由的详细使用

本系列教程目录&#xff1a;Vue3Element Plus全套学习笔记-目录大纲 文章目录 第2章 路由 Vue-Router2.1 Vue路由快速入门2.1.1 创建项目2.1.2 路由运行流程 2.2 传递参数-useRoute2.2.1 路径参数-params1&#xff09;普通传参2&#xff09;传递多个参数3&#xff09;对象方式传…...

编程日记 2025/5/3 9:25:17

RISCV的smstateen-ssstateen扩展

RISC-V 的 Smstateen / Ssstateen 扩展是为了解决安全性和资源隔离性问题而设计的&#xff0c;尤其是针对在多个上下文&#xff08;如用户线程、多个虚拟机&#xff09;之间 潜在的隐蔽信道(covert channel) 风险。 &#x1f310; 背景&#xff1a;隐蔽信道与上下文切换问题 当…...

编程日记 2025/5/3 9:24:15

C++ 与 Lua 联合编程

在软件开发的广阔天地里&#xff0c;不同编程语言各有所长。C 以其卓越的性能、强大的功能和对硬件的直接操控能力&#xff0c;在系统开发、游戏引擎、服务器等底层领域占据重要地位&#xff0c;但c编写的程序需要编译&#xff0c;这往往是一个耗时操作&#xff0c;特别对于大型…...

编程日记 2025/5/3 9:24:13

瑞萨 EZ-CUBE2 调试器

瑞萨 EZ-CUBE2 调试器 本文介绍了瑞萨 EZ-CUBE2 调试器的基本信息、调试方式、环境搭建、硬件连接、软件测试等。 包装展示 调试器展示 开关选项 详见&#xff1a;EZ-CUBE2 | Renesas 瑞萨电子 . 环境搭建 使用 Renesas 公司的 e2 studio 开发工具&#xff0c;下载 并安装该…...

编程日记 2025/5/3 9:22:09

MATLAB滤波工具箱演示——自定义维度、滤波方法的例程演示与绘图、数据输出

使用 M A T L A B MATLAB MATLAB的界面做了一个 M A T L A B MATLAB MATLAB滤波工具箱 d e m o demo demo&#xff0c;本文章给出演示&#xff1a;自定义维度、滤波方法的例程演示与绘图、数据输出 文章目录 编辑界面使用方法优势待改进点部分代码 编辑界面 使用 M A T L A B …...

编程日记 2025/5/3 9:21:07

数据库索引优化实战: 如何设计高效的数据库索引

数据库索引优化实战: 如何设计高效的数据库索引 一、理解数据库索引的核心原理 1.1 B树索引的结构特性 数据库索引&#xff08;Database Index&#xff09;的本质是通过特定数据结构加速数据检索。现代关系型数据库普遍采用B树&#xff08;B Tree&#xff09;作为默认索引结构&…...

编程日记 2025/5/3 9:21:06

TS 安装

TS较JS优势 1 TS静态类型编程语言。编译时发现错误 2 类型系统 强化变量类型概念 3 支持新语法 4 类型推断机制 可以和React框架中的各种hook配合 5 任何地方都有代码提示 tsc 命令 将TS转为JS 1 tsc 文件.ts 生成 js文件 2 执行JS代码...

编程日记 2025/5/3 9:21:03

CMake separate_arguments用法详解

separate_arguments 是 CMake 中用于将字符串分割成参数列表的命令&#xff0c;适用于处理包含空格的参数或复杂命令行参数。以下是其用法详解&#xff1a; 基本语法 separate_arguments(<variable> [UNIX|WINDOWS_COMMAND] [PROGRAM <program>] [ARGS <args&…...

编程日记 2025/5/3 9:20:02

【AI科技】AMD ROCm 6.4 新功能：突破性推理、即插即用容器和模块化部署，可在 AMD Instinct GPU 上实现可扩展 AI

AMD ROCm 6.4 新功能&#xff1a;突破性推理、即插即用容器和模块化部署&#xff0c;可在 AMD Instinct GPU 上实现可扩展 AI 现代 AI 工作负载的规模和复杂性不断增长&#xff0c;而人们对性能和部署便捷性的期望也日益提升。对于在 AMD Instinct™ GPU 上构建 AI 和 HPC 未来…...

编程日记 2025/5/3 9:19:00

2025年- H20-Lc128-240. 搜索二维矩阵 II（矩阵）---java版

1.题目描述 2.思路 遍历矩阵&#xff0c;然后如果遇到矩阵中的值正好等于target&#xff0c;输出true。否则&#xff0c;输出false。 3.代码 public class H240 {public boolean searchMatrix(int[][] matrix, int target) {//1.计算出总的行值&#xff0c;总的列值。int mm…...

编程日记 2025/5/3 9:17:56

LearningFlow：大语言模型城市驾驶的自动化策略学习工作流程

《LearningFlow: Automated Policy Learning Workflow for Urban Driving with Large Language Models》2025年1月发表&#xff0c;来自香港科技大学广州分校的论文。 强化学习&#xff08;RL&#xff09;的最新进展表明了自动驾驶的巨大潜力。尽管有这一前景&#xff0c;但奖励…...

编程日记 2025/5/3 9:17:55