当前位置： 首页 > news >正文

极狐GitLab CEO 柳钢受邀出席 2025 全球机器学习技术大会

news 来源：原创 2025/7/28 22:45:51

极狐GitLab 是 GitLab 在中国的发行版，关于中文参考文档和资料有：

  • 极狐GitLab 中文文档
  • 极狐GitLab 中文论坛
  • 极狐GitLab 官网

2025 年 4 月 18 日至 19 日，2025 全球机器学习技术大会（ML-Summit 2025）在上海隆重举行。本次大会围绕 AI 最前沿的发展趋势与落地实践，聚焦大语言模型技术演进、AI 智能体、具身智能、DeepSeek 技术解析与行业实践等 12 大专题，邀请了超 60 位来自全球顶尖科技企业与学术机构的重磅嘉宾齐聚一堂，全面呈现 AI 领域的技术风向与应用前沿。 极狐GitLab CEO 柳钢受邀出席大会，并在圆桌对话环节中发表精彩观点。

大会现场

作为大会主论坛压轴的圆桌对话环节，柳钢与格蠹科技创始人张银奎，CSDN 高级副总裁、Boolan 首席技术专家李建忠，加拿大工程院及加拿大皇家学院院士、香港理工大学 AI 高等研究院院长杨强，AMD 人工智能事业部企业副总裁 Ramine Roane 共同围绕“大模型技术趋势展望与产业落地”主题，就算法、算力、数据三大 AI 核心要素如何驱动大模型持续演进展开了深入探讨。

圆桌对话

圆桌对话精彩总结

大模型开源和传统代码开源有哪些异同？

柳钢：“ 作为开源的推动者，我认为大模型开源与传统软件开源有一个显著的区别，那就是它的影响力截然不同。

传统软件，即使开源，它的目标通常是解决某个具体问题。例如，极狐GitLab 旨在为数百万乃至数千万程序员提供一个高效的软件研发平台。这种影响虽然广泛，但仍然较为聚焦。而大模型开源则不同，一旦开源，其影响力会迅速渗透到各行各业。用一个形象的比喻来说，大模型开源的影响力不仅仅是“更大一个量级”，而是“完全不同的维度”。

更重要的是，大模型开源并不仅仅是将代码或权重公开。如果只是这样，其复现的难度会非常高，因为训练大模型所需的数据量和计算能力非常庞大。很多时候，这样的大模型开源更像是“我请你吃满汉全席，但只给你调料包”。你可以对模型进行微调和修改权重，但很难从零开始再造出一个完全一样的模型。

正因如此，大模型开源带来了一个重要转变——它让你可以免费获得一个具备基础智能能力的核心技术。这本质上强化了开源的意义，也使得开源的影响力更加深远。

像 Deepseek 这样的大模型项目，通过开源推动技术普及，正是我们长期倡导的开源精神的延续和拓展。我们非常欣慰地看到，开源在中国乃至全球越来越受到重视，开源的价值也在不断得到验证。”

极狐GitLab CEO 柳钢

开源大模型，它的护城河和商业模式最终会在哪儿？

柳钢：“未来 AI 的大事件应该是基于开源大模型、多模态大模型技术构建的 AI Agent 在企业应用的落地，其中我最看好的一个领域是 AI 智能编程。而在构建 AI Agent 这类产品方面，最后我也想分享对于“护城河”的两种理解：

对于坚持开源的企业来说，其唯一的护城河就是持续进步，不断迭代，实现更优性能和更高效率；
对于以模型为基础做产品的企业而言，真正的护城河只有三个字：好产品。好产品不是凭空诞生的，而是通过一个个“踩坑”积累而来——只有深入企业现场、解决实际问题，才能在这个眼花缭乱的市场中立足。”

企业使用 AI 编程工具进行提效的关键是什么？

柳钢：“现代化的软件开发早已不是简单的编程，还涉及到代码编写完以后进行的代码审核、CI/CD 流水线的运行以及安全扫描等。因此 AI 编程是极致的编程理念和编程智能体的结合。因此，我认为 AI 编程的趋势有两个：

  • 一体化平台：AI 编程不能只是简单地生成代码，而是要涉及到代码的全流程管理，也就是要实现 AI 对软件开发全生命周期的赋能；
  • 私有化部署：AI 编程要想在企业内部为企业所有、为企业所用，就必须要处理好数据安全的问题。因为代码是企业的核心资产，企业不可能会把成千上百万行的代码上传到云端。因此，AI 编程平台一定是要能够部署在企业内部的网络环境中"。

极狐GitLab 是把编程思想转化为行动、秉承“技术后发优势”理念的一家软件公司，打造了一款 AI 编程工具——极狐驭码（CodeRider），从第一天起，就在以 AI + DevOps 一体化平台和私有化部署的方式在进行快速迭代。

关于驭码CodeRider

驭码CodeRider 是极狐GitLab 推出的基于生成式人工智能技术的新一代软件生产工具，为开发者提供自然语言生成代码、代码补全、代码调优纠错、单元测试生成、代码解释以及智能技术问答等功能。同时，驭码CodeRider 与 GitLab 深度融合，为企业提供软件开发全生命周期（SDLC）的支持，涵盖项目快速上手、企业文档库/代码仓智能问答、议题管理、合并请求智能辅助、代码智能评审、安全扫描智能解析、流水线管理等功能。

驭码CodeRider 用 AI 赋能软件开发

相关文章：

极狐GitLab CEO 柳钢受邀出席 2025 全球机器学习技术大会

极狐GitLab 是 GitLab 在中国的发行版，关于中文参考文档和资料有： 极狐GitLab 中文文档极狐GitLab 中文论坛极狐GitLab 官网 2025 年 4 月 18 日至 19 日，2025 全球机器学习技术大会（ML-Summit 2025）在上海隆重举行。…...

编程日记 2025/7/28 22:45:51

数据仓库 vs 数据湖：架构、应用场景与技术差异全解析

目录 一、概念对比：结构化 vs 全类型数据 二、技术架构对比 1. 数据仓库架构特点 2. 数据湖架构特点 三、典型应用场景 数据仓库适合： 数据湖适合： 四、数据湖仓一体：趋势还是折中？ 五、总结：如何…...

编程日记 2025/7/28 18:46:50

【25软考网工笔记】第三章 局域网（1）CSMA/CD、二进制指数退避算法、最小帧长计算

目录 一、CSMA/CD 1. 局域网架构概述 2. 局域网的拓扑结构 3. CSMA 1）CSMA的三种监听算法 1、1-坚持型监听算法（继续监听，不等待） 2、非坚持型监听算法（后退随机事件） 3、P-坚持型监听算法 2&#…...

编程日记 2025/7/27 11:12:35

Harbor对接非AWS对象存储

背景说明 项目的应用完全运行在一个离线环境中，同时通过K8S的方式进行容器编排。需要自建一个harbor的镜像仓库。并且通过私有云提供的S3服务进行容器镜像的持久化存储。我踩的其中的一个坑就是S3的region名字非AWS的标准名称。运行时抱错如下： 2025-04…...

编程日记 2025/7/29 0:19:52

实训Day-1 漏洞攻击实战

目录 实训任务1 漏洞攻击实战一 实训任务2 漏洞攻击实战二 实训任务3 白云新闻搜索 实训任务4 手速要快 实训任务5 包罗万象 总结 今天的实训目的是为了：了解漏洞攻击的一般步骤；掌握SQL注入的基本原理；掌握XSS攻击的基本原理&#xff…...

编程日记 2025/7/29 0:24:19

Linux-网络基础

一.网络背景 网络的起源与20世纪中期的冷战背景密切相关。美苏争霸期间，美国国防部担心传统集中式通信系统（如电话网络）在核战争中容易被摧毁，因此急需一种去中心化、高容错的通信方式。1969年，美国国防部高级研究计划…...

编程日记 2025/7/29 0:22:31

算法 | 鲸鱼优化算法（WOA）原理，公式，应用，算法改进研究综述，完整matlab代码

===================================================== github：https://github.com/MichaelBeechan CSDN：https://blog.csdn.net/u011344545 ===================================================== 鲸鱼优化算法 一、原理与公式二、应用领域三、算法改进研究四、完整MAT…...

编程日记 2025/7/29 0:16:35

[BJDCTF2020]EzPHP

这一道题里面的知识点实在是太多了&#xff0c;即使这道题是我最喜欢的RCE也有点大脑停转了&#xff0c;所以还是做个笔记&#xff0c;以后方便回忆 直接跳过打点&#xff0c;来到源码 <?php highlight_file(__FILE__); error_reporting(0); $file "1nD3x.php"…...

编程日记 2025/7/29 0:29:19

企业微信-自建应用

1. 创建自建应用 2. 配置小程序/H5入口 3. 准备 &#xff1a; CorpId&#xff08;企业id&#xff09;、 AgentID&#xff08;应用id&#xff09;、 CorpsecretID&#xff08;应用Secret&#xff09; 4. 配置企业可信IP 5. 如H5需要授权登录&#xff0c;那么需要配置网页授…...

编程日记 2025/7/29 0:19:04

[FPGA基础] 时钟篇

Xilinx FPGA 时钟管理详细文档 本文档详细介绍 Xilinx FPGA 中的时钟管理&#xff0c;包括时钟资源、时钟管理模块、设计注意事项以及最佳实践。适用于使用 Xilinx 7 系列、UltraScale 和 UltraScale 系列 FPGA 的开发者。 1. 时钟资源概述 Xilinx FPGA 提供丰富的时钟资源&a…...

编程日记 2025/7/29 0:19:52

高德火星坐标(GCJ-02)转WGS84坐标

高德火星坐标(GCJ-02)转WGS84坐标 1 转换算法 import mathdef gcj02_to_wgs84(lon, lat):"""高德火星坐标(GCJ-02)转WGS84坐标"""a 6378245.0 # 长半轴ee 0.00669342162296594323 # 扁率def transform_lon(x, y):ret 300.0 x 2.0 * y …...

编程日记 2025/7/29 0:21:33

基于opencv和PaddleOCR识别身份证信息

1、安装组件 pip install --upgrade paddlepaddle paddleocr 2、完整code import cv2 import numpy as np from paddleocr import PaddleOCR# 初始化 PaddleOCR use_angle_clsTrue, lang"ch", det_db_thresh0.1, det_db_box_thresh0.5)def preprocess_image(image…...

编程日记 2025/7/29 0:21:31

Day-1 漏洞攻击实战

实训任务1 漏洞攻击实战一 使用 御剑 得到网站后台地址 数据库登录与日志配置​​ 使用默认密码 root:root 登录phpMyAdmin&#xff0c;执行 SHOW VARIABLES LIKE general% 查看日志状态。 开启日志功能&#xff1a;set global general_log "ON";&#xff08;配图&…...

编程日记 2025/7/28 2:28:22

穿透数据迷雾：PR 曲线与 ROC 曲线的深度剖析+面试常见问题及解析

一、混淆矩阵与评价指标基础 混淆矩阵核心构成&#xff1a;混淆矩阵是分类模型性能评估的基石&#xff0c;以 22 矩阵形式呈现分类结果。其中&#xff0c;真正例&#xff08;TP&#xff09;表示实际为正类且被正确预测的样本&#xff1b;假正例&#xff08;FP&#xff09;是实…...

编程日记 2025/7/27 8:33:04

【Linux篇】轻松搭建命名管道通信：客户端与服务器的互动无缝连接

从零开始&#xff1a;基于命名管道实现客户端与服务器的实时通信 一. 命名管道1.1 基本概念1.2 创建命名管道1.2.1 创建方法1.2.2 示例代码&#xff1a;1.2.3 注意事项&#xff1a;1.3 与匿名管道区别 1.4 打开原则1.4.1 管道打开顺序1.4.2 阻塞行为1.4.3 管道的关闭1.4.4 关闭…...

编程日记 2025/7/29 0:16:36

快充协议芯片XSP04D支持使用一个Type-C与电脑传输数据和快充取电功能

快充是由充电器端的充电协议和设备端的取电协议进行握手通讯进行协议识别来完成的&#xff0c;当充电器端的充电协议和设备端的取电协议握手成功后&#xff0c;设备会向充电器发送电压请求&#xff0c;充电器会根据设备的需求发送合适的电压给设备快速供电。 设备如何选择快充…...

编程日记 2025/7/27 4:28:19

MySQL的窗口函数（Window Functions）

一、窗口函数核心概念 ​​窗口&#xff08;Window&#xff09;​​ 窗口是数据行的集合&#xff0c;由OVER()子句定义。它决定了函数计算的“数据范围”&#xff0c;可以是一个分区的全部行、当前行前后的行&#xff0c;或动态变化的子集。 ​​语法结构​​ SELECT window_f…...

编程日记 2025/7/27 11:12:05

一个很简单的机器学习任务

一个很简单的机器学习任务 前言 基于线上colab做的一个简单的案例&#xff0c;应用了线性回归算法&#xff0c;预测了大概加州3000多地区的房价中位数 过程 先导入了Pandas&#xff0c;这是一个常见的Python数据处理函数库 用Pandas的read_csv函数把网上一个共享数据集&…...

编程日记 2025/7/29 0:21:32

ORION：通过视觉-语言指令动作生成的一个整体端到端自动驾驶框架

25年3月来自华中科技和小米电动汽车的论文“ORION: A Holistic End-to-End Autonomous Driving Framework by Vision-Language Instructed Action Generation”。 由于因果推理能力有限&#xff0c;端到端 (E2E) 自动驾驶方法仍然难以在交互式闭环评估中做出正确决策。当前的方…...

编程日记 2025/7/29 0:16:13

python全栈-flask

python全栈-flask 文章目录 入门上手hello worldflask运行方式测试路由with app.test_request_context():debug模式配置flask参数动态路由数据类型自定义转换器to_pythonPostMan&#xff08;API测试查询参数的获取请求体参数上传文件其它参数url_for 函数重定向响应内容自定义响…...

编程日记 2025/7/29 0:19:05

Unity中的数字孪生项目：两种输入方式对观察物体的实现

在数字孪生项目中&#xff0c;精确的相机控制至关重要。相机不仅需要灵活地跟随目标&#xff0c;还要能够平滑地旋转和缩放&#xff0c;以便观察和分析物体的各个细节。今天&#xff0c;我将通过 TouchControlCamera 和 CameraRotate 两个脚本&#xff0c;展示如何实现一个适用…...

编程日记 2025/7/29 0:26:13

ECharts散点图-散点图14，附视频讲解与代码下载

引言&#xff1a; ECharts散点图是一种常见的数据可视化图表类型&#xff0c;它通过在二维坐标系或其它坐标系中绘制散乱的点来展示数据之间的关系。本文将详细介绍如何使用ECharts库实现一个散点图&#xff0c;包括图表效果预览、视频讲解及代码下载&#xff0c;让你轻松掌握…...

编程日记 2025/7/29 0:22:29

【教程】Digispark实现串口通信

转载请注明出处&#xff1a;小锋学长生活大爆炸[xfxuezhagn.cn] 如果本文帮助到了你&#xff0c;欢迎[点赞、收藏、关注]哦~ 没想到这么老&#xff0c;很多代码都不能用&#xff0c;修了好久。。。 TinySoftwareSerial.cpp #include <stdlib.h> #include <stdio.h&g…...

编程日记 2025/7/29 0:20:42

GPT-4.1 开启智能时代新纪元

GPT-4.1 全解析&#xff1a;开启智能时代新纪元&#xff08;含费用详解&#xff09; 2025年4月&#xff0c;OpenAI 正式推出全新一代语言模型——GPT-4.1 系列&#xff0c;包括 GPT-4.1、GPT-4.1 Mini 和 GPT-4.1 Nano。相比以往模型&#xff0c;它在代码生成、指令理解、长文本…...

编程日记 2025/7/28 13:33:04

4.21 spark和hadoop的区别与联系

一、Hadoop 1. 定义 Hadoop是一个由Apache基金会开发的分布式系统基础架构。它最初是为了解决大规模数据存储和处理的问题而设计的。Hadoop的核心组件包括HDFS&#xff08;Hadoop Distributed File System&#xff09;和MapReduce。 2. HDFS&#xff08;Hadoop Distributed Fi…...

编程日记 2025/7/28 10:35:55

Nacos 客户端 SDK 的核心功能是什么？是如何与服务端通信的？

Nacos 客户端 SDK 的核心功能 Nacos 客户端 SDK 是应用程序集成 Nacos 能力的桥梁&#xff0c;它封装了与 Nacos 服务端交互的复杂性&#xff0c;为开发者提供了简单易用的 API。其核心功能主要围绕两大方面&#xff1a;服务发现 和 配置管理。 服务发现 (Service Discovery) …...

编程日记 2025/7/27 11:11:53

servlet-保存作用域

保存作用域 保存作用域&#xff1a;原始情况下&#xff0c;保存作用域我们有四个&#xff1a;page(一般不用了) 、request&#xff08;一般请求响应范围&#xff09;、session(一次会话范围)、application(整个应用程序范围)1&#xff09;request&#xff1a;一般请求响应范围…...

编程日记 2025/7/29 0:16:35

从规则到大模型：知识图谱信息抽取实体NER与关系RE任务近10年演进发展详解

摘要&#xff1a; 本文回顾了关系抽取与实体抽取领域的经典与新兴模型&#xff0c;清晰地梳理了它们的出现时间与核心创新&#xff0c;并给出在 2025 年不同资源与场景下的最佳实践推荐。文章引用了 BiLSTM‑CRF、BiLSTM‑CNN‑CRF、SpanBERT、LUKE、KnowBERT、CasRel、REBEL、…...

编程日记 2025/7/28 20:37:14

【自然语言处理与大模型】模型压缩技术之蒸馏

知识蒸馏是一种模型压缩技术&#xff0c;主要用于将大型模型&#xff08;教师模型&#xff09;的知识转移到更小的模型&#xff08;学生模型&#xff09;中。在大语言模型领域&#xff0c;这一技术特别重要。 知识蒸馏的核心思想是利用教师模型的输出作为软标签&#xff08;sof…...

编程日记 2025/7/29 0:16:14

yum如果备份已经安装的软件？

在 CentOS 系统中&#xff0c;你可以通过以下步骤将 yum 下载的组件打包备份到本地&#xff1a; 方法 1&#xff1a;使用 yumdownloader 直接下载 RPM 包 1. 安装 yum-utils 工具 yum install -y yum-utils2. 下载指定软件包及其依赖 yumdownloader --resolve <package-n…...

编程日记 2025/7/28 9:34:44

室外摄像头异常自检指南+视频监控系统EasyCVR视频质量诊断黑科技

室外监控摄像头在安防监控系统运行中&#xff0c;常出现连接不畅、设备互认失败等问题。今天我们来介绍两类安防监控摄像头的典型问题及排查步骤。 问题1&#xff1a;同品牌新摄像头无法被老录像机识别 排查步骤&#xff1a; 1&#xff09;供电检查 确认摄像头供电线路连接正…...

编程日记 2025/7/29 0:26:56

从本地存档到协作开发的Git简单使用

概念 工作区 : 在本地实际进行文件操作的目录 .暂存区 : 类似于缓冲区 , 用于记录准备进行下一次提交的内容 .本地仓库 : 储存在本地的完整版本库 , 包含项目的提交历史 , 分支信息和标签等 .远程仓库 : 部署在远程服务器的版本库 , 通常用于协作开发 . 文件状态 Untracked …...

编程日记 2025/7/29 0:19:54

在 Android 中实现通话录音

在 Android 中实现通话录音需要处理系统权限、通话状态监听和音频录制等关键步骤。以下是详细实现代码及注释&#xff0c;注意不同 Android 版本和厂商设备的兼容性问题&#xff1a; 1. 添加权限声明&#xff08;AndroidManifest.xml&#xff09; <!-- 录制音频权限 -->…...

编程日记 2025/7/29 0:22:30

系统分析师知识点：访问控制模型OBAC、RBAC、TBAC与ABAC的对比与应用

在信息安全领域&#xff0c;访问控制是确保数据和资源安全的关键技术。随着信息系统复杂度的提高&#xff0c;访问控制技术也在不断演进&#xff0c;从早期简单的访问控制列表(ACL)发展到如今多种精细化的控制模型。本文将深入剖析四种主流的访问控制模型&#xff1a;基于对象的…...

编程日记 2025/7/29 0:17:42

网络原理（TCP协议—协议格式，性质（上），状态）

目录 1.TCP协议段格式。 2.TCP协议传输时候的性质。 2.1确认应答。 2.2超时重传。 2.3连接管理。 2.3.1 三次握手。 2.3.2四次挥手。 3.TCP常见的状态。 1.TCP协议段格式。 TCP协议段是由首部和数据两部分构成的。首部包含了TCP通信所需要的各种控制信息&#xff0c;而…...

编程日记 2025/7/27 4:20:13

用全新发布的ChatGPT-o3搜文献写综述、专业审稿、降重润色，四个步骤轻松搞定全部论文难题！

今天和大家聊聊OpenAI近期发布的o系列模型中的两个大成果：o3和o4-mini，这个系列的模型最大特点是经过训练，会在响应之前进行更长时间的思考，给出更深入的回答。 下面文章七哥会为大家深度讲解o3模型在学术研究和论文写作方面的四大优势，并附上实用有效的使用技巧和步骤供…...

编程日记 2025/7/29 0:16:36

多路由器通过RIP动态路由实现通讯（单臂路由）

多路由器通过RIP动态路由实现通讯&#xff08;单臂路由&#xff09; R1(开启端口并配置IP) Router>en Router#conf t Router(config)#int g0/0 Router(config-if)#no shu Router(config-if)#no shutdown Router(config-if)#ip add 192.168.10.254 255.255.255.0 Router(c…...

编程日记 2025/7/29 0:19:04

分数线降低，25西电马克思主义学院（考研录取情况）

1、马克思主义学院各个方向 2、马克思主义学院近三年复试分数线对比 学长、学姐分析 由表可看出&#xff1a; 1、马克思主义理论25年相较于24年下降10分&#xff0c;为355分 3、25vs24推免/统招人数对比 学长、学姐分析 由表可看出&#xff1a; 1、 马克思主义学院25年共接…...

编程日记 2025/7/29 0:17:40

反转字符串

344. 反转字符串 题目 思路 双指针 设 s 长度为 n。反转可以看成是交换 s[0] 和 s[n−1]&#xff0c;交换 s[1] 和 s[n−2]&#xff0c;交换 s[2] 和 s[n−3]&#xff0c;依此类推。 代码 class Solution:def reverseString(self, s: List[str]) -> None:""&q…...

编程日记 2025/7/29 0:17:41

乾元通渠道商中标舟山市自然灾害应急能力提升工程基层防灾项目

近日&#xff0c;乾元通渠道商中标舟山市自然灾害应急能力提升工程基层防灾项目&#xff08;结余资金&#xff09;装备采购项目&#xff0c;乾元通作为设备厂家&#xff0c;为项目提供通信指挥类装备&#xff08;多链路聚合设备&#xff09;QYT-X1。 青岛乾元通数码科技有限公司…...

编程日记 2025/7/29 0:26:14

‌信号调制与解调技术基础解析

调制解调技术是通信系统中实现基带信号与高频载波信号相互转换的主要技术&#xff0c;通过调整信号特性使其适应不同信道环境&#xff0c;保障信息传输的效率和可靠性。 调制与解调的基本概念 调制&#xff08;Modulation&#xff09;‌ 将低频基带信号&#xff08;如语音或数…...

编程日记 2025/7/29 0:16:12

多源异构网络安全数据（CAPEC、CPE、CVE、CVSS、CWE）的作用、数据内容及其相互联系的详细分析

1. CWE&#xff08;Common Weakness Enumeration&#xff09; 作用&#xff1a;CWE 是常见软件和硬件安全弱点的分类列表&#xff0c;用于描述漏洞的根本原因&#xff08;如代码缺陷、逻辑错误等&#xff09;&#xff0c;为漏洞的根源分析提供框架。数据内容&#xff1a; 弱点…...

编程日记 2025/7/27 12:44:14

02_Flask是什么？

一、视频教程 02_Flask是什么 二、Flask简介 Flask 框架诞生于2010 年&#xff0c;是由 Armin 使用 Python 语言基于 Werkzeug 工具箱编写的轻量级Web开发框架。Armin 是 Python 编程语言的核心开发者之一&#xff0c;同时也是 Flask 项目的主要贡献者。 Flask主要依赖于两个核…...

编程日记 2025/7/26 18:09:48

突破网页数据集获取难题：Web Unlocker API 助力 AI 训练与微调数据集全方位解决方案

突破网页数据集获取难题&#xff1a;Web Unlocker API 助力 AI 训练与微调数据集全方位解决方案 背景 随着AI技术的飞速发展&#xff0c;诸如DeepSeek R1、千问QWQ32、文小言、元宝等AI大模型迅速崛起。在AI大模型训练和微调、AI知识库建设中&#xff0c;数据集的获取已成为不…...

编程日记 2025/7/28 18:04:06

Spark-SQL与Hive集成及数据分析实践

一、Spark-SQL连接Hive的配置 Spark-SQL支持与Hive无缝集成&#xff0c;可通过以下方式操作Hive&#xff1a; 1. 内嵌Hive&#xff1a;无需额外配置&#xff0c;直接使用&#xff0c;但生产环境不推荐。 2. 外部Hive&#xff1a; 将hive-site.xml、core-site.xml、hdfs-site…...

编程日记 2025/7/27 12:44:08

CI/CD

CI/CD 是一种用于软件开发和交付的实践方法&#xff0c;由持续集成&#xff08;Continuous Integration&#xff09;、持续交付&#xff08;Continuous Delivery&#xff09;和持续部署&#xff08;Continuous Deployment&#xff09;三个关键环节组成&#xff0c;以下是具体介…...

编程日记 2025/7/27 12:44:05

【橘子大模型】Tools/Function call

一、简介 截止目前&#xff0c;我们对大模型的使用模式仅仅是简单的你问他答。即便是拥有rag&#xff0c;也只是让大模型的回答更加丰富。但是大模型目前为止并没有对外操作的能力&#xff0c;他只是局限于他自己的知识库。 举个例子&#xff0c;到今天4.21为止&#xff0c;你…...

编程日记 2025/7/27 12:44:03

解决Mac 安装 PyICU 依赖失败

失败日志&#xff1a; 解决办法 1、使用 homebrew 安装相关依赖 brew install icu4c 安装完成后&#xff0c;设置环境变量 echo export PATH"/opt/homebrew/opt/icu4c77/bin:$PATH" >> ~/.zshrcecho export PATH"/opt/homebrew/opt/icu4c77/sbin:$PATH…...

编程日记 2025/7/27 12:44:01

Kafka 生产者的幂等性与事务特性详解

在分布式消息系统中&#xff0c;消息的可靠性传输是一个核心问题。Kafka 通过幂等性&#xff08;Idempotence&#xff09;和事务&#xff08;Transaction&#xff09;两个重要特性来保证消息传输的可靠性。幂等性确保在生产者重试发送消息的情况下&#xff0c;不会在 Broker 端…...

编程日记 2025/7/27 12:43:58

ubuntu--汉字、中文输入

两种输入框架的安装 ibus 链接 (这种方式安装的中文输入法不是很智能&#xff0c;不好用)。 Fcitx 链接这种输入法要好用些。 简体中文检查 fcitx下载和配置 注意&#xff1a;第一次打开fcitx-config-qt或者fcitx configuration可能没有“简体中文”&#xff0c;需要把勾…...

编程日记 2025/7/28 16:32:53