当前位置： 首页 > news >正文

如何在idea中编写spark程序

news 来源：原创 2025/5/25 4:54:40

在 IntelliJ IDEA 中编写 Spark 程序的详细指南

在大数据处理领域，Apache Spark 凭借其强大的分布式计算能力，成为了众多开发者的首选工具。而 IntelliJ IDEA 作为一款功能强大的集成开发环境（IDE），为编写 Spark 程序提供了便捷的开发和调试环境。本文将详细介绍如何在 IntelliJ IDEA 中编写 Spark 程序。

一、准备工作

  1. 安装 Java 开发环境：确保你的系统中已经安装了 Java 开发工具包（JDK），并且配置好了 JAVA_HOME 环境变量。建议使用 JDK 8 或更高版本。
  2. 安装 IntelliJ IDEA：下载并安装 IntelliJ IDEA，可以选择社区版（免费）或旗舰版（付费，功能更丰富）。安装完成后，启动 IDEA。
  3. 安装 Apache Spark：从 Spark 官方网站（Downloads | Apache Spark）下载适合你环境的 Spark 安装包。解压安装包到指定目录，如 /opt/spark，并配置好 SPARK_HOME 环境变量。

二、创建新的 Maven 项目

  1. 打开 IntelliJ IDEA，选择 File -> New -> Project。
  2. 在弹出的 New Project 对话框中，选择 Maven 项目类型，然后点击 Next。
  3. 输入项目的 GroupId 和 ArtifactId，例如 com.example 和 spark-project，然后点击 Next。
  4. 选择项目的存储位置，点击 Finish。此时，IDEA 会自动创建一个基本的 Maven 项目结构。

三、添加 Spark 依赖

五、编写 Spark 程序

七、打包和部署程序

  1. 打开项目的 pom.xml 文件。
  2. 在 <dependencies> 标签内添加以下 Spark 相关的依赖：
  3. <dependency><groupId>org.apache.spark</groupId><artifactId>spark-core_2.12</artifactId><version>3.3.0</version>
</dependency>
<dependency><groupId>org.apache.spark</groupId><artifactId>spark-sql_2.12</artifactId><version>3.3.0</version>
</dependency>

    这里以 Spark 3.3.0 和 Scala 2.12 版本为例，你可以根据实际需求调整版本号。

    四、配置项目的 Scala 环境（如果使用 Scala 编写 Spark 程序）

  4. 如果你的项目使用 Scala 编写 Spark 程序，需要在 IDEA 中安装 Scala 插件。点击 File -> Settings（Windows/Linux）或 IntelliJ IDEA -> Preferences（Mac）。
  5. 在 Settings 对话框中，选择 Plugins，然后在搜索框中输入 Scala。
  6. 在 src/main/scala（如果使用 Scala）或 src/main/java（如果使用 Java）目录下，创建一个新的包和类。例如，创建一个名为 SparkWordCount 的类。
  7. 以下是使用 Scala 编写的简单 WordCount 示例代码：
  8. 找到 Scala 插件并点击 Install 进行安装。安装完成后，重启 IDEA。
  9. 在项目中创建一个 Scala 模块。右键点击项目的 src/main 目录，选择 New -> Module。
  10. 在弹出的 New Module 对话框中，选择 Scala 模块，然后点击 Next。按照提示完成模块的创建。

  11. 五、编写 Spark 程序

  12. 在 src/main/scala（如果使用 Scala）或 src/main/java（如果使用 Java）目录下，创建一个新的包和类。例如，创建一个名为 SparkWordCount 的类。
  13. 以下是使用 Scala 编写的简单 WordCount 示例代码：
  14. import org.apache.spark.{SparkConf, SparkContext}object SparkWordCount {def main(args: Array[String]): Unit = {val conf = new SparkConf().setAppName("WordCount").setMaster("local[*]")val sc = new SparkContext(conf)val textFile = sc.textFile("hdfs://your_hdfs_path/input.txt")val wordCounts = textFile.flatMap(line => line.split(" ")).map(word => (word, 1)).reduceByKey(_ + _)wordCounts.saveAsTextFile("hdfs://your_hdfs_path/output")sc.stop()}
}
  15. 以下是使用 Java 编写的类似 WordCount 示例代码：
  16. import org.apache.spark.SparkConf;
import org.apache.spark.api.java.JavaPairRDD;
import org.apache.spark.api.java.JavaRDD;
import org.apache.spark.api.java.JavaSparkContext;
import org.apache.spark.api.java.function.FlatMapFunction;
import org.apache.spark.api.java.function.Function2;
import org.apache.spark.api.java.function.PairFunction;
import scala.Tuple2;import java.util.Arrays;
import java.util.Iterator;public class SparkWordCount {public static void main(String[] args) {SparkConf conf = new SparkConf().setAppName("WordCount").setMaster("local[*]");JavaSparkContext sc = new JavaSparkContext(conf);JavaRDD<String> textFile = sc.textFile("hdfs://your_hdfs_path/input.txt");JavaPairRDD<String, Integer> wordCounts = textFile.flatMap(new FlatMapFunction<String, String>() {@Overridepublic Iterator<String> call(String s) {return Arrays.asList(s.split(" ")).iterator();}}).mapToPair(new PairFunction<String, String, Integer>() {@Overridepublic Tuple2<String, Integer> call(String s) {return new Tuple2<>(s, 1);}}).reduceByKey(new Function2<Integer, Integer, Integer>() {@Overridepublic Integer call(Integer a, Integer b) {return a + b;}});wordCounts.saveAsTextFile("hdfs://your_hdfs_path/output");sc.stop();}
}

    请根据实际情况修改代码中的 HDFS 路径。

    六、运行和调试 Spark 程序

  17. 右键点击编写好的类文件，选择 Run 或 Debug 来运行或调试程序。
  18. 如果程序运行成功，你可以在控制台看到程序的输出结果，并且在指定的输出路径下生成计算结果文件。
  19. 在 IntelliJ IDEA 中，点击 Build -> Build Artifacts -> Build 来打包项目。打包完成后，会在项目的 out 目录下生成一个 JAR 文件。
  20. 将生成的 JAR 文件上传到 Spark 集群所在的机器上。
  21. 使用 spark-submit 命令提交 JAR 文件到集群运行，例如：
  22. spark-submit \
--class com.example.SparkWordCount \
--master spark://your_spark_master_ip:7077 \
/path/to/your_project.jar

    请根据实际情况修改 --class 和 --master 参数以及 JAR 文件的路径。

     

    通过以上步骤，你就可以在 IntelliJ IDEA 中顺利编写、运行和部署 Spark 程序了。

相关文章：

如何在idea中编写spark程序

在 IntelliJ IDEA 中编写 Spark 程序的详细指南 在大数据处理领域&#xff0c;Apache Spark 凭借其强大的分布式计算能力&#xff0c;成为了众多开发者的首选工具。而 IntelliJ IDEA 作为一款功能强大的集成开发环境&#xff08;IDE&#xff09;&#xff0c;为编写 Spark 程序…...

编程日记 2025/5/25 4:54:40

人工智能数学基础（一）：人工智能与数学

在人工智能领域&#xff0c;数学是不可或缺的基石。无论是算法的设计、模型的训练还是结果的评估&#xff0c;都离不开数学的支持。接下来&#xff0c;我将带大家深入了解人工智能数学基础&#xff0c;包括微积分、线性代数、概率论、数理统计和最优化理论&#xff0c;并通过 P…...

编程日记 2025/5/25 4:09:55

Android Studio 安装 Continue插件

1、Android 插件Studio中安装Continue 2、从本地盘符安装 3、安装后发现Continue为空 Android studio中 Help -> Find Action->Choose Boot Java 设置 4、配置DeepSeek 参考https://juejin.cn/post/7464122534546407461...

编程日记 2025/4/29 9:07:17

【C++】类和对象（4）

目录 1. 类型转换 非explicit的单参数构造函数 示例 explicit的单参数构造函数 示例 不同版本的行为 示例 &#xff08;单参数&#xff09; 示例&#xff08;多参数且其余参数有默认值 &#xff09; 示例&#xff08;多参数且无默认值&#xff09; 2. static成员变量…...

编程日记 2025/5/22 20:25:06

微信jdk 前端vue获取流程1、

参考链接&#xff1a; 企业微信的JSSDK,调用及使用方法_企业微信jssdk-CSDN博客 1、引用 <script src"//res.wx.qq.com/open/js/jweixin-1.2.0.js"></script> <script src"https://res.wx.qq.com/open/js/jweixin-1.2.0.js" referrerpolic…...

编程日记 2025/5/25 3:47:34

Linux进程7-signal信号处理方式验证、可重入函数举例、信号集函数验证、信号集阻塞验证

目录 1. signal函数 1.1进程接收到信号后的处理方式 1.2 signal 函数 1.2.1 signal 函数默认处理 1.2.2 signal 函数忽略处理 1.2.3 signal 函数自定义处理 1.2.4 signal 函数返回值 2.可重入函数 2.1如何判断函数是否可重入 2.2自定义信号处理函数举例 2.2.1 sle…...

编程日记 2025/5/25 3:12:10

使用Python在excel里创建柱状图

一、前言 通过使用Python的openpyxl库&#xff0c;在excel里创建柱状图。openpyxl库提供了创建Excel图表的功能&#xff0c;包括柱状图(Bar Chart)。 二、程序展示 1、导入相关模块&#xff0c;新建excel 新建excel后&#xff0c;在excel的第一列创建一些数据。 import op…...

编程日记 2025/5/8 13:49:39

计算机视觉进化论：YOLOv12、YOLOv11与Darknet系YOLOv7的微调实战对比

摘要 YOLO系列作为实时目标检测领域的重要里程碑&#xff0c;持续引领速度与精度的平衡发展。本文围绕YOLOv7&#xff08;基于Darknet框架&#xff09;、YOLOv11及YOLOv12&#xff0c;系统、深入地对比了三款模型的架构创新、微调策略、核心技术及应用场景。我们详细解析了三者…...

编程日记 2025/5/25 4:19:50

湖北理元理律师事务所：债务管理领域的平台化创新探索

随着中国居民负债率攀升至62%&#xff08;央行2023年数据&#xff09;&#xff0c;债务管理从个体需求演变为社会性课题。湖北理元理律师事务所通过“法律科技金融”的融合模式&#xff0c;构建了国内首个全链条债务管理平台&#xff0c;其服务逻辑与行业价值值得深度剖析。 平…...

编程日记 2025/5/25 4:35:38

沐曦玩转 LMDeploy、XTuner 和 InternLM3

学习链接&#xff1a; https://aicarrier.feishu.cn/wiki/O84LwkiBriUU0NkDwurcSufhnVb 一 LMDeploy推理及验证 1.1 下载LMDeploy # 安装addict软件包 pip install addict mmengine mmengine-lite fire accelerate0.32.1 nvidia-ml-py# 解决LMDeploy对tranformers版本要求的…...

编程日记 2025/5/25 2:18:46

【Java面试笔记：进阶】26.如何监控和诊断JVM堆内和堆外内存使用？

监控和诊断JVM内存使用是优化性能和解决内存问题的关键。 1.JVM内存监控与诊断方法 1.图形化工具 JConsole：提供图形化界面，可直接连接到Java进程，查看内存使用情况。VisualVM：功能强大的图形化工具，但注意从Oracle JDK 9开始不再包含在JDK安装包中。Java Mission Contr…...

编程日记 2025/5/25 2:35:10

阿里云服务器云盘扩容

在阿里云服务器上在线扩容了云盘后&#xff0c;如果服务器内部查看容量没有变化&#xff0c;可能是由于分区和文件系统未正确扩展。以下是详细的解决步骤&#xff1a; 1. 确认扩容是否成功 在阿里云控制台检查磁盘容量是否已显示扩容后的新大小。如果控制台显示已扩容&#x…...

编程日记 2025/5/25 4:21:52

【ESP32】st7735s + LVGL移植

LVGL的移植 使用版本1、创建工程2、开始移植2.1、文件准备2.2、修改代码2.3、SDK配置编辑器 3、测试 使用版本 LVGL版本&#xff1a;8.3 链接点这里ESPIDF版本&#xff1a;4.4.8lvgl_esp32_drivers&#xff1a; 链接点这里ESP32型号&#xff1a;ESP32S3 1、创建工程 默认都会…...

编程日记 2025/5/25 4:29:49

Jackson 使用方法详解

Jackson 是 Java 生态中最流行的 JSON 处理库&#xff0c;也是 Spring Boot 的默认 JSON 解析器。它提供了高性能的 JSON 序列化&#xff08;对象 → JSON&#xff09;和反序列化&#xff08;JSON → 对象&#xff09;功能。以下是 Jackson 的全面使用指南。 1. 基础依赖 Mave…...

编程日记 2025/5/25 3:20:31

TensorFlow深度学习框架：从入门到精通的完整指南

&#x1f31f; TensorFlow核心优势 TensorFlow作为Google开发的顶级深度学习框架&#xff0c;具有三大独特优势&#xff1a; 工业级部署能力&#xff1a;支持从移动端到服务器的全平台部署完善的工具链&#xff1a;包含TensorBoard、TF Lite、TF.js等完整生态强大的社区支持&…...

编程日记 2025/5/25 3:56:13

Java 入门宝典--注释、关键字、数据类型、变量常量、类型转换

作者&#xff1a;IvanCodes 发布时间&#xff1a;2025年4月28日&#x1f423; 专栏&#xff1a;Java教程 哈喽&#xff0c;各位 CSDN 的小伙伴们&#xff01;&#x1f44b; 这部分内容虽然基础&#xff0c;但 极其重要&#xff0c;是后续学习所有高级特性的基石。准备好了吗&…...

编程日记 2025/5/25 3:31:26

【含文档+PPT+源码】基于微信小程序的旅游论坛系统的设计与实现

项目介绍 本课程演示的是一款基于微信小程序的旅游论坛系统的设计与实现&#xff0c;主要针对计算机相关专业的正在做毕设的学生与需要项目实战练习的 Java 学习者。 1.包含&#xff1a;项目源码、项目文档、数据库脚本、软件工具等所有资料 2.带你从零开始部署运行本套系统 …...

编程日记 2025/5/25 4:01:10

Android开发，实现一个简约又好看的登录页

文章目录 1. 编写布局文件2.设计要点说明3. 效果图4. 关于作者其它项目视频教程介绍 1. 编写布局文件 编写activity.login.xml 布局文件 <?xml version"1.0" encoding"utf-8"?> <androidx.appcompat.widget.LinearLayoutCompat xmlns:android…...

编程日记 2025/5/25 3:24:06

一种改进的YOLOv11网络，用于无人机视角下的小目标检测

大家读完觉得有帮助记得关注和点赞&#xff01;&#xff01;&#xff01; 摘要 随着无人机&#xff08;UAV&#xff09;和计算机视觉技术的快速发展&#xff0c;从无人机视角进行目标检测已成为一个重要的研究领域。然而&#xff0c;无人机图像中目标像素占比极小、物体尺度变…...

编程日记 2025/5/25 2:10:10

linux离线安装zsh

下载zsh 下载仓库后解压 下载地址&#xff1a;https://github.com/zsh-users/zsh 离线安装 安装方法见INSTALL文件 ./configure --prefix[/usr/local] make make install...

编程日记 2025/5/25 2:20:38

Golang｜使用函数作为参数和使用接口的联系

函数作为数据类型的一种&#xff0c;可以成为其他函数的参数。在 Go&#xff08;Golang&#xff09; 中&#xff0c;函数作为参数 和 接口&#xff08;interface&#xff09;&#xff0c;本质上都和抽象、灵活调用有关 —— 都是让代码更灵活、更可扩展的手段。不过它们各有侧重…...

编程日记 2025/5/25 3:01:18

Python爬虫实战：获取软科网最新特定专业大学排名数据并做分析，为高考填报志愿做参考

一、引言 在高考升学的重要阶段，志愿填报成为考生和家长关注的核心问题。准确、全面且具有权威性的大学专业排名数据，是考生做出科学志愿决策的关键依据。软科网作为专业的大学排名信息发布平台，其发布的计算机科学与技术专业排名数据，因具有较高的公信力和参考价值，备受…...

编程日记 2025/5/25 2:15:11

【ACL系列论文写作指北12-Deadline管理与科研项目规划】-用节奏赢得高质量科研

科研不是一场冲刺&#xff0c;而是有序推进的系统工程。 引言&#xff1a;掌控时间&#xff0c;才能掌控科研主动权 再好的想法和技术&#xff0c;如果没有良好的时间管理&#xff0c;最终只会沦为“赶DDL”的牺牲品。科研项目规划&#xff0c;是确保质量、效率与心态平衡的关…...

编程日记 2025/5/25 4:42:01

elasticsearch底层模块解析与实践系列

#作者&#xff1a;猎人 文章目录 底层模块深入解析之threadpool1、线程池2、线程池类型3、cpu core数量设置 底层模块深入解析之plugin底层模块深入解析之es node节点角色1、node类型2、master eligible node3、data node4、ingest node5、cooridnating only node6、node data…...

编程日记 2025/5/25 4:39:41

Git-基本操作

前言 安装 git --version sudo apt-get remove git -y #卸载 sudo apt-get install git -y基本操作 创建本地仓库 mkdir gitcodegit init 这个就可以创建本地仓库了 然后当前目录下就有一个.git的文件夹 配置本地仓库 就是配置用户的名称&#xff0c;和用户的email地址 在…...

编程日记 2025/5/25 3:15:27

iVX 图形化编程如何改写后端开发新范式

在数字化转型加速推进的当下&#xff0c;企业对后端系统的需求呈现爆发式增长。Gartner 最新报告指出&#xff0c;2025 年全球企业平均需完成 300 定制化应用开发&#xff0c;而传统编码模式下&#xff0c;单个项目平均交付周期长达 6 - 8 个月。与此同时&#xff0c;Redis、K…...

编程日记 2025/5/25 2:54:30

【数据可视化-42】杂货库存数据集可视化分析

&#x1f9d1; 博主简介&#xff1a;曾任某智慧城市类企业算法总监&#xff0c;目前在美国市场的物流公司从事高级算法工程师一职&#xff0c;深耕人工智能领域&#xff0c;精通python数据挖掘、可视化、机器学习等&#xff0c;发表过AI相关的专利并多次在AI类比赛中获奖。CSDN…...

编程日记 2025/5/25 3:40:11

使用 Electron 打包 Windows 可执行程序

使用 Electron 打包 Windows 可执行程序 在使用 Electron 构建桌面应用程序时&#xff0c;通常需要将项目打包为可执行文件&#xff08;例如 .exe 文件&#xff09;&#xff0c;以便用户可以方便地安装和运行。本文将介绍如何使用 electron-builder 将 Electron 项目打包成 Wi…...

编程日记 2025/5/25 4:44:52

爬虫学习笔记（三）--Http协议

思维导图 上面思维导图提取的原文是2026王道计网P286~290 URL最前面&#xff08;URL传输过程中遵循HTTP协议&#xff09; 协议 计算机传输的数据实际上就是二进制0和1&#xff0c;协议就是规定这一串二进制数字的前几位代表什么、中间几位代表什么、后几位代表什么 HTTP&a…...

编程日记 2025/5/25 4:50:24

ai环境cuda cudnn conda torch整体迁移 wsl docker

运行没问题的环境&#xff0c;wsl先关停wsl --shutdown 然后导出复制到迁移机器上wsl --export U24 E:\wsl\u24.tar 使用wsl版挂成虚拟机wsl --import U24 E:\wsl\ubuntu E:\wsl\u24.tar 使用docker版挂成镜像docker import E:\wsl\u24.tar my-ubuntu:custom 启动docker容器&am…...

编程日记 2025/5/25 4:38:02

数据库小技巧-使用开窗函数矫正数据库指定列部分列值重复的数据

需求描述 目前有某表的某列部分值重复&#xff0c;需要批量矫正该列数据&#xff0c;确保该列分组内不会出现重复值。 解决思路 -- 创建个临时表 create table t_tmp_20250428( c_bh varchar(32), -- 主键 c_bh_aj varchar(32), -- 主表外键&#xff0c;分组条件&#xff0c…...

编程日记 2025/5/25 3:45:59

【优选算法 | 二分查找】二分查找算法解析：如何通过二段性优化搜索效率

算法相关知识点可以通过点击以下链接进行学习一起加油&#xff01;双指针滑动窗口 在本篇文章中&#xff0c;我们将深入解析二分查找算法的核心原理。从基本概念到实际应用&#xff0c;带你了解如何利用二分查找高效定位元素&#xff0c;提升搜索效率。无论你是刚接触算法的新手…...

编程日记 2025/5/25 4:25:32

AI与IT协同的典型案例

简介 本篇代码示例展示了IT从业者如何与AI协同工作&#xff0c;发挥各自优势。这些案例均来自2025年的最新企业实践&#xff0c;涵盖了不同IT岗位的应用场景。 一、GitHub Copilot生成代码框架 开发工程师AI协作示例&#xff1a;利用GitHub Copilot生成代码框架&#xff0c;…...

编程日记 2025/5/25 2:46:08

5.软考高项（信息系统项目管理师）-成本管理

成本管理非常重要&#xff0c;选择、计算考得非常多&#xff0c;必须要好好学。 过程、输入、工具及输出 过程名&#xff08;附作用&#xff09; 通俗解释 输入 工具和技术 输出 规划成本管理 为如何管理项目成本提供指南和方向 编制成本管理计划&#xff0c;这个计划主…...

编程日记 2025/5/25 3:26:07

前端：纯HTML、CSS和JS菜单样式

实现了一个多级折叠菜单系统，使用纯HTML、CSS和JavaScript（无任何框架） 一、二级菜单展开 1、实现效果 初始状态-展示全部一级菜单 选中共状态，一级标题选中共为蓝色背景色，二级标题选中共为蓝色文字，展开右侧图标为-,后缩状态右侧图标为+ 2、实现 ​​HTML结构​​ …...

编程日记 2025/5/25 2:22:13

案例篇：如何用tcpdump和Wireshark识别潜在威胁

无论是日常浏览网页、观看视频&#xff0c;还是企业开展线上业务、进行数据传输&#xff0c;都离不开网络的支持。然而&#xff0c;网络问题也时有发生&#xff0c;比如网络卡顿&#xff0c;相信大家都遇到过&#xff0c;那种等待页面加载的焦急心情&#xff0c;真的让人抓狂。…...

编程日记 2025/5/24 20:37:32

微信小程序开发中关于首屏加载、本地数据持久化的思考

本文将围绕小程序开发中首屏性能优化与本地存储持久化两大重要主题展开&#xff0c;结合实际项目经验&#xff0c;系统分析常见问题、优化方法与最佳实践&#xff0c;构建流畅且高效的小程序体验。 文章目录 前言一、什么是首屏加载&#xff1f;为什么重要&#xff1f;二、小程…...

编程日记 2025/4/29 8:54:57

媒资管理之视频管理

一&#xff1a;业务概述&#xff1a; 媒资管理这个模块是我负责开发的&#xff0c;主要的管理对象是视频&#xff0c;图片&#xff0c;文档等 包括文件的上传&#xff0c;视频的处理&#xff0c;文件的删除 &#xff08;在媒资管理界面&#xff0c;有个上传视频的按钮&#…...

编程日记 2025/5/11 8:57:57

windows程序转鲲鹏服务器踩坑记【持续更新中】

1.鲲鹏处理器和Intel处理器的区别 处理器/对比项IntelKunpeng厂家因特尔(美国)华为(中国)指令集X86架构ARM-V8架构与指令集- x86 CISC复杂指令集 - 单核性能强&#xff08;如至强8380主频3.8GHz&#xff09; - 三级缓存优化&#xff0c;支持DDR4-3200和Optane内存- ARMv8-A RI…...

编程日记 2025/4/29 8:53:51

【阿里云大模型高级工程师ACP习题集】2.6.用插件扩展答疑机器人的能力边界

习题集： 【单选题】在构建Agent系统时，使用Assistant API创建Agent时，若想让Agent具备查询员工信息和发送请假申请的功能，以下对instructions参数设置最合理的是（ ） A. “你可以做任何事情” B. “你能查询员工信息和发送请假申请” C. “你是公司助手，功能有：1.查询员…...

编程日记 2025/5/24 23:44:31

程序进程多任务线程

1.程序 程序(program)是含有指令和数据的文件,被存储在磁盘或其他的数据存储设备中,也就是说程序是静态的代码。 2.进程 进程(process)是程序的一次执行过程,是系统运行程序的基本单位,因此进程是动态的。进程是操作系统资源分配和处理器调度的基本单位,拥有独立的代码、内部数…...

编程日记 2025/4/29 8:53:50

Finish技术生态计划: FinishRpc

finishRpc 简介 ​ 纯个人兴趣设计的项目: 因为失业在家摆烂 所以没事就想写点代码 本身也比较喜欢自己写一些好玩的demo 这个项目的设计完全是取悦自己又菜又有一个创造框架的梦想 可以用于提升框架设计思路以及实践一些常用技术的练习 可以用于校园中的练习 , 如果能对你有所…...

编程日记 2025/4/29 8:53:48

《商业世界的开源法则：协议选择与商业模式创新》

引言 在当今数字化时代&#xff0c;开源软件已成为技术生态系统中不可或缺的一部分。从Linux操作系统到Apache Web服务器&#xff0c;从MySQL数据库到React前端框架&#xff0c;开源项目支撑着全球大部分互联网基础设施和企业IT系统。然而&#xff0c;关于开源协议与商业使用之…...

编程日记 2025/4/29 8:52:45

Kubernetes》》k8s》》explain查 yaml 参数

在创建json 和yaml 时&#xff0c;我们可能不知道具体的参数该怎么写。同样 我们可以通过explain这个 命令来查看 每个参数具体的作用与写法 # 查看 pod类性有哪些参数 kubectl explain pod# 查看pod中 spec下面有哪些参数 kubectl explain pod.spec...

编程日记 2025/4/29 8:52:44

Kubernetes(k8s)学习笔记(三)--部署 Kubernetes Master

前文已经使用docker安装了kubeadm&#xff0c;因此本文使用kubeadm部署master节点。 一.先拉取必要的镜像库到本地。 在拉取之前&#xff0c;先配下镜像加速 sudo mkdir -p /etc/docker sudo tee /etc/docker/daemon.json <<-EOF {"registry-mirrors": [&qu…...

编程日记 2025/4/29 8:52:42

《数据结构之美--二叉树》

一&#xff1a;引言&#xff1a; 上次我们学习了栈和队列这两个数据结构&#xff0c;今天我们来学习一个新的数据结构–二叉树中的堆。 堆其实就是一种特殊的二叉树&#xff0c;具有二叉树的性质的同时&#xff0c;还具有其他的性质。 那么在学习堆之前还是先来了解一下树。 …...

编程日记 2025/5/16 8:34:11

Prompt Engineering 提示工程：释放大语言模型潜力的关键技术与实践指南

提示工程：释放大语言模型潜力的关键技术与实践指南 提示工程(Prompt Engineering)作为与大型语言模型(LLM)交互的核心技术，已成为AI应用开发的关键技能。本文将系统介绍提示工程的定义与发展历程，深入剖析其核心知识点，提供实用的设计框架与技巧，并通过丰富的实战案例展示…...

编程日记 2025/5/10 2:37:53

std::print 和 std::println

一、基本概念 std::print 和 std::println 是 C23 新增的格式化输出函数&#xff0c;旨在替代传统的 std::cout 链式调用。它们基于 std::format 实现&#xff0c;支持类型安全的格式化字符串&#xff0c;语法更简洁&#xff0c;性能更优15。 功能特点&#xff1a; 直接输出到…...

编程日记 2025/4/29 8:50:36

高压直流输电MATLAB/simulink仿真模型+说明文档

1.模型简介 本仿真模型基于MATLAB/Simulink&#xff08;版本MATLAB 2018Ra&#xff09;软件。建议采用matlab2018 Ra及以上版本打开。&#xff08;若需要其他版本可联系代为转换&#xff09; 使用一个传输功率为1000MW&#xff08;500 kV&#xff0c;2 kA&#xff09;直流互连…...

编程日记 2025/4/29 8:50:36

第十四章-PHP与HTTP协议

第十四章-PHP与HTTP协议 一&#xff0c;HTTP 协议详解 HTTP&#xff08;HyperText Transfer Protocol&#xff0c;超文本传输协议&#xff09;是互联网上应用最广泛的协议之一&#xff0c;用于客户端&#xff08;如浏览器&#xff09;与服务器之间的通信。它是 Web 技术的基石…...

编程日记 2025/4/29 8:48:29