
环境-开发工具
文章平均质量分 84
爱吃面的猫
1
展开
专栏收录文章
- 默认排序
- 最新发布
- 最早发布
- 最多阅读
- 最少阅读
-
大数据Hadoop之——Flink1.17.0安装与使用(非常详细)
Flink安装部署指南摘要:本文详细介绍了Flink的本地和集群安装配置流程。首先进行系统环境准备,包括网络配置、主机名设置、防火墙关闭等;然后安装JDK(注意版本兼容性,1.17+需JDK11);接着分步骤完成Flink本地安装(下载解压、环境变量配置、启动验证)。对于集群部署,说明Standalone模式的搭建方法(修改配置文件、分发文件、启动集群)和HA高可用方案(基于Zookeeper实现故障转移)。文档包含完整的命令操作示例,并强调版本兼容性问题,最后通过WordCount示例验证集群运行状态。原创 2025-07-06 20:48:06 · 1099 阅读 · 0 评论 -
大数据Hadoop之——Hbase下载安装部署
解决HBase和Hadoop的log4j兼容性(冲突)问题,修改HBase的jar包,使用Hadoop的jar包。原创 2025-07-02 13:36:01 · 457 阅读 · 0 评论 -
Hadoop大数据-Mysql的数据同步工具Maxwell安装与使用( 详解)
在my.cnf配置中可以找到。Mysql的二进制日志(Binlog)是MySQL服务端非常重要的一种日志,它会保存MySQL数据库的所有数据变更记录。binlog文件是以二进制形式存在的, binlog在达到一定阈值的时候,都会创建一个新的文件,例如binlog.000002。(2)读写分离:主数据库只负责业务数据的写入操作,而多个从数据库只负责业务数据的查询工作,在读多写少场景下,可以提高数据库工作效率。MySQL的主从复制,就是用来建立一个和主数据库完全一样的数据库环境,这个数据库称为从数据库。原创 2025-07-01 19:07:41 · 270 阅读 · 0 评论 -
大数据Hadoop之——Flume安装与使用(详细)
(2)下载地址:http://archive.apache.org/dist/flume/Flume是Cloudera提供的一个高可用的,高可靠的,分布式的海量日志采集、聚合和传输的系统。Flume基于流式架构,灵活简单。Flume最主要的作用就是,实时读取服务器本地磁盘的数据,将数据写入到HDFS。原创 2025-06-29 20:12:48 · 793 阅读 · 0 评论 -
大数据Hadoop之——安装部署hadoop
vi /etc/sysconfig/network-scripts/ifcfg-ens32 ---- 根据自己网卡设置。-- 设置secondname的端口,如果是完全分布式的集群模式,则改为hadoop003 -->-- 设置 MapReduce 应用程序的执行框架为 YARN 即 MR运行的资源调度模式--->-- 设置secondname的端口,完全分布式的集群模式,改为hadoop003 -->-- 设为 true,YARN 会在容器超出其申请的物理内存时终止它 -->原创 2025-06-29 14:36:50 · 1248 阅读 · 0 评论 -
Kafka的下载安装
Kafka 是基于 Java 的,必须先安装 JDK。 此次我们以 kafka_2.12-3.3.1.tgz 即 Kafka3.3.1 为案例,安装jdk1.8。⚠️ 注意:Kafka 3.9.0 要求本地必须安装 JDK 17 或以上版本。JDK 8 和 11 已不再被官方支持。 vi /etc/sysconfig/network-scripts/ifcfg-ens32 ---- 根据自己网卡设置。vi /etc/hosts 创建数据存储目录和日志目录 配置服务器编号原创 2025-06-29 09:21:18 · 673 阅读 · 0 评论 -
大数据Hadoop之-Zookeeper的下载安装
Zookeeper是一个开源的分布式服务,是Hadoop下的一个子项目,提供了优秀的分布式一致性的解决方案。Zookeeper的主要功能包括:配置管理、名字服务、分布式锁和集群管理等功能,来统筹分布式场景下的应用服务。Zookeeper官网:https://Zookeeper.apache.org/原创 2025-06-28 09:53:51 · 361 阅读 · 0 评论 -
Java的JDK的安装
重命名,方便配置环境变量,避免更换jdk版本修改配置文件。✅ 几乎所有 Linux/Unix 系统都有。在/opt/model中上传jdk包并解压。Ubuntu、CentOS、macOS 等。✅ CentOS/RHEL 系统使用。#此处是自己实际的Java安装路径。✅ 用户级 shell 配置。所有支持 Bash 的系统。✅ Ubuntu 默认生成。所有支持 Bash 的系统。✅ Ubuntu 使用。原创 2025-06-28 09:55:36 · 274 阅读 · 0 评论 -
Docker的常用命令
tVolume:数据卷的位置--- /var/lib/docker/volume/tVolume。docker save -o /root/tomcat.tar tomcat 保存。docker load -i /root/tomcat.tar 加载。docker commit -m "提交镜像" tomcat 提交。docker run -d tomcat 后台启动。docker ps -a 所有的包含停止的和运行的。docker ps 正在运行的。原创 2024-09-29 08:51:07 · 756 阅读 · 0 评论 -
Python3.8安装--虚拟机 Linux 环境安装(超详细)
输入下面网址即可直接下载:补充:本环境选择版本是3.8版本,最好以root身份登录,避免不必要的麻烦。原创 2024-03-27 10:49:06 · 16367 阅读 · 0 评论 -
Miniconda的下载安装和配置详解
名,含义是创建python3.7版本,名称为py37的环境。默认Python版本是3.8:输入python --version显示默认python版本。这一步显示默认环境是Python3.8,勾选上,自动添加环境变量,然后install。安装后会在envs目录中生成 py37的 Python=3.7的环境。点击后,如果能在命令行左侧的括号中看到base,则代表安装成功!去掉两个框中的勾,然后Finish完成,至此安装成功。激活环境(任意目录的cmd窗口均可)这一步是安装路径,我是放在了F盘中。原创 2023-03-12 21:45:08 · 27650 阅读 · 0 评论 -
Anacond下载安装配置教程详解
名,含义是创建python3.7版本,名称为py37的环境。这里环境名和python版本可以自己指定。默认Python版本是3.8:输入python --version显示默认python版本。安装后会在envs目录中生成 py37的 Python=3.7的环境。点击后,如果能在命令行左侧的括号中看到base,则代表安装成功!行,也就是Anaconda Prompt(anaconda3)激活环境(任意目录的cmd窗口均可)文件夹中,进入cmd窗口执行。删除文件envs下的文件包。原创 2023-03-12 18:21:13 · 13826 阅读 · 0 评论 -
Linux下的同步命令代码编写
如:hostnamectl --static set-hostname hadoop001。hostnamectl --static set-hostname 主机名。#7. 进行数据文件夹或文件异步传输。#6. 获取当前文件的名称。在 /usr/bin下面编辑同步命令。#3. 遍历所有目录,挨个发送。#4判断文件是否存在。3.配置IP与主机名映射。#2. 遍历集群所有机器。原创 2023-12-08 13:31:54 · 523 阅读 · 0 评论 -
ssh免密登录
执行 ssh-keygen -t rsa ( 其中 rsa 是非对称算法).ssh/authorized_keys文件权限必须是600。生成之后会在用户的根目录生成一个 “.ssh”的文件夹。将 公钥内容追加到 authorized_keys 中。修改 .ssh目录的权限必须是700。修改 authorized_keys 权限。一路回车到底,生成密钥。原创 2023-11-03 17:17:31 · 3767 阅读 · 0 评论 -
Lombok、devtools工具、自定义配置提示的使用详解
Lombok的作用主要是简化JavaBean,使用Lombok之后,可以不用写JavaBean中的setter、getter、toString及构造方法。下面分别对 没有使用Lombok 和 使用Lombok后 的代码做说明。1、在使用Lombok之前在使用Lombok之前创建一个javaBean实体类需要为javaBean实体类写上setter、getter、toString及构造方法。以 User 为例,下面创建一个 User 类,属性分别是 id、name、age、salary,代码如下:原创 2022-05-15 21:09:27 · 1036 阅读 · 0 评论 -
压力测试工具----JMeter
压力测试考察当前软硬件环境下系统能承受的最大负荷并帮助找出系统的瓶颈所在,压测都是为了系统在线上的处理能力和稳定性维持在一个标准的范围内,做到心中有数.使用压力测试,我们有希望找到很多种用其他测试方法更难发现的错误。有两种类型的错误:内存泄露和并发与同步;有效的压力测试系统将应用以下的关键条件:重复,并发,量级,随机变化.原创 2022-11-02 15:54:46 · 4935 阅读 · 0 评论 -
逆向工程搭建过程
本章主要介绍逆向工程搭建,此逆向工程搭建是建立在基础 上的,原创 2022-09-04 11:21:43 · 668 阅读 · 0 评论 -
Nodejs的详细安装过程与步骤(超详细)
2.1 自定义安装路径(可以选择默认)2.3 这里不用选择安装其他的插件。原创 2022-09-03 21:12:06 · 16626 阅读 · 12 评论 -
环境安装-Linux虚拟机
1、下载VirtualBox: 2、开启虚拟化。原创 2022-09-02 09:02:22 · 2206 阅读 · 0 评论 -
Linux环境Docker的安装过程
Docker其于镜像,可以秒级启动各种容器。每一种容器都是一个完整的运行环境,容器之间互相隔离。原创 2022-09-02 12:39:09 · 1308 阅读 · 1 评论 -
Docker中安装mysql
注意:创建一个容器的时候,一个容器就相当于一个小的linux系统,系统里面安装着mysql系统,因此我们为了方便维护这个容器中的mysql,需要将容器中的mysql文件进行挂载。挂载到虚拟机的linux中。下面的命令中 -v 就是在创建容器的时候,进行对应挂载。使用 sudo docker pull mysql:8.0.17 拉取镜像,如果不加版本号例如sudo docker pull mysql,则默认拉取最新版本。原创 2022-09-02 16:22:46 · 1100 阅读 · 0 评论 -
Docker中安装Redis
。原创 2022-09-02 17:56:14 · 814 阅读 · 0 评论 -
Git的安装与使用
git的安装与使用原创 2022-09-02 19:12:50 · 493 阅读 · 0 评论 -
Git与Idea整合
默认是私有的仓储,创建完点击管理,再修改为公开。本文中的远程仓储是以gitee(码云)为案例。3、在idea中集成git。原创 2022-09-02 20:15:51 · 801 阅读 · 0 评论 -
搭建微服务项目框架环境
订单order、优惠券coupon、仓储ware、用户会员member等服务模块创建过程同上。模块命名以: xxxmall-模块名 方式,例如订单、产品、购物车等,此处是用初始化工具创建。模块名字:xxxmall-模块名。第一个模块:bookmall-product。项目名字 xxxmall。1、先创建远程仓储 bookmall。2、使用idea创建远程仓储项目。注意:搭建项目模块和命名。原创 2022-09-03 12:43:09 · 620 阅读 · 0 评论 -
Visual Studio Code的下载和安装
VSCode(全称:Visual Studio Code)是一款由微软开发且跨平台的免费源代码编辑器。该软件支持语法高亮、代码自动补全(又称 IntelliSense)、代码重构、查看定义功能,并且内置了命令行工具和 Git 版本控制系统。用户可以更改主题和键盘快捷方式实现个性化设置,也可以通过内置的扩展程序商店安装扩展以拓展软件功能。在 Stack Overflow 组织的开发者调查中,Visual Studio Code 被认为是最受开发者欢迎的开发环境。免费!漂亮!智能!功能全!好用!易用!原创 2022-09-03 20:40:35 · 6071 阅读 · 0 评论