【MyDB】1-MyDB环境配置及项目结构

已于 2025-03-30 13:40:40 修改
阅读量1.8k 收藏 28
点赞数 18
CC 4.0 BY-SA版权
分类专栏： Java项目 文章标签： 数据库 java
于 2025-01-08 21:46:42 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/m0_52031708/article/details/145018335

【MyDB】1-MyDB环境配置及项目结构

0.前言

参考MyDB实现的一个数据库轮子项目。

在这里记录学习实现的过程

项目地址如下

xianghua-2/MYDB: 一个仿MySQL的简易数据库 (github.com)

1. 环境配置及示例运行

由于我最开始一直都是用Idea2023自带的maven来配置，所有电脑上没有安装maven，但是在mydb中需要用电脑自带的maven来编译运行。因此先进行了maven的下载与安装。

我的运行环境为：win11+JDK17+Idea2024.1.4

1.1 Windows Maven配置（可选）

参考博客为：

[（2024.11.25）最新版MAVEN的安装和配置教程（超详细）maven最新版本-CSDN博客](https://blog.csdn.net/mn17275664673zx/article/details/144022555#:~:text=本文介绍了 Maven 的安装与配置流程。 首先阐述因新版本存在兼容性、性能等不稳定因素，建议选择稳定版下载。 接着依次说明解压操作及新建本地仓库文件夹，详细讲解环境变量配置，包括,MAVEN_HOME、M2_HOME 及 path 路径添加。 还介绍了配置阿里云镜像、JDK 的方法，以及如何建立本地仓库。)

在cmd中mvn -v 可用，但是idea的terminal不可用解决办法！_为什么cmd可以查看yarn版本,idea查看不了-CSDN博客

1.1.1 下载安装

官网下载稳定的3.8.8 版本Download Apache Maven – Maven

在这里插入图片描述

下载后解压到本地，在maven的目录下创建一个repository文件夹作为本地仓库
在这里插入图片描述

1.1.2 修改环境变量

修改环境变量。在系统变量下新建两个环境变量

 变量名：MAVEN_HOME
 变量值：D:\develop\apache-maven\apache-maven-3.8.8
 // 此处请修改为你自己的目录地址 
 
  变量名：M2_HOME
 变量值：D:\develop\apache-maven\apache-maven-3.8.8\repository
  // 此处请修改为你自己的目录地址

在这里插入图片描述

之后编辑系统变量中的Path路径，添加以下路径 %MAVEN_HOME%\bin

1.1.3 修改conf/setting.xml文件

1.配置阿里云仓库
在这里插入图片描述

     <!-- 阿里云仓库 -->
    <mirror>
      <id>alimaven</id>
      <mirrorOf>central</mirrorOf>
      <name>aliyun maven</name>
      <url>http://maven.aliyun.com/nexus/content/repositories/central/</url>
    </mirror>

2.修改jdk版本

profiles标签中插入以下内容

在这里插入图片描述

    <profile>
          <id>jdk-1.8</id>
          <activation>
            <activeByDefault>true</activeByDefault>
            <jdk>1.8</jdk>
          </activation>
    
          <properties>
            <maven.compiler.source>1.8</maven.compiler.source>
            <maven.compiler.target>1.8</maven.compiler.target>
            <maven.compiler.compilerVersion>1.8</maven.compiler.compilerVersion>
          </properties>
    </profile>

3.修改本地仓库路径配置
在这里插入图片描述

  <localRepository>D:\SoftWare\apache-maven-3.8.8\repository</localRepository>

1.1.4 安装mvn

运行 mvn help:system

在这里插入图片描述

运行成功结果如下
在这里插入图片描述

检验是否安装成功，输入mvn --version,出现如下内容则安装成功

在这里插入图片描述

1.1.5 Idea配置

安装完成后，命令行窗口能识别mvn命令，但是idea中不可以。

修改Idea的settings中的tools下的teminal为cmd，之后重启idea，并用管理员的方式启动idea即可。

在这里插入图片描述

1.2 windows 下 编译运行

1.2.1 编译代码

在idea中打开命令行，执行以下命令编译代码

mvn compile

1.2.2 新建数据库

接着执行以下命令以 temp\mydb为路径创建数据库

D盘目录下新建一个temp\mydb文件夹

原先的命令为

mvn exec:java -Dexec.mainClass="top.xianghua.mydb.server.Launcher" -Dexec.args="-create /tmp/mydb"

但是我这样会报错，修改以上命令如下后，成功创建

mvn exec:java -D"exec.mainClass"="top.xianghua.mydb.server.Launcher" -D"exec.args"="-create D:\temp\mydb"

1.2.3 启动数据库

随后通过以下命令以默认参数启动数据库服务

# 这是github上的命令，会报错
mvn exec:java -Dexec.mainClass="top.xianghua.mydb.server.Launcher" -Dexec.args="-open D:\temp\mydb"

其实是运行下面命令

mvn exec:java -D"exec.mainClass"="top.xianghua.mydb.server.Launcher" -D"exec.args"="-open E:\temp\mydb"

我猜原作者是在linux服务器上运行的。所以命令之间会有区别。我是在windows服务器下复现的。

1.2.4 连接数据库

mvn exec:java -D"exec.mainClass"="top.xianghua.mydb.client.Launcher"

连接成功后执行以下命令

create table test_table id int32, value int32 (index id)

insert into test_table values 10 33

select * from test_table where id = 10

begin

insert into test_table values 20 34

commit

select * from test_table where id>10

begin
delete from test_table where id=10
abort

select * from test_table where id>10

quit

2 项目结构

MYDB 分为后端和前端，前后端通过 socket 进行交互。前端（客户端）的职责很单一，读取用户输入，并发送到后端执行，输出返回结果，并等待下一次输入。MYDB 后端则需要解析 SQL，如果是合法的 SQL，就尝试执行并返回结果。不包括解析器，MYDB 的后端划分为五个模块，每个模块都又一定的职责，通过接口向其依赖的模块提供方法。五个模块如下：

  1. Transaction Manager（TM）
  2. Data Manager（DM）
  3. Version Manager（VM）
  4. Index Manager（IM）
  5. Table Manager（TBM）

五个模块的依赖关系如下：

MYDB 模块依赖

从这个依赖图中，拓扑排序一下就能看出实现顺序。本教程的实现顺序是 TM -> DM -> VM -> IM -> TBM

每个模块的职责如下：

  1. TM 通过维护 XID 文件来维护事务的状态，并提供接口供其他模块来查询某个事务的状态。
  2. DM 直接管理数据库 DB 文件和日志文件。DM 的主要职责有：1) 分页管理 DB 文件，并进行缓存；2) 管理日志文件，保证在发生错误时可以根据日志进行恢复；3) 抽象 DB 文件为 DataItem 供上层模块使用，并提供缓存。
  3. VM 基于两段锁协议实现了调度序列的可串行化，并实现了 MVCC 以消除读写阻塞。同时实现了两种隔离级别。
  4. IM 实现了基于 B+ 树的索引，BTW，目前 where 只支持已索引字段。
  5. TBM 实现了对字段和表的管理。同时，解析 SQL 语句，并根据语句操作表。

参考博客

0. 项目结构和一些不得不说的话 | 信也のブログ (shinya.click)

手写简化版数据库–MYDB-CSDN博客

Python新闻网站项目-2.Scrapy爬虫的配置和数据抓取
Mr数据杨
02-25 3万+
新闻网站系统的开发将自动化抓取技术与内容管理系统相结合，不仅为用户带来实时新闻内容，同时也为开发者提供了高效的数据管理流程。通过Scrapy和Gerapy技术的协同，爬虫功能得以在分布式环境中优化，进一步提升了抓取效率，而Django框架的引入则赋予系统稳健的展示和管理能力。项目的每一个开发阶段都注重功能的扩展性和实用性，从数据抓取到内容展示和管理，逐步搭建起了一个完整且可维护的新闻信息平台，实现了自动化新闻更新和丰富的内容操作功能，为后续的新闻网站维护和扩展奠定了坚实的基础。
spring boot应用配置管理：轻松掌控配置文件和多环境设置！
**My Coding Family**
06-04 927
🏆本文收录于「滚雪球学SpringBoot」专栏，手把手带你零基础入门Spring Boot，从入门到就业，助你早日登顶实现财富自由🚀；同时，欢迎大家关注&&收藏&&订阅！持续更新中，up！up！up！！
手写MYDB项目 项目架构
T1_hide_on_bush的博客
04-05 406
MYDB 分为后端和前端，前后端通过 socket 进行交互。前端（客户端）的职责很单一，读取用户输入，并发送到后端执行，输出返回结果，并等待下一次输入。MYDB 后端则需要解析 SQL，如果是合法的 SQL，就尝试执行并返回结果。不包括解析器，MYDB 的后端划分为五个模块，每个。本教程的实现顺序是 TM -> DM -> VM -> IM -> TBM。（管理数据版本控制，多版本并发控制 MVCC 系统）（管理数据库索引的创建、维护和查询优化）（负责数据存储和检索的核心组件）
手写数据库MYDB（一）：项目启动效果展示和环境配置问题说明
大学成长道路上的探索经历与点滴思考，与君共勉，共筑成长。
03-27 1307
轮子项目的启动和配置问题的解决说明
【MYDB 学习笔记：从最简单的 TM 开始】
最新发布
xxxxxxllllllshi的博客
06-21 288
本文介绍了MYDB数据库系统中事务管理器（TM）的实现原理。TM通过XID文件管理事务状态，XID文件包含文件头（记录事务数量）和事务状态字段（1字节/事务）。详细解析了事务的三种状态（active/committed/aborted）、XID分配规则（从1开始递增，0为特殊超级事务）以及核心接口功能（begin/commit/abort等）。实现上采用NIO的FileChannel进行文件操作，使用force()确保数据持久化，并包含文件校验、状态更新等关键方法。该模块为数据库系统提供了基础的事务状态管理
手写数据库轮子项目 MYDB 之一 | TransactionManager (TM) 事务
weixin_45634447的博客
08-06 969
TransactionManager (TM) 模块维护了一个自定义的 XID 格式的文件，并提供接口供其他模块来查询某个事务的状态。每个事物都有一个 XID，它表明了这个事物的唯一性。事物的 XID 从1开始不断递增。事物的状态包括：0 - active，正在进行，尚未结束1 - committed，已提交2 - aborted，已撤销（回滚）TM通过维护一个自定义的XID格式文件来保存当前和过去事物的状态。文件中前8个字节记录了文件管理的事务个数，从第9个字节开始，每个字节记录一个事物的状态。
mydb
徐虎的专栏
11-27 1601
Imports System.DataImports System.Data.OleDbImports System.WebImports System.Web.UI.PageImports System.Web.HttpContextImports System.Web.MailPublic Class mydb    过程说明:    GETTABLE 输入一个SQL得到一个TABLE
手写简化版数据库--MYDB
qq_41911251的博客
07-22 5150
例如第一章Python机器学习入门之pandas的使用。
数据库（mydb）
m0_56776375的博客
11-01 1686
drop database if exists mydb; create database mydb;#创建数据库 use mydb;#使用数据库 #创建班级表 create table clazz ( cid int primary key auto_increment,#主键，自增,班级id cname varchar(20) not null#班级名称 ); #创建学生表 create table student ( sid int primary key auto_increment,#学生id，.
手写数据库轮子项目 MYDB 之三 | DataManager (DM) 数据之数据页缓存与管理
weixin_45634447的博客
08-30 380
本节我们介绍数据页在缓存中的定义和管理方法。DM 将文件系统抽象为一个个的页面，每次对磁盘中数据文件的读写是以页面为单位的。从磁盘中读进来的数据也是以页面为单位缓存的。
Spring Boot入门(03)： 从零开始学习配置文件：掌握YAML和Properties，轻松应对多环境配置管理
热门推荐
**My Coding Family**
08-12 4万+
在Spring Boot开发中，配置文件是非常重要的。本文将带领你从零开始学习配置文件，掌握YAML和Properties的语法，轻松应对多环境配置管理。无论是开发、测试还是生产环境，你都可以轻松切换不同的配置文件，并且能够灵活修改配置信息。
FastAPI与Tortoise-ORM模型配置及aerich迁移工具
04-30 1231
在FastAPI中使用Tortoise-ORM时，模型类通过Python类属性与数据库字段建立映射关系。每个模型类必须继承自，并通过class Metatable_description = "系统用户数据表"table：指定物理表名称（默认使用类名小写）schema：数据库schema（适用于PostgreSQL）：表注释（生成DDL语句时会包含）：联合唯一约束。
MyDB - 手写数据库
sss1513的博客
05-05 584
当释放一个 DateItem 引用时，会将对应的 references 减一，如果 references 为零， 则会清除该缓存，对应的 page 引用也减一，如果此时 page 的引用也为零，就会将该 page 写回磁盘中。可以注意到，被选择的页，会直接从 PageIndex 中移除，这意味着，同一个页面是不允许并发写的。此框架的作用是向上提供缓存，向下读取文件，使用引用计数的方式来处理缓存，当从缓存读取一个数据，对应的计数加一，当上层应用不在使用该缓存时，对应的计数减一，当计数为零时，会写回文件。
MYDB仿MySQL手写数据库项目总结
2301_82014959的博客
04-21 1125
因为有两阶段锁协议（2PL），当一个事务对一个资源上锁之后，其他事务只能阻塞等待，而这样有死锁的可能，在项目中，我们把事务Ti等待事务Tj解锁抽象为一条有向边，即Ti->Tj，这样多条有向边就组成图，我们通过检查这个图是否是循环的，就可以来检查是否有死锁。SQL解析是通过里面一个分割相关的类把SQL语句分割成不同的部分，比如关键字、字母下划线、字符串等等，然后通过praser解析类先来判断第一个部分的关键字，比如select、insert等等，然后把同一类的SQL交给不同的方法解析。对每个持有资源的事务（
【亲测免费】 探秘MYDB：一个高效、易用的轻量级数据库管理系统
gitblog_00029的博客
04-19 1126
探秘MYDB：一个高效、易用的轻量级数据库管理系统 MYDB，全称为MY Database，是由开发者CN-GuoZiyang创建的一个开源的轻量级数据库管理系统。它旨在提供一种简单、直观的方式来存储和操作数据，尤其适合小型项目或学习数据库管理的新手。在本文中，我们将深入探讨MYDB的技术特性，应用潜力，以及为何你应该考虑使用它。 项目简介 MYDB是一个基于文件系统的数据库系统，它利用JSON文...
手写数据库轮子项目 MYDB 之六 | VersionManager (VM) 版本之记录的版本与事务隔离
weixin_45634447的博客
09-18 355
由两个阶段组成，加锁阶段和释放锁阶段。在加锁阶段，事务需要获取所需数据的锁，锁定数据防止其他事务对其进行修改；在释放锁阶段，事务需要释放已经获取的锁，使得其他事务可以访问该数据。事务在释放锁之后，不能再申请和获得任何其他封锁。2PL 确实保证了调度序列的可串行化，但是不可避免地导致了事务间的相互阻塞，甚至可能导致死锁。MYDB 为了提高事务处理的效率，降低阻塞概率，实现了 MVCC。通过 MVCC 实现了类似共享锁和排他锁。两阶段提交协议与两阶段锁协议不同，是针对主从数据库之间的同步。
MyDB 简易数据库排查问题
ironmanoOOoo的博客
07-23 795
最近观看声哥的数据库项目，觉得特有意思，准备学习。一波大概学习过程是，对着项目实敲一遍，每实现一个小功能，就更新到git，以及推送到远程仓库中，每看到Gitee的提交树上面出现一个绿点，就会给自己一个正反馈。然而因为项目是最后一步才最终实现的，所以只能通过没有Warning（s）来判断自己的程序是否正确。...
MYDB 项目常见问题解决方案
gitblog_00492的博客
12-10 520
MYDB 项目常见问题解决方案 项目基础介绍 MYDB 是一个用 Java 实现的简单数据库项目，部分原理参照了 MySQL、PostgreSQL 和 SQLite。该项目实现了以下功能： 数据的可靠性和数据恢复 两段锁协议（2PL）实现可串行化调度 MVCC（多版本并发控制） 两种事务隔离级别（读提交和可重复读） 死锁处理 简单的表和字段管理 简陋的 SQL 解析 基于 socket 的 se...
Mydb数据库问题
pachupingminku的博客
10-04 2140
TM（Transaction Manager）：事务管理器，用于维护事务的状态，并提供接口供其他模块查询某个事务的状态。DM（Data Manager）：数据管理器，直接管理数据库 DB 文件和日志文件。它负责分页管理 DB 文件，并进行缓存。它还管理日志文件，保证在发生错误时可以根据日志进行恢复。DM 将 DB 文件抽象为 DataItem，供上层模块使用，并提供缓存。VM（Version Manager）：版本管理器，基于两段锁协议实现了调度序列的可串行化，并实现了 MVCC 以消除读写阻塞。
创建SpringBoot项目 （1）application.yml配置文件
12-27
### Spring Boot项目的`application.yml`配置示例 在Spring Boot项目中，`application.yml`用于外部化配置，使得应用程序可以在不同环境中轻松调整行为而无需重新编译代码。下面是一个典型的`application.yml`文件结构和最佳实践： #### 基本应用属性配置 ```yaml server: port: 8081 # 设置服务器端口 spring: application: name: my-application-name # 应用程序名称 ``` 此部分展示了如何更改服务启动监听的端口号以及指定应用程序的名字[^1]。 #### 数据库连接配置 对于数据库连接池和其他数据源参数，可以通过如下方式来设定： ```yaml spring: datasource: url: jdbc:mysql://localhost:3306/mydb?useSSL=false&serverTimezone=UTC username: root password: secret driver-class-name: com.mysql.cj.jdbc.Driver ``` 这里指定了JDBC URL、用户名、密码及驱动器类名等必要信息以便建立到MySQL数据库的链接[^2]。 #### 日志级别控制 日志记录是调试和监控的重要工具之一，在YAML文件里也可以方便地管理各个包的日志输出等级： ```yaml logging: level: root: WARN org.springframework.web: DEBUG com.example.myapplication: INFO ``` 上述片段设置了全局最低日志级别为警告(`WARN`)，并对特定组件启用了更详细的诊断消息。 #### 使用环境变量覆盖默认值 为了提高灵活性并增强安全性，推荐利用操作系统的环境变量或命令行参数重写敏感信息或其他可能变化的数据项： ```yaml ${DB_URL:jdbc:h2:mem:testdb} # 如果未提供，则采用内嵌H2内存型数据库URL作为后备方案 ``` 这种做法不仅简化了部署流程而且有助于保护机密资料免受意外泄露的风险。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值