将四个geo数据集(Series Matrix)合并分析,找出差异基因,绘制火山图,PCA及热图,用R写出数据预处理、提取表达矩阵、标准化等流程的代码(数据集已下载,平台文件已下载,直接调用)详细代码,包括读取本地文件部分,平台文件也是四个,并且每部分输出相关文件(.CSV)
时间: 2025-06-12 19:11:13 浏览: 31
<think>好的,用户现在需要处理四个GEO数据集,进行合并分析,找出差异基因,并绘制火山图、PCA和热图。他们之前遇到了路径问题,现在可能已经解决了,现在需要详细的R代码流程,包括数据预处理、表达矩阵提取、标准化,以及每个步骤输出CSV文件。
首先,我需要考虑用户的数据结构。GEO的Series Matrix文件通常是包含表达矩阵和元数据的文本文件,而平台文件(GPL)包含探针到基因的注释。由于用户有四个数据集,每个数据集可能来自不同的平台,所以需要处理不同探针的注释问题,可能需要统一基因符号。
接下来,数据读取部分。用户之前路径有问题,所以需要确保他们现在的路径正确。使用read.delim读取系列矩阵,并跳过可能的注释行。然后提取表达矩阵,通常在第几个行开始,可能需要根据具体文件调整grep的模式。
然后是数据标准化。用户可能已经下载了原始数据,但如果是已经标准化的数据,如log2转换后的,可能需要不同的处理。这里假设需要进行归一化处理,比如使用limma的normalizeBetweenArrays。
平台文件处理是关键,每个数据集对应的平台文件需要正确读取,并映射探针到基因。需要注意不同平台可能有的探针命名差异,重复探针,或没有基因符号的探针,可能需要取平均值或去重。
数据合并时,由于不同数据集的行(基因)可能不同,使用Reduce和merge按行名合并,保留共有基因。但用户可能有四个数据集,合并时可能会有很多缺失,可能需要更复杂的方法,比如保留至少出现在三个数据集中的基因,但用户示例中用了交集,可能需要提示用户注意基因数量。
差异分析部分,用户需要分组信息,但用户的数据中分组情况不明确,需要用户自行定义。示例中使用的是假设的group,用户需要根据实际样本信息调整。使用limma进行差异分析,生成结果后提取差异基因。
可视化部分,火山图、PCA和热图的代码需要调整参数适应数据,比如PCA可能需要对转置的表达矩阵进行,热图可能需要差异基因的子集,避免过多基因导致无法绘制。
输出CSV文件方面,每个步骤都需要保存结果,比如标准化后的表达矩阵、合并后的数据、差异基因列表等。需要确保输出路径存在,或者提醒用户创建目录。
潜在问题:平台文件中的注释列可能不同,有的使用Gene symbol,有的可能用Gene.Symbol或其他,需要用户检查后调整。此外,不同数据集的样本数量不同,合并时可能出现样本名冲突,需要重命名或处理。另外,批次效应是一个大问题,四个数据集合并时如果没有去批次,结果可能不可靠,但用户可能没有提到,是否需要加入Combat或其他方法?但用户可能希望先简单流程,所以暂时不提,但可能需要后续提示。
需要确保代码的连贯性,从读取数据到最终结果,用户可以直接按顺序运行。同时,注释要清楚,让用户知道每一步在做什么。此外,处理四个数据集可能需要循环或lapply,但示例中分开处理四个,可能更清晰,但代码重复。可能需要简化,但用户可能更容易理解分开的步骤。
最后,测试代码是否有明显错误,比如变量名是否正确,函数参数是否正确,比如读取文件时的skip行数是否正确,平台文件中的列名是否正确。例如,GPL570的基因符号列可能是"Gene Symbol",而其他平台可能不同,需要用户自行调整。</think>以下是完整的R代码流程,包含本地文件读取、多数据集合并、差异分析和可视化(已处理路径和平台兼容性问题):
```r
# --------------------- 第一部分:环境准备 ---------------------
library(limma)
library(ggplot2)
library(pheatmap)
library(reshape2)
library(sva) # 用于批次校正
# 设置输出目录
dir.create("results", showWarnings = FALSE)
dir.create("plots", showWarnings = FALSE)
# --------------------- 第二部分:数据读取 ---------------------
# 自定义读取函数(处理GEO系列矩阵)
read_geo_matrix <- function(path){
# 跳过注释行(通常以"!series"或"^"开头)
data <- read.delim(path, skip = grep("^!series_matrix_table_begin", readLines(path)) - 1,
header = TRUE, row.names = 1)
# 移除最后一行注释
data <- data[-nrow(data), ]
return(as.matrix(data))
}
# 文件路径(请根据实际路径修改)
data_paths <- c(
"G:/desktop 1/GSE数据集/GSE28360/GSE28360_series_matrix.txt",
"D:/R_worklist/GSE数据集/GSE24752/GSE24752_series_matrix.txt",
"D:/R_worklist/GSE数据集/GSE28345/GSE28345_series_matrix.txt",
"D:/R_worklist/GSE数据集/GSE74144/GSE74144_series_matrix.txt"
)
platform_paths <- c(
"D:/R_worklist/GSE数据集/GSE28360/GPL6244-17930.txt",
"G:/desktop 1/GSE数据集/GSE24752/GPL570-55999.txt",
"G:/R_worklist/GSE数据集/GSE28345/GPL6244-17930.txt",
"G:/desktop 1/GSE数据集/GSE74144/GPL13497-9755.txt"
)
# 读取所有数据集
geo_datasets <- lapply(data_paths, read_geo_matrix)
# --------------------- 第三部分:平台处理 ---------------------
process_platform <- function(platform_path){
plat <- read.delim(platform_path, header = TRUE, comment.char = "#")
# 提取探针与基因对应关系(不同平台列名不同)
if("Gene.Symbol" %in% colnames(plat)) {
annot <- data.frame(probe=plat$ID, symbol=plat$Gene.Symbol)
} else if("GeneSymbol" %in% colnames(plat)) {
annot <- data.frame(probe=plat$ID, symbol=plat$GeneSymbol)
}
# 清理基因符号
annot$symbol <- gsub("///.*", "", annot$symbol) # 取第一个符号
annot <- annot[annot$symbol != "" & !is.na(annot$symbol), ]
return(annot)
}
platforms <- lapply(platform_paths, process_platform)
# --------------------- 第四部分:数据整合 ---------------------
# 将探针转换为基因符号
convert_to_gene <- function(dataset, platform){
# 合并表达矩阵与平台注释
matched <- match(rownames(dataset), platform$probe)
dataset <- dataset[!is.na(matched), ]
rownames(dataset) <- platform$symbol[matched[!is.na(matched)]]
# 处理重复基因(取平均值)
dataset <- aggregate(dataset, by=list(rownames(dataset)), FUN=mean)
rownames(dataset) <- dataset$Group.1
return(dataset[,-1])
}
geo_genes <- mapply(convert_to_gene, geo_datasets, platforms, SIMPLIFY = FALSE)
# 数据标准化
geo_normalized <- lapply(geo_genes, function(x){
x <- normalizeBetweenArrays(x, method = "quantile") # 分位数标准化
return(x)
})
# 保存预处理数据
for(i in seq_along(geo_normalized)){
write.csv(geo_normalized[[i]], file=paste0("results/GSE",i,"_normalized.csv"))
}
# --------------------- 第五部分:批次校正 ---------------------
# 合并所有数据集
combined <- do.call(cbind, geo_normalized)
batch <- rep(1:4, times=sapply(geo_normalized, ncol)) # 创建批次变量
# ComBat校正批次效应
combat_combat <- ComBat(dat=combined, batch=batch)
write.csv(combat_combat, "results/combined_batch_corrected.csv")
# --------------------- 第六部分:差异分析 ---------------------
# 假设前两个数据集是病例组,后两个是对照组(需根据实际修改)
group <- factor(c(rep("Case", sum(sapply(geo_normalized[1:2], ncol))),
rep("Control", sum(sapply(geo_normalized[3:4], ncol)))))
design <- model.matrix(~0 + group)
colnames(design) <- levels(group)
fit <- lmFit(combat_combat, design)
contrast <- makeContrasts(Case - Control, levels=design)
fit2 <- contrasts.fit(fit, contrast)
fit2 <- eBayes(fit2)
diff_genes <- topTable(fit2, number=Inf, adjust.method="BH")
write.csv(diff_genes, "results/differential_genes.csv")
# --------------------- 第七部分:可视化 ---------------------
# 火山图
volcano_plot <- ggplot(diff_genes, aes(x=logFC, y=-log10(P.Value), color=adj.P.Val<0.05)) +
geom_point(alpha=0.6) +
scale_color_manual(values=c("grey", "red")) +
labs(title="Volcano Plot", x="Log2 Fold Change", y="-Log10(p-value)")
ggsave("plots/volcano.pdf", volcano_plot, width=8, height=6)
# PCA分析
pca_data <- prcomp(t(combat_combat), scale.=TRUE)
pca_df <- data.frame(PC1=pca_data$x[,1], PC2=pca_data$x[,2], Group=group)
pca_plot <- ggplot(pca_df, aes(x=PC1, y=PC2, color=Group)) +
geom_point(size=3) +
stat_ellipse(level=0.95) +
labs(title="PCA Plot")
ggsave("plots/PCA.pdf", pca_plot, width=8, height=6)
# 热图绘制(取前50差异基因)
top50 <- rownames(diff_genes)[1:50]
heatmap_data <- combat_combat[top50, ]
pdf("plots/heatmap.pdf", width=12, height=8)
pheatmap(heatmap_data,
scale="row",
show_rownames=TRUE,
show_colnames=FALSE,
color=colorRampPalette(c("blue", "white", "red"))(50),
clustering_method="complete")
dev.off()
```
**代码关键说明:**
1. **路径处理:**
- 使用统一的正斜杠路径格式
- 通过`lapply`批量处理多个数据集
2. **平台文件处理:**
- 自动识别不同平台的基因符号列(需根据实际平台调整)
- 处理多基因符号分隔符(示例中使用`///`分隔符)
3. **数据整合:**
- 使用`ComBat`进行批次校正(需安装`sva`包)
- 保存中间结果便于追溯
4. **差异分析:**
- 采用limma经典分析流程
- 假设案例分组,实际需根据样本信息修改`group`变量
5. **可视化增强:**
- PCA图添加置信椭圆
- 热图自动缩放行标准化
- 所有图形输出PDF矢量格式
**使用前检查:**
1. 确认所有文件路径有效(可用`file.exists()`验证)
2. 检查平台文件的实际列名(可能需要调整`Gene.Symbol`匹配逻辑)
3. 根据实际实验设计修改分组信息`group`
**输出文件结构:**
```
项目目录/
├─ results/
│ ├─ GSE1_normalized.csv
│ ├─ combined_batch_corrected.csv
│ └─ differential_genes.csv
└─ plots/
├─ volcano.pdf
├─ PCA.pdf
└─ heatmap.pdf
```
阅读全文