链路追踪方案对比

概述

PinPoint(naver–开源)

由Twitter公司开源的调用链分析工具,目前基于springcloud sleuth得到了广泛的使用,特点是轻量,使用部署简单。

字节码探针技术,代码无侵入,体系完善不易修改,支持java,技术栈支持dubbo.其他语言社区支援中;

Zipkin(Twitter–开源)

一款对Java编写的大规模分布式系统的APM工具,由韩国人开源的分布式跟踪组件,特点是支持多种插件,UI功能强大,接入端无代码侵入。

方便集成于spring cloud sleuth,社区支持的插件也包括dubbo,rabbit,mysql,httpclient等,同时支持php,go,js等语言客户端,界面功能较为简单,本身无告警功能,可能需要二次开发。代码入侵度小;

Skywalking(华为–开源)

是本土开源的基于字节码注入的调用链分析,以及应用监控分析工具。特点是支持多种插件,UI功能较强,接入端无代码侵入。目前已加入Apache孵化器。

类似于PinPoint,目前还在apache孵化中,网上吞吐量对比中强于pinpoint,实际未验证。本身支持dubbo;

对比

探针的性能

对 skywalking、zipkin、pinpoint 进行了压测,并与基线(未使用探针)的情况进行了对比。

模拟了三种并发用户:500,750,1000。使用jmeter测试,每个线程发送30个请求,设置思考时间为10ms。使用的采样率为1,即100%。

pinpoint默认的采样率为20,即50%,通过设置agent的配置文件改为100%。zipkin默认也是1。组合起来,一共有12种。下面看下汇总表:

img

结论

skywalking 的探针对吞吐量的影响最小,zipkin的吞吐量居中。pinpoint 的探针对吞吐量的影响较为明显

应用入侵性
zipkin

没有采用javaagent方式,应用强依赖ZipKin,必须打包到应用中与应用一起运行,每个项目需要添加依赖项、配置,不同探针有不同的bean配置需求;

skywalking

采用javaagent方式,普通功能对应用无侵入,以下两项功能需要应用稍作修改

1.中添加自定义Tag项:应用代码在SkyWalking Span中添加自定义Tag,可以按需输出方法参数值等关键信息,辅助应用排错和性能分析,PinPointZipKin都不支持(可自行实现);

2.日志中输出全局跟踪ID,需要添加SkyWalking依赖项;

pinpoint

采用javaagent方式,对应用完全无侵入,项目无需添加任何额外依赖项,无需修改代码,这点做得最好;

可扩展性

zipkin

开发 zipkin-Server(其实就是提供的开箱即用包),zipkin-agent 与 zipkin-Server 通过 http 或者 mq 进行通信,http 通信会对正常的访问造成影响,

所以还是推荐基于mq异步方式通信,zipkin-Server 通过订阅具体的 topic 进行消费。这个当然是可以扩展的,多个 zipkin-Server 实例进行异步消费 mq 中的监控信息

skywalking

skywalking的collector支持两种部署方式:单机和集群模式。collector与agent之间的通信使用了gRPC。

当你使用-javaagent参数激活sky-walking的探针, 如果当前上下文中存在traceid,logback将在输出traceId

如果探针没有被激活,将输出TID: N/A.而且SkyWalking是基于字节码增强的,traceId的传递依赖于SkyWalking的服务端,

如果服务端异常等客户端连接不上服务端的情况,就会出现TID: [Ignored Trace]的情况,就会丢失traceId。

pinpoint

pinpoint也是支持集群和单机部署的。pinpoint agent通过thrift通信框架,发送链路信息到collector。

界面展示

zipkin

img

skywalking

img

pinpoint

img

img

img

img

调用链应用拓扑
zipkin

img

skywalking

img

pingpoint

img

JVM监控

img

方案总结

方案扩展性实现方式代码侵入性性能损失传输协议客户端支持存储
skywalkingjava探针字节码注入部分侵入(生成TraceId)gRPCJava, .NET, PHP等es,mysql,H2,TIDB
sleuth+zipkin拦截请求侵入(强依赖zipkin)Http,MQjava,c#,go,php等es,mysql,cassandra,内存
pingpointjava探针字节码注入无侵入Thrift,gRPCjava、phphbase+mysql
方案颗粒度调用链应用拓扑UI丰富程度告警支持jvm监控trace查询全局调用统计
skywalking方法级服务+中间件支持支持支持支持
sleuth+zipkin接口级服务不支持不支持支持不支持
pingpoint代码级服务+中间件支持支持支持支持

** 借鉴自: https://blog.csdn.net/qq_34162294/article/details/118347401**

<think>好的,我现在需要处理用户提供的SQL插入语句,目标是改进它们,包括显式列名、批量插入和事务控制。首先,我要仔细分析用户给出的原始代码。 用户提供了多个INSERT INTO语句,都是向t_user02表中插入数据。原始语句没有指定列名,直接使用VALUES,这样可能存在风险,特别是当表结构发生变化时,列顺序或数量变动会导致插入错误。所以,显式列出列名是必要的,这能提高代码的可维护性和安全性。 接下来,批量插入。当前的每个INSERT语句都是单独的,可以合并成一个多行插入,减少数据库的请求次数,提高效率。需要注意的是,不同的数据库对批量插入的支持可能不同,比如MySQL支持多行VALUES,而某些数据库可能需要使用其他语法,但用户给出的例子看起来像是标准的SQL,所以暂时假设目标数据库支持多行插入。 然后是事务控制。将所有插入操作放在一个事务中,可以确保数据的一致性,要么全部成功,要么全部回滚。这对于保持数据的完整性非常重要,特别是在处理多个相关插入时。 现在,我需要检查原始INSERT语句的结构。所有插入的值都是五元组,对应的列应该是五个。假设表t_user02的列名依次是date、id、department_id、name、status(或者其他有意义的名称,但用户没有提供,可能需要根据数据猜测)。例如,第一个插入的值是'2021-06-03'(日期),9(数值),1(数值),'jack'(名字),3(数值)。可能需要确认列的实际名称,但用户没有给出表结构,所以可能需要用占位符或者根据常见命名习惯来命名列,比如insert_date、user_id、dept_id、user_name、user_status等。 这里可能需要提醒用户,正确的列名需要根据实际表结构来定,但为了示例,可以假设列名。比如: - 第一个字段是日期,可能对应insert_date或create_date。 - 第二个是数值,可能是user_id。 - 第三个是部门ID,比如dept_id。 - 第四个是用户名,user_name。 - 第五个可能是状态或等级,比如status或level。 接下来,将每个INSERT语句转换为带有显式列名的形式,然后合并成批量插入。同时,用事务控制包裹整个插入过程。 另外,需要注意SQL的语法是否正确,比如列名是否需要引号(通常不需要,除非是保留字),值中的字符串需要用单引号,数值不需要。用户提供的原始语句中,数值没有引号是正确的,所以保持原样。 现在,处理原始代码: 原始每个INSERT都是: insert into t_user02 values ('2021-06-03',9,1,'jack',3); ... 需要改为: INSERT INTO t_user02 (insert_date, user_id, dept_id, user_name, status) VALUES ('2021-06-03', 9, 1, 'jack', 3), ('2021-06-10',10,2,'rose',2), ...; 然后,用BEGIN TRANSACTION;和COMMIT;包裹起来,或者根据数据库的语法,比如MySQL可能用START TRANSACTION;,或者直接BEGIN;。 另外,检查是否有分号的问题。在批量插入中,多个VALUES之间用逗号分隔,最后一个用分号结束。事务控制语句的语法也需要正确。 最后,给出修改后的代码,并解释每个改进点,确保用户理解这些改动的好处,比如显式列名避免列顺序依赖,批量插入提高性能,事务保证原子性。</think>以下是针对提供的SQL插入语句的改进方案,主要从显式列名、批量插入、事务控制三方面优化: --- ### **一、改进后的SQL代码** ```sql BEGIN TRANSACTION; INSERT INTO t_user02 ( create_date, -- 日期字段(假设列名) user_id, -- 用户ID(假设列名) dept_id, -- 部门ID(假设列名) user_name, -- 用户名(假设列名) status -- 状态字段(假设列名) ) VALUES ('2021-06-03', 9, 1, 'jack', 3), ('2021-06-10', 10, 2, 'rose', 2), ('2021-07-03', 11, 1, 'jim', 2), ('2021-07-05', 12, 1, 'grace', 2), ('2021-07-12', 13, 2, 'tom', 2), ('2021-08-15', 14, 3, 'bush', 3), ('2021-08-12', 15, 3, 'helen', 3); COMMIT; ``` --- ### **二、改进点详解** #### 1. **显式指定列名** - **原问题**:原始语句未指定列名(`INSERT INTO ... VALUES`),依赖表中列的隐式顺序,易因表结构变更导致插入错误。 - **改进**:显式列出列名(`INSERT INTO (col1, col2, ...) VALUES ...`),确保数据插入位置明确,与表结构解耦。 - **注意事项**:需根据实际表结构调整列名(如`create_date`可能为`register_date`)。 #### 2. **批量插入优化** - **原问题**:多次单行插入效率低,频繁连接/断开数据库增加开销。 - **改进**:合并为一条`VALUES`语句,多行数据用逗号分隔,减少网络传输和SQL解析开销。 - **性能提升**:批量插入比单条插入快5-10倍(因数据库类型而异)。 #### 3. **事务控制** - **原问题**:无事务控制,部分失败时数据不一致。 - **改进**:用`BEGIN TRANSACTION`和`COMMIT`包裹插入操作,保证原子性: ```sql BEGIN TRANSACTION; -- 开启事务 -- 执行插入操作 COMMIT; -- 全部成功则提交 ``` - **异常处理**:可添加`ROLLBACK`逻辑(需在应用程序或存储过程中实现)。 --- ### **三、扩展建议** 1. **参数化查询**:防止SQL注入,提升安全性(尤其在应用层代码中)。 2. **错误日志**:捕获插入异常并记录日志,便于排查问题。 3. **索引优化**:若表数据量大,插入前可暂时禁用索引,完成后再重建。 --- ### **附:不同数据库的语法差异** | 特性 | MySQL | PostgreSQL | SQL Server | |--------------|----------------------------|----------------------------|--------------------------| | 事务语法 | `START TRANSACTION;` | `BEGIN;` | `BEGIN TRANSACTION;` | | 批量插入 | 支持多行`VALUES` | 支持多行`VALUES` | 支持多行`VALUES` | | 提交方式 | `COMMIT;` | `COMMIT;` | `COMMIT TRANSACTION;` | 根据实际数据库类型调整语法细节。
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值