大规模部署lxc容器遇到的若干问题

最新推荐文章于 2023-04-10 16:27:02 发布
最新推荐文章于 2023-04-10 16:27:02 发布
阅读量1.1k 收藏 1
点赞数
CC 4.0 BY-SA版权
分类专栏： 容器技术 文章标签： LXC
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/goodboydan/article/details/107100910
在大规模部署LXC容器时，遇到了CPU占用过高导致系统卡顿、容器启动失败、网卡启动问题以及TTY限制。通过调整线程数、监控CPU与内存、规划多网段、禁用NetworkManager以及禁用tty，成功部署约4100台容器，但CPU瓶颈限制了进一步扩展。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

  • 线程数控制

启动线程过多会导致资源不足引发的lxc-start命令无法执行问题，到致大量容器只执行了lxc-copy，而无法真正运行。具体情况应视服务器硬件条件（cpu，内存--在本项目部署中主要瓶颈在于cpu）以及当前服务器状态（当前主要是cpu占有率过高问题）而定。实测在cpu高占用下（90%+）线程数应为5以下，正常应为10-20线程数。

  • 由于多线程运行，无法有效监测执行针对lxc容器复制启动及运行所产生的cpu与内存开销改为在不启动其他应用程序的情况下监测整个物理机的cpu和内存使用率，且这一数据更有实际意义。

 

 

 

  • cpu占用过高问题

如图所示在lxc容器数量部署到1300左右cpu占用率开始从20%以下开始飙升，部署到2300左右飙升至80%，随后增速下降至3500台左右稳定在95-99%。（图示是按时间次序的&#x

最低0.47元/天 解锁文章
嵌入式linux系统死机原因,嵌入式Linux引导卡死。如何调试?
weixin_42524004的博客
05-09 1696
在petalinux构建的嵌入式平台中,在引导期间(从u-boot),我看到的最后一个打印是(有时)mmcblk0boot1打印。调试/跟踪/修复问题的好方法是什么?正如您在日志末尾看到的,是另一个引导的开始附加日志=======================================================================> U-Boot 2015.07 (...
容器网络
weixin_44233888的博客
03-21 3121
[参考]https://www.cnblogs.com/bakari/p/8037105.html 1.Linux Container容器技术（简称LXC）: 1.1 定义：是一种内核轻量级的操作系统层虚拟化技术，它解决了PAAS层的技术实现。 1.2 本质：它本质上是使用了Linux的namespace实现资源隔离和Cgroup实现资源限制，彼此间相互隔离的若干个linux进程的集合。 1.3 由两大机制来保证实现 1. NameSpace（命名空间） 原理： 提供了一种内核级别隔离系统资源的方法，通过
proxmox新版本使用了lxc容器,导致以前的vzlist命令无法使用,于是自己写了一个脚本来获取所有半虚拟化主机的信息状态...
weixin_30538029的博客
02-22 396
#!/usr/bin/env python #encoding:utf-8 # desc:用来描述各个主机信息 import os #CTID NPROC STATUS IP_ADDR HOSTNAME configDir = '/etc/pve/lxc' #获取所有的配置文件 def fileListFunc(filePathLi...
【LXC容器】
dally2的博客
03-19 1019
服务器关机重启后，gpu需重新挂载到LXC上
LXC 介绍
vito
03-23 1991
转自：https://www.cnblogs.com/xidongyu/p/5767020.html LXC又名Linux container，是一种虚拟化的解决方案，这种是内核级的虚拟化。(主流的解决方案Xen ,KVM, LXC) 介绍通过namespace进行资源的隔离,Gust1下的进程与Guset2下的进程是独立的，可以看作运行在两台物理机上一样。Contaniner
LXC介绍
在你书包里拉屎的博客
11-30 2384
LXC LXC又名Linux container，是一种虚拟化的解决方案，这种是内核级的虚拟化。(主流的解决方案Xen ,KVM, LXC) 介绍 ​ 通过namespace进行资源的隔离,Gust1下的进程与Guset2下的进程是独立的，可以看作运行在两台物理机上一样。Contaniner管理工具就是对Guest进行管理的(创建、销毁)。 ​ 传统方式使用容器功能的话需要我们自己写代码去进行系统调用来实现创建内核，实际上拥有此能力的人廖廖无几。而LXC（LinuX Container）把容器技术做得更加
docker容器技术基础入门（一）
Null的博客
11-09 1508
目录   一、什么是容器 二、虚拟化的实现 1、主机级虚拟化 2、容器级别虚拟化 2.1、Linux Namespaces 2.2、Control Groups（CGroups）的作用 2.2.1、CGroups的功能 2.3、LXC（Linux Container） 三、Docker的诞生 3.1、Docker是LXC的增强版，它本身不是容器，而是容器的易用工具。 3.2...
网易数帆对 CIlium 容器网络的探索和实践
NetEaseResearch的博客
07-30 1499
本文会深入介绍 Cilium，并澄清一些认知误区，然后给出网易数帆轻舟云原生团队是如何使用 Cilium 的。目前国内这方面深入解析材料较少，如果您也正在探究，希望这篇文章能给您带来帮助。
使用KubeFATE快速部署联邦学习实验开发环境（一）
FedAI联邦学习的博客
03-31 3407
概述：FATE(Federated AI Technology Enabler)是一个联邦学习框架，能有效帮助多个机构在满足用户隐私保护、数据安全和政府法规的要求下，进行数据使用和建模。但由于其系统的分布式特性，导致使用存在一定门槛。鉴于此，微众银行联合VMware一起开发了KubeFATE项目，致力于降低FATE的使用门槛和系统运维成本。本文将首先分析FATE的整体架构，帮助读者理解各部件的作用...
LXD/LXC 奇怪的重启断网问题解决
ONE_SIX_MIX的专栏
03-23 2325
使用LXD/LXC 版本为当前最新的 4.24 症状表现为 容器原来可以正常联网，可以ping通宿主机的局域网和外网，但是重启机器后，容器突然就无法联网，即无法ping通和访问宿主机的局域网和外网。 并且在正常联网和突然无法联网之间，你没有给宿主机和容器做任何的网络设定。 但是proxy设备却正常，外部机可以通过容器的proxy设备访问容器的本地localhost网络。 并且，手动重启容器，删除后重建容器，手动重启宿主机，删除和重建网桥，手动给容器删除和新增网桥，调整容器和宿主机的路由表和iptables
debian12 全新安装后 LXD/LXC使用 nvidia 容器报错 The NVIDIA container tools couldn‘t be found 解决
ONE_SIX_MIX的专栏
04-10 862
报错 The NVIDIA container tools couldn’t be found 原因是 nvidia-container-runtime 包没有安装，需要手动安装。ubuntu 直接安装 lxd 就能直接使用，原因可能是 ubuntu 使用的是snap包，它的snap包里已经包含 nvidia-container-runtime 相关工具。这里可以找到报该错误的 LXD 的 go 源代码，lxd 会寻找一个命令 nvidia-container-cli ，如果没有找到就会报该错误。
LXC 部署上线期间常见问题汇总
weixin_34406086的博客
03-11 772
问题一：执行lxc-create时，报错configuration path '/usr/local/var/lib/lxc' not found，或者lxc-ls无效：解决：mkdir –p /usr/local/var/lib/lxc问题二：lxc-execute: No such file or directory -failed to open /proc/mount...
从零开始深度学习 E1. cuda+Tensorflow环境部署
myta0424的专栏
09-10 377
cuda+Tensorflow的环境部署较为方便，笔者在ubuntu14.04上面进行环境部署，主要经过了以下几个步骤：安装cuda1. 在Nvidia官网下载cuda安装包打开cuda下载页面，依次选择 Operating System: Linux Architecture: x86_64 Distribution: Ubuntu Version: 14.04 Installer Ty
lxc（1）：lxc安装
u013938578的博客
03-24 1315
为了在指定环境下(比如 Debian Wheezy 64位)创建 LXC 容器，你需要一个相应的 LXC 模板。幸运的是 LXC 提供的工具集成了一整套现成的 LXC 模板，你可以在 /usr/share/lxc/templates 目录下找到它们。安装完 LXC 工具后，就能看到 LXC 自动创建了一块桥接网卡(lxcbr0，可以在 /etc/lxc/default.conf 中设置)。当你创建了 LXC 容器后，它的网口会自动链接到这个桥接网卡上，然后这个容器就能和外部世界通信了。
LXC/LXD缓存镜像至本地
tcliuwenwen的博客
02-05 1786
背景 使用LXC/LXD时想像docker一样先把镜像缓存到本地，但是不知道如何操作，探究许久发现真相。 操作 afu@instance-lxc:~$ lxc image copy ubuntu:18.04 local: Image copied successfully! afu@instance-lxc:~$ lxc image list +-------+--------------+---...
lxc mysql 使用_LXC容器
weixin_30131443的博客
01-27 646
1． LXC简述Linux container是一种资源隔离机制而非虚拟化技术。VMM(VMMVirtualMachineMonitor)或者叫Hypervisor是标准的虚拟化技术，这种技术通过虚拟层(也就是VMM或叫Hypervisor)，主要作用一是让多个操作系统和应用共享硬件资源，其二是把上层虚拟机的指令转换成底层Host操作系统所认识的指令，这就意味着在Linux上可以跑w...
LXC网络配置实例
码农崛起
09-07 4370
LXC为容器提供了独立的网络空间，这意味着我们可以为容器配置IP地址，MAC地址，route表等等，并通过LXC提供的几种方式连接到宿主进而连到互联网。下面介绍两种采用网桥方式连接到宿主机的配置情况。 情况一： 采用静态IP地址，即宿主本身的IP地址是由系统管理员手动配置的，容器的IP地址也是静态指定。 宿主机的配置： vim /etc/sysconfig/network-
Libvirt细粒度调整lxc cpu和内存资源
weixin_34150503的博客
04-01 371
0、引题 最近有需求，需要实现lxc的cpu、内存资源的动态伸缩。之前系统一直使用libvirt开发，于是乎发现这片博文《libvirt中CPU和内存的细粒度管理机制》（传送门：http://reedhong.blog.163.com/blog/static/180037190201162911559605/），其中讲使用libvirt细粒度调整cpu、内存资源。 ...
基于LXC的虚拟网络自动部署
zzyveryshy的博客
12-19 758
目录一、问题二、相关组件与工具三、拓扑示例四、常用指令1.lxc基本操作2.OVS基本操作3.Quagga基本操作4.Brctl基本操作五、部署流程六、客户端控制新的改变功能快捷键合理的创建标题，有助于目录的生成如何改变文本的样式插入链接与图片如何插入一段漂亮的代码片生成一个适合你的列表创建一个表格设定内容居中、居左、居右SmartyPants创建一个自定义列表如何创建一个注脚注释也是必不可少的K...
WARNING: The scripts pip, pip3 and pip3.9 are installed in '/home/lgc/.local/bin' which is not on PATH. Consider adding this directory to PATH or, if you prefer to suppress this warning, use --no-warn-script-location.
最新发布
07-07
您好！感谢您的提问。关于您的问题，您可以通过将'/home/lgc/.local/bin'目录添加到您的PATH环境变量中来解决此警告。这样做的方法会因操作系统而有所不同，下面是一些常见操作系统的解决方法： 对于Linux和macOS用户： 1. 打开终端。 2. 编辑您的bash配置文件，例如~/.bashrc或~/.bash_profile。 3. 在文件的末尾添加以下行： export PATH="$PATH:/home/lgc/.local/bin" 4. 保存文件并退出。 5. 重新启动终端或运行以下命令以使更改生效： source ~/.bashrc （如果您编辑的是~/.bashrc） source ~/.bash_profile （如果您编辑的是~/.bash_profile） 对于Windows用户： 1. 打开命令提示符或PowerShell。 2. 运行以下命令以将目录添加到PATH： setx PATH "%PATH%;C:\Users\lgc\.local\bin" （请根据实际路径进行修改） 3. 关闭命令提示符或PowerShell，并重新打开一个新的命令提示符或PowerShell窗口。 这样做后，您应该不再收到关于脚本位置的警告。希望这可以帮助到您！如果您有任何其他问题，请随时提问。
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值