Category: 常用工具与命令
-
定时全量备份 mysql 数据库并压缩
当需要全量冷备份数据库的时候,我们一般手动使用图新界面工具如:navicat,或者手动执行mysqldump备份命令,虽然这样也可以但是没有自动周期化执行,要是忘记了备份的时候突然数据库出问题恢复数据可能就不够及时和完整。我们可以利用 linux 系统自带的定时任务工具cron定时调用mysqldump命令备份数据库sql 脚本,再利用 shell 脚本调用7zip( 7zip 是压缩率最高的,测试可以压缩到十分之一大小)把 sql 脚本文件压缩成压缩包并设置一个字符串作为压缩文件的密码,然后还可以定时清理以前的老压缩文件节省空间。 说明:所有操作是在Centos系统下运行的,其它 linux 发行版可能有命令的略微差别。 1.首先需要安装 7zip 安装完成后的 7zip 程序的命令是:7za, 可以使用:7za -version查看7zip的版本。 2.编写shell脚本:mysqlBkTask.sh 保存在用户abc的用户根目录下:/home/abc/mysqlBkTask.sh。 说明:需要注意我这里mysql数据本地 root 账号访问没有密码, mydatabase为需要备份的数据库名,如果要备份所有数据库把数据库名的地方改成参数:–all-databases 3.使用系统定时任务cron来定时执行我们的备份shell脚本: 前面的 mysqlBkTask.sh文件是我们需要定时执行的脚本,假如我们需要每天凌晨 4 点 15 分执行备份任务。输入crontab -e打开编辑定时任务,我们增加以下内容: 然后按住ctrl+c后输入:wq 保存并退出。 也可以再输入: crontab -l查看任务列表,需要查看定时任务执行日志可以输入:tail -f /var/log/cron
-
Windows Server配置openSsh
对于经常用惯linux做为线上项目运行环境的人来说,突然给弄一个windows生产环境会觉得一下以前做的可持续交付没办法用了,这个时候可以使用windows上安装openssh来实现使用ssh管理windows服务器。 windows服务器安装openssh微软官方介绍文章: https://learn.microsoft.com/zh-cn/windows-server/administration/openssh/openssh_install_firstuse 但是微软官方的文章我测试在windows server2019上有问题,我才用直接安装openssh安装的方式。 1首先去github下载openssh安装包 https://github.com/PowerShell/Win32-OpenSSH/releases 这里我们选择自己对应操作系统的32位或者64位安装包 2解压安装 解压后如下: 在目录下运行: 出现如下界面安装成功: 3启动服务 成功如图所示
-
Fedora 自带虚拟机Boxes(盒子)安装Ubuntu磁盘扩容失败的解决方法
扩容到200G,但是系统中使用df -h查看还是只有扩容前的150G 这个时候需要使用如下命令安装一个磁盘工具:gparted 然后使用root权限打开它 这个时候如果直接调整大小会出报错:cannot resize read-only file system 这个时候需要在要调整的分区右键选择信息菜单,然后在状态一列可以看到:挂载于 /, /var/snap/firefox/common/host-hunspell。 需要执行一下三个命令,重新挂载读写权限: 然后再去需要调整大小的分区右键菜单选择调整大小/移动菜单,拖动顶部的进度条到底,最后点调整大小按钮保存操作,最后一步点顶部菜单的绿色带勾按钮应用全部操作。
-
Linux使用Samba配置NAS服务器
当你的电脑磁盘空间不足时,除了物理扩容增加硬盘外,其实还可以挂载网络存储。一般常用的个人存储服务可能大家听的比较多的是群晖,其实如果你有linux服务器自己搭建一个NAS服务器也是可以的,下面将介绍如何使用linux服务器搭建一个个人NAS服务。 这里先说明几个会影响到你网盘访问速度的问题: 1.磁盘读写速度: 你的服务器磁盘如果是Sata接口的,受限于sata3.0的最高理论速度6Gb/s的传输速度,你的磁盘读写速度最快不超过6000 000 000 /8bit /1024 /1024 约等于714MB/s。 一般7200转的机械硬盘其实读写速度也就90-190MB/s, 如果你的磁盘是ssd(固态硬盘)使用的是sata接口也不会超过接口的理论值,一般的ssd也大概在500MB/s左右。 如果你的服务器是支持NVMe M.2接口的,那么你的固态硬盘读写速度最快将达到3500MB/S。 M.2接口从物理形态上,常见的是B key 和M key这两种形态。 2.网速的问题: 这里我们区分一下外网和内网来分析,内网就是你路由器到你家里所有设备组成的一个网络,路由器不进行拨号上网(大部分人是在光猫中拨号上网的)你就是一个纯内网环境,在不连接到外网的时候你输入服务器的内网ip(例如:192.168.0.33)也是可以访问nas服务的。外网就是你路由器拨号后连接到广域网,但是虽然你连接到了广域网你仍然无法在内网以外的环境访问它,因为你没有一个公网访问ip。这里我们如果有需要外网访问的需求话就需要联系运营商申请公网访问,或者使用内网穿透软件,例如花生壳、或者在公网服务器使用frp服务来做内网穿透。 内网速度:受限于您的家庭网络预埋网线的等级:五类线(CAT5)100Mbps、超五类线(CAT5e)1000Mbps、六类线(CAT6)1000Mbps/10Gbps、超六类线(CAT6A)10Gbps、七类线(CAT7)10Gbps。当然如果您使用的光纤传输就不用考虑线材对网速的影响,一般都是可以直接上10Gps(也就是万兆)的。也受限于您的路由器的速度,如果您的路由器下面有交换机也受限于交换机的速度,一般有百兆路由器/交换机、千兆路由器/交换机、万兆路由器/交换机。 外网速度: 首先于运营商的上行速度,一般家庭百兆或者千兆带宽来说基本都在3MB/s(30Mpbs)左右。如果要更大的外网上行带宽,就得向运营商申请专线IP,可能一个10MB/s上下行对等专线IP(也是固定IP)大概在RMB3000元一个月,具体资费要咨询当地运营商。 然后就是你外网的访问方式,如果是公网IP(不是固定IP)大概就是在3MB/s左右上行,如果是专线IP(固定IP)大概就是10MB/s。如果是使用第三方服务搭建的内网穿透,那就还要受限于第三方转发服务器的带宽。 网卡的问题: 如果您使用的有线上网,那么现在板载的基本都是千兆网口了,只要您选择六类网线基本都可以达到稳定千兆网速。如果要追求更高速度您可以增加扩展网卡,扩展网卡分光口(sfp)网卡和电口(Rj45)网卡。 如果您使用的无线上网(wifi),那么尽量使用wifi6速度可以达到1000Mbps。 总结一下:就是如果你想最快的NAS内网访问速度,那就是直接上万兆交换机/千兆路由器,然后网线如果是光纤就选择光口(sfp)接口的交换机,如果是电口(也就是我们普通的8芯网线)就选择RJ45接口的交换机/路由器。如果是光口的话是最理想的,因为不用担心自己网线达不到品级也影响速度。 进入正题,开始配置samba服务 环境说明: 服务器:CentOs 7.9 1安装samba 2.创建共享目录: 3.修改配置文件: 配置文件说明: 4.增加访问用户: 配置一个用户:zhangsan来访问 注意:如果添加账号失败,可以先添加一个系统账户然后再执行上面的命令 5.重启服务 使用下面命令来重启服务,使上面的配置生效 6.其它相关命令 检查samba服务运行状态 启动/停止smbd服务 各操作系统加载网盘 windows在文件管理器中顶部菜单中选择:映射网络驱动器,在弹出的窗口中文件夹中输入您的IP/域名地址,然后会提示您输入账号密码,验证成功后就会出现文章开头的网络位置中的网盘了。 mac电脑打开访达,在顶部菜单中选择:前往->连接服务器,在地址栏中输入例如:smb://192.168.0.189然后点连接就可以打开网盘了。
-
大日志文件的切割查看法
我们经常会遇到一些很大的文本文件(例如tomcat的日志文件 catalina.out),这个时候使用文本查看工具查看的时候经常会卡很久没有响应,或者文本查看工具直接崩溃,这个时候我们就需要对文件进行切割。下面给大家演示如何对文件进行切割查,以及中间需要用到的相关工具命令: 1.需要用到的相关命令(仅适用于mac、linux类系统): wc 用来显示文件的字数、行数。 命令使用参考链接:菜鸟教程-WC命令 split 用来切分文件。命令使用参考链接:菜鸟教程-Split命令 2.查看文件行数和切割文件 查看行数和字节数: 这里我这个:catalina.out文件是约19G大小,我们有两种切割方式:1按行数切割。2按文件大小切割。 按行数切割: 此文件有19G,我们至少要分隔成20个文件,即每个文件1G大小,这样单独查看每个文件的时候文本查看工具才能内存充足的查看而不崩溃。那么算法就是:34342820 / 20 = 1717141 行 按文件大小切割: 此文件有19G,我们至少要分隔成20个文件,即每个文件1G大小,这样单独查看每个文件的时候文本查看工具才能内存充足的查看而不崩溃。那么算法就是:19G / 20 大约每个文件1G左右(不够1G没关系) 完