名下有多台VPS服务器放在不同的云供应商那里，定期备份服务器数据成了很棘手的问题。 习惯上会使用挂载nfs方式，使用s3fs-fuse先将S3的Bucket挂载到本机分区，然后向该分区写入需要备份的文件， 但是近期S3的接入稳定性确实很差，即使是AWS的老家美国，使用s3fs-fuse挂载的分区，也不能有比较稳定的读写。 碰到大量文件和持续读写的情况，效果非常不理想 近期发现使用 AWS Storage Gateway可以直接让虚拟机连接到iscsi的target，然后操作相应的LUN和卷。iscsi协议因为使用了比HTTP/S更低的TCP/IP协议，相对s3fs方式可以更稳定。 另外 AWS Storage Gateway的传入流量是免费的，只收取存储到S3，EBS的的存储费用。 服务器版本：Ubuntu18.04 LTS 设备目标：/dev/sdc 一、安装和配置iscsi发起端程序 1.安装open-scsi和utils #安装open-scsi和utils sudo apt-get install open-iscsi open-iscsi-utils 2.发现iscsi target #发现iscsi target sudo iscsiadm -m discovery -t sendtargets -p XXX.XXX.XXX.XXX:3260 3.登陆target #登陆target sudo iscsiadm -m node –targetname iqn.1997-05.com.amazon.XXXXXX -p XXX.XXX.XXX.XXX:3260 –login 二、挂载硬盘 1.发现并分区格式化磁盘 fdisk -l 2.分区格式化LUN fdisk /dev/sdc mkfs.ext4 /dev/sdc1 …
Tag Archives: AWS
PostgreSql查询正在执行的SQL和查询执行耗时的SQL
运行在AWS RDS上的PostgreSql今天TransactionID耗尽，原因是有一个SQL执行占用CPU超过12小时 –查询正在执行的SQL select * from pg_stat_activity where datname=’schema名称’; –结束正在进行的R查询 select pg_cancel_backend(pid); –结束正在执行CUD操作 select pg_terminate_backend(pid)；
[CentOS] 使用s3fs-fuse挂载S3Bucket到本地分区
准备工作 1.创建接入S3 Bucket的IAM用户 2.创建S3 Bucket，赋予IAM用户读写S3 Bucket的权限 测试环境 Amazon AMI Linux CentOS 7.5 s3fs s3fs allows Linux and macOS to mount an S3 bucket via FUSE. s3fs preserves the native object format for files, allowing use of other tools like s3cmd. STEP1. 安装s3fs-fuse相关依赖包 # install automake fuse fuse-devel gcc-c++ git \ libcurl-devel libxml2-devel make openssl-devel STEP2.下载s3fs-fuse，编译安装s3fs-fuse …