之前也有相关的文章有过记录，最近有过几次增加新桶然后对桶添加访问权限控制的操作，进行了一些整理，作个记录。1.列出所有的桶并添加对应的bucket桶mclslocal #列出所有桶mcmblocal/test-bucket #添加对应桶mclslocal #查看添加后的桶是否在列表中2.修改已有的策略文件，将新加的桶名加入cd/root/.mcvimtest.json#修改Resource中添加对应的bucket#"arn:aws:s3:::test-bucket/*",3.更新原已有的策略mcadminpolicyaddlocaltesttest.json4.对新加的桶设置永久下载权限mcpolicy...[>>…]

    之前和篇文章介绍ClickHouse的可视化工具Tabix的安装和使用http://www.04007.cn/article/1058.html，Tabix是安装在服务器上的工具，访问时使用浏览器访问Tabix工具界面，今天要介绍的另一个可视化工具是一款客户端工具DBeaver。不需要在服务器上安装其它东西，直接本地启动DBeaver软件之后填写服务器的信息就可以直接查看ClickHouse的数据。简言之，DBeaver就相当于Navicat软件，而Tabix则相当于Phpmyadmin。官网下载地址：https://dbeaver.io https://dbeaver.io/download/  ...[>>…]

    Clickhouse官方暂时没有图形化界面操作，只支持命令行下操作很不方便，不过官网提到了几个第三方的图形化界面，包括Tabix。官网：https://tabix.io/Tabix是一个第三方的开源Clickhouse图形化界面，免费而且是基于浏览器访问。注，ClickHouse需要使用的端口包括用于HTTP通信的8123端口和用于主机间通信的9000端口。第一步：先安装Tabix下载启动镜像dockerpullspoonest/clickhouse-tabix-web-clientdockerrun-d-p80:80-nametabixspoonest/clickhouse-tabix-web-client第二步：放开ClicHouse远...[>>…]

    ClickHouse批量执行sql语句及超长语句：#命令行创建数据库clickhouse-client--query"CREATEDATABASEIFNOTEXISTStutorial"#也可以登录之后执行执行CREATEDATABASEIFNOTEXISTStutorial    把创建表的语句写到一个文件中，从https://clickhouse.tech/docs/zh/getting-started/tutorial/复制到vim文件时，添加setpaste可以避免格式混乱。例如写入到了文件create_table_sql.sql中。然后可以通过--queries-file执行越长SQL语句。#执行创建表的语句clickhouse-client--userdefa...[>>…]

    ClickHouse是什么？ClickHouse是一个用于联机分析(OLAP)的列式数据库管理系统(DBMS)。由Yandex公司从一个自身开发的专门用于聚合数据的系统Metrage发展而来。clickHouse以卓越的查询性能著称，目前在大数据的存储和分析领域有广泛应用。ClickHouse不单是一个数据库，它是一个数据库管理系统。因为它允许在运行时创建表和数据库、加载数据和运行查询，而无需重新配置或重启服务。列式数据库是以列相关存储架构进行数据存储的数据库，主要适合于批量数据处理和即时查询。列式数据库把一列中的...[>>…]

MinIO中Bucket被视为挂载目录，而不是磁盘目录。MinIO的迁移不能直接拷贝磁盘原始文件来实现，需要使用mc工具连接到两个MinIO实体，使用命令来完成操作。1.部署好mc工具好，用相同的命令添加要迁移的源地址和目标地址。mcconfighostadd$hostName$Address"$accessKey""$accessSecret"部署好mc后可以通过mclsminio实体来获取各个minio里的Bucket列表信息，来检测minio连通是否正常。mclsminio实体使用du命令获取minio里的数据大小，minio看已经有存储内容时会在最后一行显示当前minio文件总大小。mcduminio实体2.minio...[>>…]

    因Gitlab整体数据迁移需要两边版本一致，如果版本不同，会在数据导入的时候报错版本不匹配：Unpackingbackup...doneGitLabversionmismatch:YourcurrentGitLabversion(13.12.8)differsfromtheGitLabversioninthebackup!Pleaseswitchtothefollowingversionandtryagain:version:13.3.5-ee    所以准备卸载之前安装的gitlab，并更换成另一个版本。停止服务并卸载过程： gitlab-ctlstop gitlab-ctluninstall dpkg-rgitlab-ce ps-efgrepgitlab     安装当...[>>…]

    首先安装一些基础服务，openssh-server让远程主机可以通过网络访问sshd服务，开始一个安全shell，ca-certificates维护SSL证书的。postfix是GPL协议之下的MTA（邮件传输代理）软件。postfix是WietseVenema想要为使用最广泛的sendmail提供替代品的一个尝试。在安装postfix，选择InternetSite确定即可。 #安装一些基础服务 apt-getupdate apt-getinstall-ycurlopenssh-serverca-certificatespostfix #接着下载gpg信任GitLab的公钥 curlhttps://packages.gitlab.com/gpg.key2>/dev/nullapt-k...[>>…]

    1.在安装gitlab进行gitlab-ctlreconfigure的时候，碰到问题bash[migrategitlab-railsdatabase](gitlab::database_migrationsline55)hadanerror:Mixlib::ShellOut::ShellCommandFailed:Expectedprocesstoexitwith[0],butreceived'1'报错database_migrations问题涉及数据库。使用gitlab-ctlstop停止gitlab服务,执行如下命令后重启gitlab即可。 chmod0755/var/opt/gitlab/postgresql systemctlrestartgitlab-runsvdir #重启gitlab gitlab-ctlreconfigure gitlab-ctlrestart    &...[>>…]

    通过浏览器进入minio的管理后台，可以直接upload文件至对象存储中，但有时会遇到PUT..filename...net::ERR_CONNECTION_RESET报错。错误的原因可能有多样，比如有可能是服务器限制了文件上传的权限，或者上传大小受到了限制。这篇文章里列了一些原因：https://www.cnblogs.com/xhliang/p/8992354.html不过我遇到的情况是公司对互联网入口作了限制，限制了put协议请求以及websocket协议等，导致Minio文件PUT协议上传报错net::ERR_CONNECTION_RESET。以及EMQ中使用websocket协议报错连续失败。...[>>…]