安装前的基本环境检查和准备，我这里的服务器系统是CentOSrelease6.8(Final)，准备安装Kafka版本：2.0.0，因为kafka需要运行java环境，看了一下我服务器上已经装过了jdk,如果没有安装JDK，直接使用yum安装即可。如下： [root@123download]#java-version javaversion"1.8.0_171" Java(TM)SERuntimeEnvironment(build1.8.0_171-b11) JavaHotSpot(TM)64-BitServerVM(build25.171-b11,mixedmode) Youhavenewmailin/var/spool/mail/root #如果没装过，搜索一下jdk的yum源 [root@123download]#yums...[>>…]

偶尔碰到一个需求，我需要使用awk打印数据，但是只需要打印某列之后的其它列，比如我只要第2列及之后的所有数据，如何实现呢？实际很简单： #将$1置成空，然后打印即可 awk'{$1="";print}'filepath awk'{$1="";print$0}'filepath     这个能成功按我们的想法执行，说明awk命令中$0并不是在拿到原始数据之后进行行处理时的一行内容，而是最后将各$列相互拼接在一起的$0。而在此之前我一直在脑海里认为$0是awk一开始进行行处理时的原始整行内容，并且不会变化。所以这个命令的执行说明我原来的想法...[>>…]

    本站里某天的User-Agent数据如下列表，占用量最大的就是前四项，后面的各项数量都很少可忽略，因网站的程序统计访问用户数和百度统计相差很大，于是我统计了一下nginx日志中User-Agent数据，其中有一项值为“-”，即获取不到用户的User-Agent数据，量也不小排第二，之前未对这个进行处理，于是我从程序里将其也判断为搜索引擎，但是即使进行了这样的操作，发现统计数据和百度统计的数据相比仍然相去甚远，如果从两者统计结果来看，排第一的这个User-Agent数据：Mozilla/5.0(Linux;Android6.0...[>>…]

    今天在写一个shell脚本的时候需要发送html格式邮件最佳，在linux命令下使用mail命令可以轻松实现发送html格式邮件，只在邮件头部指定内容格式即可，格式如下： [online@USERngx]$mail-s"$(echo-e"主题nContent-Type:text/html;charset=utf-8")"收件人<内容来源 [online@USERngx]$echo内容mail-s"$(echo-e"主题nContent-Type:text/html;charset=utf-8")"收件人   看上面的代码，真的很精巧，以前使用echo的时候还总觉得echo-e没什么用处，但这个地方精巧地使用echo-e，使得subje...[>>…]

    以前有时间的时候就会去把服务器上的日志进行统计一下，以分析出请求的数据，特别是当前产品的APP用户活跃数，因为有多台服务器，有时在执行的时候还需要等待，特别是亿级的日志同步的时候比较慢，在执行的时候也是，所以今天把这些东西整合到了一起做成了一个shell,定时早上执行，整个定时任务相关的东西如下： #定时任务启动的地方 [online@USERwww]$sudocat/var/spool/cron/rsync 157***/bin/bash/home/rsync/logsys.sh [online@USERwww]$sudols-l/home/rsync/ -rwxr-xr-x1rsyncrsync1860...[>>…]

  小问题，在此记录一下，有时在shell下执行命令重定向到文件时提示无权限-bash:temp_20181015.log:Permissiondenied，而且加sudo执行依提示无权限，示例如下： [online@USERngx]$sudohead-n100000access_20181015.log>>temp_20181015.log -bash:temp_20181015.log:Permissiondenied [online@USERngx]$touchtemp_20181015.log [online@USERngx]$sudohead-n100000access_20181015.log>>temp_20181015.log -bash:temp_20181015.log:Permissiondenied [online@USERngx]$lltemp_20181015.log -rw-r...[>>…]

    开发中有些业务可能需要要取地图位置上的经纬度数据，结合我使用过的场景，大概常用的有以下三种方式吧。1，如果只是拿到手头上用可以使用百度地图工具网页：http://api.map.baidu.com/lbsapi/getpoint/index.html点击提取经纬度数据，非常方便好用。2，如果是要嵌入到自己的网页中在页面中点击获取地图数据，可以参考百度地图的开发文档：鼠标点击拾取坐标 http://lbsyun.baidu.com/jsdemo.htm#f0_3非常简单易用。如链接页面中的示例，代码也很简单,就不复制过来了。3，自己在程序里面...[>>…]

    今天在服务器间使用rsync同步的时候，一开始还尝试使用另外一个用户进行rsync通信，后来才发现服务器在初始化的时候已经为我们打通好了rsync通道，只要使用rsync用户即可。于是这个工作就简单了许多，直接写定时任务和脚本即可。但因为定时任务只能实现最短1分钟进行一次操作，所以在脚本中进行了循环处理，从而让服务器间同步在秒级里完成。定时任务写在：sudovim/var/spool/cron/rsync文件中. [test@kermitvhosts]$sudocat/var/spool/cron/rsync */1****/bin/bash/home/rsync/rsync.sh>...[>>…]

下面是一段nginx配置，之前只是判断如果$host是否等于www.04007.cn，后来我加上一个匹配04007，保存配置文件后检查发现报错：nginx:[emerg]invalidcondition #配置文件修改 if($host~/04007/&&$host!='www.04007.cn'){ rewrite^/(.*)$http://www.04007.cn/$1permanent; } [root@04007vhosts]#nginx-t nginx:[emerg]invalidcondition"$host"in/usr/local/nginx/conf/vhosts/04007.conf:6 nginx:configurationfile/usr/local/nginx/conf/nginx.conftestfailed     于是我带着程序语言的逻...[>>…]

    在之前一篇文章 https://www.04007.cn/article/539.html探讨了邮件发送里MUA与MTA之间的联系，通过mail或者mailx命令调用MTA（postfix,exim甚至sendmail等）执行发送都是可行的方案，但在执行的时候会发现一个情况，那就是发出去的邮件，在收件箱里显示的发件人都是服务器的用户名@主机名,并且使用postfix和exim时这个还不一样。这是postfix发送时的发件人信息：发件人：root<root@iZ2eretjiwZ.localdomain>这是exim发送时的信息，这个未带后面的.localdomain发件人：root<@iZ...[>>…]

    mail发送邮件应该是一个常用的东西，但是从简单的东西切入，也许你会有更多的收获。今天再看了看mail发邮件的东西，真的一个很小的知识点但要弄透不下功夫真的是不行的。先了解下面两个东西：邮件用户代理（MUA，MailUserAgent）邮件传送代理（MTA，MailTransportAgent）    还有一个MDA（邮件分发代理MailDeliverAgent）但一般我们接触不到吧，接触较多的都是MUA和MTA。所以MDA就不列在上面了。通俗的说MUA就是用户使用的客户端，而MTA则是真正发送邮件的发送进程，MUA...[>>…]

配置文件：/etc/ssh/sshd_config sshd(8)默认从/etc/ssh/sshd_config文件(或通过-f命令行选项指定的文件)读取配置信息。 配置文件是由"指令值"对组成的，每行一个。空行和以'#'开头的行都将被忽略。 如果值中含有空白符或者其他特殊符号，那么可以通过在两边加上双引号(")进行界定。 [注意]值是大小写敏感的，但指令是大小写无关的。 当前所有可以使用的配置指令如下： AcceptEnv     指定客户端发送的哪些环境变量将会被传递到会话环境中。[注意]只有SSH-2协议支持环境变量的传递。   ...[>>…]