elk docker part 2 of 3 kibana8

elk: elasticsearch+kibana+logstash 自从elk升级8.0以后,强制使用上了SSL(可以关闭),踩了不少的坑,花了不少时间折腾。 使用的版本8.0.0 共3个部分,这是第2部分,kibana8 _________________________________________________________________________________________________ 1. 安装docker 2. 安装kibana docker pull kibana:8.0.0 3. 运行kibana, 不加载目录 docker run -p5601:5601 -d –name kibana kibana:8.0.0 运行后,复制目录到宿主机 #docker cp 0000:/usr/share/kibana /mnt/md0/appdata/mydocker 0000是container_id, /mnt/md0/appdata/mydocker是本地目录,这两个地方换成自己的 完成后,停止容器 docker stop 0000 删除容器 docker rm 0000 4.运行正式的kibana docker run -p5601:5601 -v /mnt/md0/appdata/mydocker/kibana/data:/usr/share/kibana/data -v /mnt/md0/appdata/mydocker/kibana/config:/usr/share/kibana/config -e TZ=Asia/Shanghai -d –name kibana kibana:8.0.0 5.打开浏览器: IP:5601 根据要求,录入es地址, … Read more

elk docker part 1 of 3 elasticsearch8

elk: elasticsearch+kibana+logstash 自从elk升级8.0以后,强制使用上了SSL(可以关闭),踩了不少的坑,花了不少时间折腾。 使用的版本8.0.0 共3个部分,这是第1部分,elasticsearch8 1. 安装docker 2. 安装elastic docker pull elasticsearch:8.0.0 3. 运行elastic, 不加载目录 #8.0 above, require passworddocker run -p9200:9200 -p9300:9300 -e node.name=node-1 -d –name elasticsearch elasticsearch:8.0.0运行后,复制目录到宿主机 #docker cp 0000:/usr/share/elasticsearch /mnt/md0/appdata/mydocker 0000是container_id, /mnt/md0/appdata/mydocker是本地目录,这两个地方换成自己的 完成后,停止容器 docker stop 0000 删除容器 docker rm 0000 4.运行正式的elastic docker run -p9200:9200 -p9300:9300 -v /mnt/md0/appdata/mydocker/elasticsearch/config:/usr/share/elasticsearch/config -v /mnt/md0/appdata/mydocker/elasticsearch/data:/usr/share/elasticsearch/data -v /mnt/md0/appdata/mydocker/elasticsearch/logs:/usr/share/elasticsearch/logs -v /mnt/md0/appdata/mydocker/elasticsearch/plugins:/usr/share/elasticsearch/plugins … Read more

java入门工具

一、编码工具 1.IDE:Eclipse或者IDEA,熟悉尽可能多的快捷键,《Eclipse常见快捷键列表》 2.插件: (1) Findbugs,在release之前进行一次静态代码检查是必须的 (2) Clover,关心你的单元测试覆盖率 (3) Checkstyle 代码风格检查 3.构建和部署工具:ant或者maven,现在主流都是maven了吧,使用nexus搭建maven私服,再加上持续集成jenkins。代码质量不用愁。 4.版本管理工具: svn或者git 5.diff和patch 6.设置你的eclipse或者IDEA,如formatter,save actions以及code template等。代码风格,直接用google的也可以啊。《Google style guide》 7.掌握一个文本编辑器,Emacs或者VIM,熟悉常用快捷键。这在你需要在线编辑代码,或者编写其他语言代码时候特别有用。《神器圣战》 二、JDK相关 1.jstat : 观察GC情况,如: jstat -gcutil pid 2000 2.jmap,查看heap情况,如查看存活对象列表: jmap -histo:live pid |grep com.company |less 或者dump内存用来分析: jmap -dump:file=test.bin pid 3.分析dump的堆文件,可以用jhat: jhat test.bin 分析完成后可以用浏览器查看堆的情况。这个工具的分析结果还比较原始,你还可以用Eclipse MAT插件进行图形化分析,或者IBM的Heap Analyzer. 4.jvisualvm和jconsole: JVM自带的性能分析和监控工具,怎么用?请自己看文档。 5.jstack:分析线程堆栈,如 jstack pid > thread_dump 查看CPU最高的线程在干什么的方法结合top和jstack:http://www.iteye.com/topic/1114219 6.更多JVM工具,参见官方文档:http://docs.oracle.com/javase/6/docs/technotes/tools/ 7.学习使用btrace分析java运行时问题。《Btrace使用简介》 8.GC日志分析工具:GC viewer、GC-console或者自己挑吧。 9.性能分析工具,除了自带的jvisualvm外,还可以用商业的jprofiler。 10.JVM参数大全 11.《JVM调优标准参数陷阱》,iteye神贴。 … Read more

java工具集

        01、CommonsBeanUtils。   使用bean工具集:由于bean通常由一组set和get组成,beanutils也是基于它们包装的。   Beancopy是一种更常用的功能,即copybean的属性,如果开发分层架构,可以利用这一特性,将数据从PO(Persisitentobject)复制到VO(Valueobject)。   02、commonscolections。   该组件不仅可以扩展Java标准ColectionsAPI,还可以很好地包装、抽象和补充常用集合,在保证性能的同时大大简化代码。   03、CommonsCodec。   提供常用的代码解码方法,如DES、MD5、Base64、SHA1、URL和Soundx。   04、CommonsCompress。   压缩、解压文件组件,可处理rar、cpio、tar、zip、gzip、unixdump、xz、pack200和bzip2格式的压缩文件。   05、CommonsCSV。   该Java类库用于读写各种ComaSeparatedvalue(CSV)格式的文件。   06、CommonsConfiguration。   它是Java应用程序的配置管理工具,可以装载properties或xml文件的配置信息。   07、CommonsDaemon。   实施将普通Java应用程序转换为系统的后台服务。例如,Tomcat使用该项目作为服务在Linux和Windows上启动或停止。   08、CommonsDBCP。   连接数据库。   09、CommonsDigester。   这是XML到Java对象的映射工具集。   10、DBUtilsComons。   它是JDBC工具组件,二次包装数据库的传统操作类别,从而将结果集转换为列表。   11、CommonsEmail。   它是一个邮件操作组件,包装Java邮件API,提供常用的邮件发送和接收类别,以简化邮件操作。该组件依赖Java邮件API。   12、CommonsExec。   为执行exe文件或命令行等外部过程提供了一些常用的方法。   13、CommonsFileUpload。   提供Web应用程序或Servlet、Struts2和SpringMVC的文件上传功能。   14、CommonsIO。   这是一个用于处理IO的工具箱,扩展到http://Java.io,提供更方便的IO操作。   15、CommonsJCI。   为Java编译器提供通用接口。   16、CommonsLang3.   该工具类包处理Java基本对象方法,提供字符、数组等基本对象的操作,弥补了Java.langapi基本处理方法的不足。   17、CommonsLoging。   在考虑轻量级的同时,提供统一的日志接口,不依赖具体实现。类包为中间件/日志工具开发人员提供了简单抽象的日志操作,使程序开发人员能够使用不同的日志实现工具。   18、commonsLauncher。   Java应用程序在平台上独立启动。   19、commonsMath。   轻量级自容器类用于数学和统计计算,包括大多数常用的数值算法。   20、CommonsNet。   支持FTP、NNTP、SMTP、POP3、Telnet等协议。   21、CommonsPrimitives。   为Java的基本类型提供了更小、更快、更容易使用的支持。   22、CommonsPol。   它为实现对象池提供了一套框架,并提供了几种不同的对象池,可以有效地减少处理对象池的工作量。class包用于提高大对象的调用效率,如文件句柄、数据库连接、socket通信等。简单地说,该技术可以一次创建多个对象。   23、Commonsvalidator。   定义校验器(校验方法)和校验规则在XML文件中提供了一个简单而可扩展的框架。允许国际检查规则和错误信息。   24、ApachehttpClient。   ApacheCommons的一个子项目后来独立了。HTTPClient简化了HTTP客户端和服务器端的各种通信,使HTTP客户端程序(即浏览器程序)成为可能。   25、Guava   谷歌实用工具库。 … Read more

max virtual memory areas vm.max_map_count [65530] is too low, increase to at least [262144]

一 安装elasticsearch时报错 二、原因分析 最大虚拟内存值设置过小,无法支持ElasticSearch的运行。 三、解决方法: 1、将 vm.max_map_count 的值改为262144,重新启动即可解决问题。 $cat /proc/sys/vm/max_map_count $sudo sysctl -w vm.max_map_count=262144 $cat /proc/sys/vm/max_map_count NAS 不知道为什么: 每次重启后,都要执行sysctl -p , 才能生效

kibana服务启动报错Unable to retrieve version information from Elasticsearch nodes

kibana服务启动报错 [ERROR][elasticsearch-service] Unable to retrieve version information from Elasticsearch nodes. security_exception: [security_exception] Reason: missing authentication credentials for REST request [/_nodes?filter_path=nodes.*.version%2Cnodes.*.http.publish_address%2Cnodes.*.ip] 原因:yml文件中没有配置kibana的用户名和密码 但是8.0版本中,elasticsearch.yml 中 xpack.security.enabled 默认值为true,第一次启动会自动生成 elastic 用户的密码,而没有其他 build-in 的密码。 直接执行 ./bin/elasticsearch-setup-passwords 则会报错。 解决方案如下: 1、修改配置文件config/elasticsearch.yml,xpack.security.enabled 改为 false 2、重启elasticsearch服务 3、执行命令,删除密码相关索引 curl -XDELETE 127.0.0.1:9200/.security-7 执行成功会出现如下打印: {“acknowledged”:true} 4、修改配置文件config/elasticsearch.yml,xpack.security.enabled 改为 true 5、重启elasticsearch服务 6、执行命令,设置全部 build-in 的密码(执行时发现此脚本已经标注为 deprecated,后续可能会删除,目前仍可使用) ./bin/elasticsearch-setup-passwords interactive 7、修改配置文件config/kibana.yml elasticsearch.username: “kibana” … Read more

es中文分词拼音

源码下载 https://github.com/medcl/elasticsearch-analysis-pinyin https://github.com/medcl/elasticsearch-analysis-ik release下载(源码页面,点击releases) https://github.com/medcl/elasticsearch-analysis-pinyin/releases https://github.com/medcl/elasticsearch-analysis-ik/releases

树莓派连接wifi失败

#wpa_supplicant.conf 内容如下: # ssid指定wifi名称,psk指定wifi密码 # 系统启动后,会把这些配置信息写入/etc/wpa_supplicant/wpa_supplicant.conf中 # priority是优先级,数字越大越优先连接 country=CN ctrl_interface=DIR=/var/run/wpa_supplicant GROUP=netdev update_config=1 network={ ssid=”wifiname” psk=”wifipassword” } #如果连不上,可能是USB3的接口,影响了wifi的使用

mongo重置密码

1.通过 ps -ef|grep mongod 找到mongodb的配置文件mongodb.conf 一般在 /etc/mongodb.conf 找到auth= true 改成 auth= false (=后面有一个空格) 2.运行mongo mongo 3.查看并删除所有的用户 use admin db.system.users.find() db.system.users.remove({}) 实际操作结果如下,成功删除掉所有用户 db.createUser({user:‘root‘,pwd:’123456‘,roles:[{“role”:“root”,“db”:“admin”}]}); 6、将配置文件的验证还原,重启mongod就可以了 systemctl restart mongod mongo admin -u root -p root