logback统一扩展打印自定义属性字段的方式

作者:yihaomen 日期:2019-09-16

记录下采用logback统一扩展打印自定义属性字段的方式, 通常打印日志，自己可以采用拼字符串的方式，或者String.format等格式化字符串方式。但其实logback还提供了一种比较好玩的方式MDC. 特使是针对那些格式比较统一的日志，在WEB中用一个拦截器就可以实现.

分类:Java | 固定链接 | 评论: 0 | 引用: 0 | 查看次数: 13

django-uuslug汉字转拼音出现的小问题,可能是BUG.

作者:yihaomen 日期:2019-09-03

在用python/Django开发网站的过程中，很多人为了更友好的SEO, 会采用将汉字转换成拼音的方式放在url里面，这样对搜索引擎比较友好。我今天也尝试了这么一个第三方库 django-uuslug, 不过我一测试就出问题了。好像是老外不懂中文，做出来的一个bug.

Tags: django-uuslug django-uuslug

分类:Python/Django | 固定链接 | 评论: 0 | 引用: 0 | 查看次数: 20

记录自己常用在kibana中用的DSL查询语句，以后方便参考

作者:yihaomen 日期:2019-08-29

在查询elasticsearch中的数据的时候，经常用kibana中的DEV工具来查询，一般来说，这个工具会缓存你用过的dsl语句，但有时候不小心清理了浏览器缓存或者在另外一台机登录kibana，这些DSL就没有了，所以干脆记录在这里，也方便以后参考，特别是用 elasticsearch low level api的时候，就更有用了，因为就是原生的dsl查询语句。

分类:Java | 固定链接 | 评论: 0 | 引用: 0 | 查看次数: 44

Agile Data Science 2.0书中代码.

作者:yihaomen 日期:2019-08-27

Agile Data Science 2.0书中代码. pyspark+elasticsearch.

分类:Python/Django | 固定链接 | 评论: 0 | 引用: 0 | 查看次数: 49

Linux下top+pstack+gdb的组合拳定位程序进程线程问题并调试

作者:yihaomen 日期:2019-08-22

在Linux 下如果发现程序运行异常，比如CPU, 内存占用很高，可以采用linux下自带的一些命令，帮助我们找到问题所在。

Tags: pstack pstack gdb gdb

分类:linux/unix | 固定链接 | 评论: 0 | 引用: 0 | 查看次数: 41

elasticsearch high level rest api分页查询数据

作者:yihaomen 日期:2019-08-20

Transport方式查询数据，在今后的elasticsearch中将不在维护，官方推荐用用 high level rest api或者lower level api去操作elasticsearch中的数据。在elasticsearch的增删改查操作中，其实最复杂的也就是分页查询了，根据elasticsearch官方资料，做个简单的笔记.

Tags: elasticsearch elasticsearch

分类:Java | 固定链接 | 评论: 0 | 引用: 0 | 查看次数: 112

Centos7 下测试mosquitto性能

作者:yihaomen 日期:2019-08-08

测试mosquitto性能
首先需要安装如下模块

程序代码

yum install libncurses5-dev m4 fop freeglut3-dev libwxgtk2.8-dev g++ libssl-dev xsltproc build-essential tk8.5 unixodbc unixodbc-dev libxml2-utils

Tags: erlang erlang emqtt emqtt

分类:Java | 固定链接 | 评论: 0 | 引用: 0 | 查看次数: 107

python识别图片中是否包含水印(opencv)

作者:yihaomen 日期:2019-08-07

最近在写爬虫，但爬下来的很多图片被加了水印，而且水印的位置不是固定的。本来不是搞图形图像处理的我，只好google了一把，看到很多用opencv来解决类似问题。这里记录一下水印识别的代码.

Tags: opencv opencv

分类:Python/Django | 固定链接 | 评论: 0 | 引用: 0 | 查看次数: 98

编译安装psutil报错test_posix.py', 61, 29, "fmt_map...

作者:yihaomen 日期:2019-07-31

前面用pip install psutil 安装过psutil, 安装之后是可以成功运行的。但有些机器没有网络，只能把psutil安装包下载下来，然后自己去编译安装，当然前提GCC是少不了的，还有一些需要的其他包，在这边文章里也有提到

Tags: psutil psutil

分类:Python/Django | 固定链接 | 评论: 0 | 引用: 0 | 查看次数: 30

springboot2.x使用interceptor之后静态资源文件加载问题

作者:yihaomen 日期:2019-07-31

在使用spring boot 2.x 的过程中，如果使用了interceptor来做权限拦截，很有可能你会发现原来能正常请求的资源文件css,js,images等都不能用了。如果没有加这个拦截器之前，所有的都是好的。一般在开发过程中，很多人估计都是先开发功能，最后再加权限拦截（当然如果采用第三方权限框架比如shiro等，不存在这问题）, 尝试过修改application.properties增加静态资源文件地址，结果没用。最后还是在代码里面配置才生效.

Tags: springboot springboot

分类:Java | 固定链接 | 评论: 0 | 引用: 0 | 查看次数: 63

centos下安装pip, psutil容易踩的坑.

作者:yihaomen 日期:2019-07-17

安装PIP, 直接用yum install pip 估计多半不会成功。
[root@wfm ~]# yum -y install pip
Loaded plugins: fastestmirror, refresh-packagekit, security
Loading mirror speeds from cached hostfile
* base: mirrors.tuna.tsinghua.edu.cn

分类:Python/Django | 固定链接 | 评论: 0 | 引用: 0 | 查看次数: 68