描述
众所周知，企业现在对数据的实时性的要求是越来越高，但是实时性越高同样带来的技术和资源也会成指数级增长，所以在和企业客户沟通的时候，应该本着一个原则：挖掘客户真正想要的实时数据，而不是可有可无的数据，可以从资源的角度去说服客户。
目前国内现状：
除非自己有很强的自研团队，如阿里、腾讯这些大厂，其 ...
2019-11-05 10:55 2789℃ 0评论
2 喜欢
问题描述
spark脚本提交之后，遇到异常，重要堆栈如下：
Caused by: java.io.FileNotFoundException: File does not exist: hdfs://bigdata5:8020/apps/spark/warehouse/ds1152_sys_orde ...
2019-11-05 10:48 4996℃ 0评论
3 喜欢
导出Excel失败
可能导致原因
数据量太大导致的浏览器卡死。
数据量太大导致的魔镜内存溢出。
后台查询较慢，导致等待时间比较长，长时间无响应。
后台查询报错，导致前端无响应。
排查步骤
编辑该图表到分析台，看看是否能出数据，如果不能出数据，则可能有相关异常再进一步分析。
编辑到分析台如 ...
2019-11-05 10:33 2506℃ 0评论
0 喜欢
docker pull kylemanna/openvpn
OVPN_DATA="/root/ovpn-data”
IP=“123.123.123.123"
mkdir ${OVPN_DATA}
docker run -v ${OVPN_DATA}:/etc/openvpn ...
2019-10-19 12:07 2379℃ 0评论
1 喜欢
brew install openvpn
brew list openvpn找到vpn安装地址，然后创建软连接：ln -s /usr/local/Cellar/openvpn/2.4.4/sbin/openvpn /usr/local/bin/openvpn
将client.ovpn拷贝到/etc ...
2019-10-19 12:06 4886℃ 0评论
6 喜欢
docker默认存储地址修改
vim daemon.json,增加如下内容
{
"graph": "/data01/dockerdata",
"storage-driver": "devicemapper& ...
2019-10-19 12:04 1127℃ 0评论
3 喜欢
这两天遇到几个多线程的问题，多方找资料测试，现记录下测试结果，供自己以后查询用
问题描述：
项目最近在考虑Rest化，第一个问题就是session管理，现考虑使用redis存储session，并对不需要创建session的接口调用中，使用threadLocal存储用户信息，在请求开始时，将用户信息存 ...
2019-10-19 11:53 1206℃ 0评论
1 喜欢
以前做压测的时候，遇到过CPU过高的情况，但是没有总结，今天又遇到这种情况，导致到处找资料，虽然知道思路，但是很多命令都要重新找度娘或谷歌。所以这次总结下：
现象：项目突然宕机，连到服务器上发现CPU 接近800%(8核)。
步骤1：首先top命令查看CPU占用最高的进程，发现是java进程（326 ...
2019-10-19 11:50 1175℃ 0评论
1 喜欢
问题描述
最近kafka总是报flush异常，异常大概如下，用户反馈最近两周总是有数据丢失情况，每次都需要手工进行重新同步全量数据。
Caused by: java.io.FileNotFoundException: File does not exist: /guoyundata1/kafka/d ...
2019-10-17 17:36 2410℃ 0评论
2 喜欢
问题描述
南京**银行项目，客户需要将现在星环计算好的结果数据通过魔镜进行展现，现在需要做POC测试，往来了N次都没有搞定。
第一次，对方客户给的centos7.2系统，ambari2.7部署失败，缺各种依赖包。
第二次，云鹏在河南机电做好了一个操作系统镜像，然后成功部署ambari2.2版本。
...
2019-10-17 17:33 1916℃ 0评论
1 喜欢
