前言 当我在测试SparkStreaming的状态操作mapWithState算子时，当我们设置timeout(3s)的时候，3s过后数据还是不会过期，不对此key进行操作，等到30s左右才会清除过期的数据。 百度了很久，关于timeout的资料很少，更没有解决这个问题的文章，所以说，百度 ...

1 微服务面临的问题？ 微服务间如何通信 　　 　从通讯协议角度考虑 REST API RPC（dubbo, thrift, grpc）: 微服务之间通讯很常用，是最常用的微服务之间通信协议。 　　　 I/O: IO/ NIO（非阻塞IO）/长连接/短连接 ...

如有疑问请联系微信：onesoft007　 　 在计算机中，浮点数往往很难精确表示，那么浮点数运算结果也往往难以精确表示。MySQL同样也存在这个问题，并表现在如下几个方面。 问题 1、相同的输入，可能造成不一样的输出（受CPU、编译器等影响）　 　　a）下面是MySQL官方网站给出 ...

一、小文件概述　　 　　小文件通常指文件大小要比HDFS块大小还要小很多的文件（在hadoop1.x版本的时候可以通过dfs.blocksize来设置，默认块大小为64M；在hadoop2.x版本的时候，则需要通过dfs.block.size设置，且默认大小为128M） 　　如果存在大量小文件 ...

　　Redis的Pub/Sub机制使用非常简单的方式实现了观察者模式，但是在使用过程中我们发现，它仅仅是实现了发布订阅机制，但是很多的场景没有考虑到。例如一下的几种场景： 　　1.数据可靠性无法保证 　　一个redis_cli发送消息的时候，消息是无状态的，也就是说负责发送消息 ...

本人在闲暇之余帮朋友做了个软件，是关于考古方面的。先上图， 界面效果一般般，能过的去就行了，今天我主要说的是RDLC开发过程中容易出错的地方，我这里封装了一个RDLC调用方法： ...

当使用sparkstreaming处理流式数据的时候，它的数据源搭档大部分都是Kafka，尤其是在互联网公司颇为常见。 当他们集成的时候我们需要重点考虑就是如果程序发生故障，或者升级重启，或者集群宕机，它究竟能否做到数据不丢不重呢？ 也就是通常我们所说的高可靠和稳定性，通常框架里面都带有不同层次 ...

redis缓存1.缓存穿透 1>.什么是缓存穿透？ 业务系统需要查训的数据根本不存在，当业务系统查询时， 首先会在缓存中查训，由于缓存中不存在，然后在往数据 库中查，由于该数据在数据库中也不存在，数据库返回为空。 综上所述：业务系统访问数据库中不存在的数据陈伟缓存穿透。 2> ...