语音播报队列封装及结合vue使用队列

发表于 2020-02-25

为什么语音播报要加队列? 因为不加队列连续的语音会有重叠

最近做的一个项目有语音播报功能,测试的过程中发现有语音播报重叠的现象，于是就做了一个语音播报队列。队列是解决这类问题的常见方案，队列的应用在电商抢购处理超卖、抗压的场景中也经常使用！代码如下：

某房产抢车位,java版网络爬虫,抓包

发表于 2020-02-21

自动获取房产车位信息、抢车位

新房子入驻没多久又要买车位，上海的车位真是贵呀。而且车位数有限，想要喜欢的车位还要抢！车位都要抢！车位是通过微信小程序在线抢，提前一天给一次模拟的机会。看中了一个距离住的地方比较近的车位，有多个人加入了收藏。为了保险起见，程序员动手了。。。

为了减少不必要的麻烦，过程着重描述技术点，不加截图。最终如愿的抢中了喜欢的车位！

工具及软件环境

iPhone8p
MacBook Pro
Charles4.2.7
jdk1.8
IDEA
SpringBoot-下面附加maven信息
Jsoup-下面附加maven信息

前期准备

手机、电脑，Charles抓包工具；
Charles设置HTTPS协议数据包抓包配置，手机网络走电脑代理；
验证手机微信小程序数据包是否被Charles抓取成功，抓取成功；

分析抢车位页面逻辑

进入页面查看接口请求方式；
查看数据传输形式；
检查是否存在安全验证逻辑；
分析返回的数据，关联接口的请求参数获取位置<返回的数据可能有header中的cookie信息、页面中的csrf-token信息、还有其他的一些身份token>。这里建议把所有的内容都打印出来，查看是否存在有用的信息<关联业务的非公共报头信息>；

提取关键信息

关键的接口请求地址、接口请求形式、接口参数传递方式、请求头部信息；
接口请求参数的获取方式、标记id信息，分析完成后开始编码；

//全部待选信息
String all = "https://com/m/activity/CarFloorList/30897";
//我的关注
String myStart = "https://com/m/Activity/GetPartialMyFavoredHouse";
//具体车位
String detail = "https://com/m/activity/Details/";
//确认事件
String addAcivityTarget = "https://com/m1/ActivityTarget/AddPrice";

阅读全文 »

springboot 启动后 No mapping found for HTTP request with URI

发表于 2018-08-15

org.springframework.web.servlet.PageNotFound - No mapping found for HTTP request with URI [/register/sendValidateCode.html] in DispatcherServlet with name ‘dispatcherServlet’

今天使用springboot的模板技术开发后端界面，在本地环境运行没有问题。但是丢到线上启动服务之后就不停的刷警告日志，看起来特别讨厌。日志信息如下：

INFO   | jvm 1    | 2018/08/15 23:07:03 | 2018-08-15 23:07:03.191 [http-nio-8010-exec-1] INFO  org.springframework.web.servlet.DispatcherServlet - FrameworkServlet 'dispatcherServlet': initialization started
INFO   | jvm 1    | 2018/08/15 23:07:03 | 2018-08-15 23:07:03.204 [http-nio-8010-exec-1] INFO  org.springframework.web.servlet.DispatcherServlet - FrameworkServlet 'dispatcherServlet': initialization completed in 13 ms
INFO   | jvm 1    | 2018/08/15 23:07:03 | 2018-08-15 23:07:03.219 [http-nio-8010-exec-1] WARN  org.springframework.web.servlet.PageNotFound - No mapping found for HTTP request with URI [/register/sendValidateCode.html] in DispatcherServlet with name 'dispatcherServlet'
INFO   | jvm 1    | 2018/08/15 23:07:10 | 2018-08-15 23:07:10.855 [http-nio-8010-exec-2] WARN  org.springframework.web.servlet.PageNotFound - No mapping found for HTTP request with URI [/register/sendValidateCode.html] in DispatcherServlet with name 'dispatcherServlet'
INFO   | jvm 1    | 2018/08/15 23:07:12 | 2018-08-15 23:07:12.874 [http-nio-8010-exec-3] WARN  org.springframework.web.servlet.PageNotFound - No mapping found for HTTP request with URI [/register/sendValidateCode.html] in DispatcherServlet with name 'dispatcherServlet'
INFO   | jvm 1    | 2018/08/15 23:07:22 | 2018-08-15 23:07:22.719 [http-nio-8010-exec-4] WARN  org.springframework.web.servlet.PageNotFound - No mapping found for HTTP request with URI [/register/sendValidateCode.html] in DispatcherServlet with name 'dispatcherServlet'
INFO   | jvm 1    | 2018/08/15 23:07:27 | 2018-08-15 23:07:27.186 [http-nio-8010-exec-5] WARN  org.springframework.web.servlet.PageNotFound - No mapping found for HTTP request with URI [/register/sendValidateCode.html] in DispatcherServlet with name 'dispatcherServlet'
INFO   | jvm 1    | 2018/08/15 23:07:36 | 2018-08-15 23:07:36.585 [http-nio-8010-exec-6] WARN  org.springframework.web.servlet.PageNotFound - No mapping found for HTTP request with URI [/register/sendValidateCode.html] in DispatcherServlet with name 'dispatcherServlet'
INFO   | jvm 1    | 2018/08/15 23:07:41 | 2018-08-15 23:07:41.018 [http-nio-8010-exec-7] WARN  org.springframework.web.servlet.PageNotFound - No mapping found for HTTP request with URI [/register/sendValidateCode.html] in DispatcherServlet with name 'dispatcherServlet'
INFO   | jvm 1    | 2018/08/15 23:07:43 | 2018-08-15 23:07:43.003 [http-nio-8010-exec-8] WARN  org.springframework.web.servlet.PageNotFound - No mapping found for HTTP request with URI [/register/sendValidateCode.html] in DispatcherServlet with name 'dispatcherServlet'
INFO   | jvm 1    | 2018/08/15 23:07:55 | 2018-08-15 23:07:55.418 [http-nio-8010-exec-9] WARN  org.springframework.web.servlet.PageNotFound - No mapping found for HTTP request with URI [/register/sendValidateCode.html] in DispatcherServlet with name 'dispatcherServlet'
INFO   | jvm 1    | 2018/08/15 23:08:09 | 2018-08-15 23:08:09.500 [http-nio-8010-exec-10] WARN  org.springframework.web.servlet.PageNotFound - No mapping found for HTTP request with URI [/register/sendValidateCode.html] in DispatcherServlet with name 'dispatcherServlet'
INFO   | jvm 1    | 2018/08/15 23:08:13 | 2018-08-15 23:08:13.535 [http-nio-8010-exec-1] WARN  org.springframework.web.servlet.PageNotFound - No mapping found for HTTP request with URI [/register/sendValidateCode.html] in DispatcherServlet with name 'dispatcherServlet'
INFO   | jvm 1    | 2018/08/15 23:08:15 | 2018-08-15 23:08:15.590 [http-nio-8010-exec-2] WARN  org.springframework.web.servlet.PageNotFound - No mapping found for HTTP request with URI [/register/sendValidateCode.html] in DispatcherServlet with name 'dispatcherServlet'
INFO   | jvm 1    | 2018/08/15 23:08:27 | 2018-08-15 23:08:27.687 [http-nio-8010-exec-3] WARN  org.springframework.web.servlet.PageNotFound - No mapping found for HTTP request with URI [/register/sendValidateCode.html] in DispatcherServlet with name 'dispatcherServlet'
INFO   | jvm 1    | 2018/08/15 23:08:32 | 2018-08-15 23:08:32.448 [http-nio-8010-exec-4] WARN  org.springframework.web.servlet.PageNotFound - No mapping found for HTTP request with URI [/register/sendValidateCode.html] in DispatcherServlet with name 'dispatcherServlet'
INFO   | jvm 1    | 2018/08/15 23:08:37 | 2018-08-15 23:08:37.022 [http-nio-8010-exec-5] WARN  org.springframework.web.servlet.PageNotFound - No mapping found for HTTP request with URI [/register/sendValidateCode.html] in DispatcherServlet with name 'dispatcherServlet'
INFO   | jvm 1    | 2018/08/15 23:08:37 | 2018-08-15 23:08:37.699 [http-nio-8010-exec-6] WARN  org.springframework.web.servlet.PageNotFound - No mapping found for HTTP request with URI [/register/sendValidateCode.html] in DispatcherServlet with name 'dispatcherServlet'
INFO   | jvm 1    | 2018/08/15 23:08:39 | 2018-08-15 23:08:39.431 [http-nio-8010-exec-7] WARN  org.springframework.web.servlet.PageNotFound - No mapping found for HTTP request with URI [/register/sendValidateCode.html] in DispatcherServlet with name 'dispatcherServlet'
INFO   | jvm 1    | 2018/08/15 23:08:45 | 2018-08-15 23:08:44.999 [http-nio-8010-exec-8] WARN  org.springframework.web.servlet.PageNotFound - No mapping found for HTTP request with URI [/register/sendValidateCode.html] in DispatcherServlet with name 'dispatcherServlet'
INFO   | jvm 1    | 2018/08/15 23:08:45 | 2018-08-15 23:08:45.570 [http-nio-8010-exec-9] WARN  org.springframework.web.servlet.PageNotFound - No mapping found for HTTP request with URI [/register/sendValidateCode.html] in DispatcherServlet with name 'dispatcherServlet'

百度、谷歌各种搜还是没有找到解决自己问题的答案，最后经过不懈努力终于解决了这个问题。原因如下：

1	在配置springboot基础服务信息的时候，通常我们是继承adapter-WebMvcConfigurerAdapter. 但是我错误的继承了WebMvcConfigurationSupport.

我的这个蛋疼的问题，就是这里引起的。在这里记录下，以备后用。

基础知识梳理

发表于 2018-07-02

简单排序

冒泡排序
冒泡排序，最终排列的数据是从左到右、从小到大排列。相邻的两个元素比较、第一轮将最大的元素放到最后骂你、第二轮将次大的元素放到倒数第二个。这样右侧的数据项位置是比较固定的，代码如下(手写,未测试)

for (int i = num.length - 1; i > 0; i--){
   for (int j = 0; j < i; j++){
       if (num[j] > num[j+1]){
           int temp = num[j];
           num[j] = num[j+1];
           num[j+1] = temp;
       } 
   } 
}

阅读全文 »

java版网络爬虫webmagic爬虫，爬去国家统计局区县划分信息

发表于 2018-06-29

java版网络爬虫webmagic爬虫，爬去国家统计局区县划分信息

由于公司业务需求需要一份最新的城市区域划分信息，所以就考虑到国家统计局去获取一份最新区域信息。经过调研选用了java版本爬虫框架webmagic来处理这个需求。下面介绍下爬虫逻辑以及代码

web magic官方地址：

1	http://webmagic.io/

阅读全文 »

从无到有构建vue后台管理页面

发表于 2018-06-28

从无到有构建vue后台管理页面（vue+webpack构建项目）

最终的效果如下

1. 登录页

2. 首页

阅读全文 »

spring的RestTemplate中文乱码

发表于 2018-05-30

spring的RestTemplate中文乱码

好多年没有遇到过乱码的问题了,今天一位同事措不及防的报了个中文乱码问题。我的排查思路如下：

检查数据库中数据状态
理由：可能是从数据库中取数据的时候中问乱码了，首先检查这个是因为这个问题的检查很直观。直接看一眼就知道了。顺便确认了下jdbc链接数据库时是否设置了中文支持。
发现数据库存储的数据就是乱码，检查数据库表的字符编码
理由：如果数据库中的字符编码不支持中文，可能会到导致中文乱码问题。这种方式的检查也很直观，使用下面命令检查：

1	show variables like 'character%';

发现编码没问题，检查是否远程数据接收的时候就是乱码
理由：因为接口可以正常接收浏览器发送过来的数据，所以有问题可能是远程程序进行数据传输的时候就乱码了。debug跟踪发现远程程序发送的时候数据并不是乱码<其实没有深入跟踪,深入跟踪后可以发现在发送前就已经是乱码了>，但是接收数据的时候就变成乱码了。
远程发送代码如下：

public static String getRespStrForUri(RestTemplate restTemplate, String uri, Map<String, String> params, String cookie) {
        MultiValueMap<String, Object> postParameters = new LinkedMultiValueMap<>();
        postParameters.add("app_key", Constants.authorityAppKey);
        if (params != null) {
            for (String key : params.keySet()) {
                postParameters.add(key, params.get(key));
            }
        }
        HttpHeaders headers = new HttpHeaders();
        headers.add("Cookie", cookie);
            
        HttpEntity<MultiValueMap<String, Object>> requestEntity = new HttpEntity(postParameters, headers);
        String requestURL = Constants.authorityDomain + uri;
        try {
            Object responseStr = restTemplate.postForObject(requestURL, requestEntity, Object.class);
            return responseStr.toString();
        } catch (Exception e) {
        }    
        return null;
    }

阅读全文 »

spring4和springboot过滤null属性或将null属性转为空字符串

发表于 2018-05-30

spring4和springboot过滤null属性或将null属性转为空字符串

有资料显示可以在springboot提供的application.properties中配置　spring.jackson.default-property-inclusion=non_null　我试了下，并没有什么卵用。

作用范围Bean

1. @JsonInclude(JsonInclude.Include.NON_NULL)

作用范围整个工程

@Bean
public RequestMappingHandlerAdapter mappingHandlerAdapter() {
    RequestMappingHandlerAdapter mappingHandlerAdapter = new RequestMappingHandlerAdapter();
    mappingHandlerAdapter.setCustomArgumentResolvers(Arrays.asList(new XssHandlerMethodArgumentResolver()));
    // null过滤
    MappingJackson2HttpMessageConverter jackson2HttpMessageConverter = new MappingJackson2HttpMessageConverter();
    ObjectMapper objectMapper = new ObjectMapper();
    objectMapper.setDateFormat(new SimpleDateFormat(BaseEntity.DATE_TIME_FORMAT));
    objectMapper.setSerializationInclusion(JsonInclude.Include.NON_NULL);
    jackson2HttpMessageConverter.setObjectMapper(objectMapper);
    mappingHandlerAdapter.setMessageConverters(Arrays.asList(jackson2HttpMessageConverter));
    return mappingHandlerAdapter;
}

阅读全文 »

springboot 生成各个版本excel和pdf以及遇到的问题

发表于 2018-05-30

springboot 生成各个版本excel和pdf以及遇到的问题

springboot生成excel和pdf网上的资料并不是很多,大多数是springmvc生成excel和pdf的例子.或者是使用Response输出流直接去写,其实这里要介绍的是spring框架已经为我们考虑好了.了解springmvc组件结构的肯定知道view视图解析器组件,这里主要介绍的就是这个组件的实际应用并附上源代码以及使用过程中遇到的坑.
主要介绍的组件:

1. AbstractXlsView 旧版excel下载
2. AbstractXlsxView 新版excel下载
3. AbstractXlsxStreamingView excel大文件下载
4. AbstractPdfView pdf下载
4. PdfStreamingView pdf模板文件下载

maven依赖

<!-- pdf start -->
<dependency>
    <groupId>com.itextpdf</groupId>
    <artifactId>itextpdf</artifactId>
    <version>5.5.11</version>
</dependency>
<dependency>
    <groupId>com.itextpdf</groupId>
    <artifactId>itext-asian</artifactId>
    <version>5.2.0</version>
</dependency>
<!-- pdf end -->
<!-- excel start-->
<dependency>
    <groupId>org.apache.poi</groupId>
    <artifactId>poi</artifactId>
    <version>3.8</version>
</dependency>
<dependency>
    <groupId>org.apache.poi</groupId>
    <artifactId>poi-ooxml</artifactId>
    <version>3.8</version>
</dependency>
<!-- excel end -->

阅读全文 »

springBoot访问日志记录,自定义注解清除redis缓存

发表于 2018-05-30

springBoot访问日志记录,自定义注解清除redis缓存

annotation获取访问日志记录

使用annotation获取访问日志本质是没有什么难点,重点是获取请求和响应对象.代码如下
SaveLogAnnotation

/**
 * Created by xiehui1956(@)gmail.com on 17-7-19.
 */
@Component
@Target(ElementType.METHOD)
@Retention(RetentionPolicy.RUNTIME)
public @interface SaveLogAnnotation {
}

SaveLogAspect,这里我使用的是前置通知。如果要获取响应结果的话可以使用后置或者环绕通知,大同小异

/**
 * Created by xiehui1956(@)gmail.com on 17-7-19.
 */
@Aspect
@Component
public class SaveLogAspect {
    @Pointcut("@annotation(com.chinaredstar.authority.common.annotation.SaveLogAnnotation))")
    public void saveLog() {
    }
    @Before("saveLog()")
    public void before() throws Throwable {
        ServletRequestAttributes requestAttributes = (ServletRequestAttributes) RequestContextHolder.getRequestAttributes();
        HttpServletRequest request = requestAttributes.getRequest();
        request.getParameterMap().entrySet().forEach(entry -> {
            for (int i = entry.getValue().length - 1; i >= 0; i--) {
                System.out.println(entry.getKey() + "; " + entry.getValue()[i]);
            }
        });
        System.out.println("this is test aop");
    }
}

阅读全文 »