詳解java解決分布式環(huán)境中高并發(fā)環(huán)境下數(shù)據(jù)插入重復問題
java 解決分布式環(huán)境中 高并發(fā)環(huán)境下數(shù)據(jù)插入重復問題
前言
原因:服務器同時接受到的重復請求
現(xiàn)象:數(shù)據(jù)重復插入 / 修改操作
解決方案 : 分布式鎖
對請求報文生成 摘要信息 + redis 實現(xiàn)分布式鎖
工具類
分布式鎖的應用
package com.nursling.web.filter.context;
import com.nursling.nosql.redis.RedisUtil;
import com.nursling.sign.SignType;
import com.nursling.sign.SignUtil;
import redis.clients.jedis.Jedis;
import javax.servlet.ServletRequest;
import javax.servlet.http.HttpServletRequest;
import java.util.HashMap;
import java.util.Map;
/**
* 并發(fā)攔截
* 高并發(fā)下 過濾掉 相同請求的工具
* @author 楊.
*
*/
public class ContextLJ {
private static final Integer JD = 0;
/**
* 上鎖 使用redis 為分布式項目 加鎖
* @param sign
* @param tiD
* @return
* @throws Exception
*/
public static boolean lock(String sign, String tiD) {
synchronized (JD) { // 加鎖
Jedis jedis = RedisUtil.getJedis();
String uTid = jedis.get(sign);
if (uTid == null) {
jedis.set(sign, tiD);
jedis.expire(sign, 36);
return true;
}
return false;
}
}
/**
* 鎖驗證
* @param sign
* @param tiD
* @return
*/
public static boolean checklock(String sign, String tiD){
Jedis jedis = RedisUtil.getJedis();
String uTid = jedis.get(sign);
return tiD.equals(uTid);
}
/**
* 去掉鎖
* @param sign
* @param tiD
*/
public static void clent (String sign, String tiD){
if (checklock(sign, tiD)) {
Jedis jedis = RedisUtil.getJedis();
jedis.del(sign);
}
}
/**
* 獲取摘要
* @param request
* @return
*/
public static String getSign(ServletRequest request){
// 此工具是將 request中的請求內(nèi)容 拼裝成 key=value&key=value2 的形式 源碼在線面
Map<String, String> map = SignUtil.getRequstMap((HttpServletRequest) request);
String sign = null;
try {
// 這里使用md5方法生成摘要 SignUtil.getRequstMap 方法源碼就不貼了
sign = SignUtil.buildRequest(map, SignType.MD5);
} catch (Exception e) {
e.printStackTrace();
}
return sign;
}
}
public static Map<String, String> getRequstMap(HttpServletRequest req){
Map<String,String> params = new HashMap<String,String>();
Map<String, String[]> requestParams = req.getParameterMap();
for (Iterator<String> iter = requestParams.keySet().iterator(); iter.hasNext();) {
String name = (String) iter.next();
String[] values = (String[]) requestParams.get(name);
String valueStr = "";
for (int i = 0; i < values.length; i++) {
valueStr = (i == values.length - 1) ? valueStr + values[i]
: valueStr + values[i] + ",";
}
params.put(name, valueStr);
}
return params;
}
下面是過濾器代碼
對分布式鎖的利用
package com.nursling.web.filter.transaction;
import com.google.gson.Gson;
import com.nursling.common.RandomUtil;
import com.nursling.dao.util.TransactionUtils;
import com.nursling.model.ApiResult;
import com.nursling.model.ApiRtnCode;
import com.nursling.web.filter.context.ContextLJ;
import org.apache.log4j.Logger;
import javax.servlet.*;
import javax.servlet.http.HttpServletResponse;
import java.io.IOException;
/**
* 對事物進行控制 并且 避免接口 直接報漏異常信息
* 并且過濾頻繁請求
* Created by yangchao on 2016/11/4.
*/
public class TransactionFilter implements Filter {
Logger log = Logger.getLogger(this.getClass());
@Override
public void init(FilterConfig filterConfig) throws ServletException {
}
@Override
public void doFilter(ServletRequest request, ServletResponse myResp, FilterChain chain) throws IOException, ServletException {
String sign = "sign_" + ContextLJ.getSign(request); // 生成摘要
String tiD = RandomUtil.getRandomString(3) + "_" + Thread.currentThread().getId(); // 當前線程的身份
try {
if (!ContextLJ.lock(sign, tiD)) {
log.warn("放棄相同 并發(fā)請求" + sign);
frequentlyError(myResp);
return;
}
if (!ContextLJ.checklock(sign, tiD)) {
log.warn("加鎖驗證失敗 " + sign + " " + tiD);
frequentlyError(myResp);
return;
}
chain.doFilter(request, myResp); // 放行
} catch (Exception e) { // 捕獲到異常 進行異常過濾
log.error("", e);
retrunErrorInfo(myResp);
} finally {
ContextLJ.clent(sign, tiD);
}
}
/**
* 頻繁請求
* @param myResp
*/
private void frequentlyError(ServletResponse myResp) throws IOException {
ApiResult<Object> re = new ApiResult<>();
((HttpServletResponse) myResp).setHeader("Content-type", "text/html;charset=UTF-8");
re.setMsg("稍安勿躁,不要頻繁請求");
re.setCode(ApiRtnCode.API_VERIFY_FAIL);
myResp.getWriter().write(new Gson().toJson(re));
}
/**
* 返回異常信息
* @param myResp
*/
private void retrunErrorInfo(ServletResponse myResp) throws IOException {
ApiResult<Object> re = new ApiResult<>();
re.setMsg("server error");
// 這里不必理會
re.setCode(ApiRtnCode.SERVICE_ERROR);
myResp.getWriter().write(new Gson().toJson(re));
}
@Override
public void destroy() {
}
}
程序本身應該還有需要完善的地方, 不過經(jīng)過一段時間的測試。 這個解決方案還是比較可靠的 并發(fā)測試 + 生產(chǎn)環(huán)境上 也沒有再出現(xiàn) 重復請求的問題
非極端情況下 還是很可靠的
以上所述是小編給大家介紹的java解決分布式環(huán)境中高并發(fā)環(huán)境下數(shù)據(jù)插入重復問題詳解整合,希望對大家有所幫助,如果大家有任何疑問請給我留言,小編會及時回復大家的。在此也非常感謝大家對腳本之家網(wǎng)站的支持!
相關文章
Java Spring Cloud Bus 實現(xiàn)配置實時更新詳解
這篇文章主要介紹了SpringCloud Bus如何實現(xiàn)配置刷新,文中通過示例代碼介紹的非常詳細,對大家的學習或者工作具有一定的參考學習價值,需要的朋友可以參考下2021-09-09
Netty進階之EventExecutorGroup源碼詳解
這篇文章主要介紹了Netty進階之EventExecutorGroup源碼詳解,EventExecutorGroup繼承了JDK的ScheduledExecutroService,那么它就擁有了執(zhí)行定時任務,執(zhí)行提交的普通任務,需要的朋友可以參考下2023-11-11
springmvc無法訪問/WEB-INF/views下的jsp的解決方法
本篇文章主要介紹了springmvc無法訪問/WEB-INF/views下的jsp的解決方法,非常具有實用價值,需要的朋友可以參考下2017-10-10
Java虛擬機調(diào)用Java主類的main()方法
這篇文章主要介紹了Java虛擬機調(diào)用Java主類的main()方法,前一篇文章我們介紹了關于Java虛擬機HotSpot2021-11-11
Java線上問題排查神器Arthas實戰(zhàn)原理解析
原先我們Java中我們常用分析問題一般是使用JDK自帶或第三方的分析工具如jstat、jmap、jstack、?jconsole、visualvm、Java?Mission?Control、MAT等,還有一款神器Arthas工具,可幫助程序員解決很多繁瑣的問題,感興趣的朋友一起看看吧2022-01-01
解決執(zhí)行maven命令時提示Process terminated的問題
這篇文章主要介紹了解決執(zhí)行maven命令時提示Process terminated的問題,具有很好的參考價值,希望對大家有所幫助。一起跟隨小編過來看看吧2020-09-09
Mybatis-plus實現(xiàn)主鍵自增和自動注入時間的示例代碼
這篇文章主要介紹了Mybatis-plus實現(xiàn)主鍵自增和自動注入時間的示例代碼,文中通過示例代碼介紹的非常詳細,對大家的學習或者工作具有一定的參考學習價值,需要的朋友們下面隨著小編來一起學習學習吧2020-07-07

