詳解java解決分布式環(huán)境中高并發(fā)環(huán)境下數(shù)據(jù)插入重復(fù)問(wèn)題
java 解決分布式環(huán)境中 高并發(fā)環(huán)境下數(shù)據(jù)插入重復(fù)問(wèn)題
前言
原因:服務(wù)器同時(shí)接受到的重復(fù)請(qǐng)求
現(xiàn)象:數(shù)據(jù)重復(fù)插入 / 修改操作
解決方案 : 分布式鎖
對(duì)請(qǐng)求報(bào)文生成 摘要信息 + redis 實(shí)現(xiàn)分布式鎖
工具類(lèi)
分布式鎖的應(yīng)用
package com.nursling.web.filter.context; import com.nursling.nosql.redis.RedisUtil; import com.nursling.sign.SignType; import com.nursling.sign.SignUtil; import redis.clients.jedis.Jedis; import javax.servlet.ServletRequest; import javax.servlet.http.HttpServletRequest; import java.util.HashMap; import java.util.Map; /** * 并發(fā)攔截 * 高并發(fā)下 過(guò)濾掉 相同請(qǐng)求的工具 * @author 楊. * */ public class ContextLJ { private static final Integer JD = 0; /** * 上鎖 使用redis 為分布式項(xiàng)目 加鎖 * @param sign * @param tiD * @return * @throws Exception */ public static boolean lock(String sign, String tiD) { synchronized (JD) { // 加鎖 Jedis jedis = RedisUtil.getJedis(); String uTid = jedis.get(sign); if (uTid == null) { jedis.set(sign, tiD); jedis.expire(sign, 36); return true; } return false; } } /** * 鎖驗(yàn)證 * @param sign * @param tiD * @return */ public static boolean checklock(String sign, String tiD){ Jedis jedis = RedisUtil.getJedis(); String uTid = jedis.get(sign); return tiD.equals(uTid); } /** * 去掉鎖 * @param sign * @param tiD */ public static void clent (String sign, String tiD){ if (checklock(sign, tiD)) { Jedis jedis = RedisUtil.getJedis(); jedis.del(sign); } } /** * 獲取摘要 * @param request * @return */ public static String getSign(ServletRequest request){ // 此工具是將 request中的請(qǐng)求內(nèi)容 拼裝成 key=value&key=value2 的形式 源碼在線(xiàn)面 Map<String, String> map = SignUtil.getRequstMap((HttpServletRequest) request); String sign = null; try { // 這里使用md5方法生成摘要 SignUtil.getRequstMap 方法源碼就不貼了 sign = SignUtil.buildRequest(map, SignType.MD5); } catch (Exception e) { e.printStackTrace(); } return sign; } }
public static Map<String, String> getRequstMap(HttpServletRequest req){ Map<String,String> params = new HashMap<String,String>(); Map<String, String[]> requestParams = req.getParameterMap(); for (Iterator<String> iter = requestParams.keySet().iterator(); iter.hasNext();) { String name = (String) iter.next(); String[] values = (String[]) requestParams.get(name); String valueStr = ""; for (int i = 0; i < values.length; i++) { valueStr = (i == values.length - 1) ? valueStr + values[i] : valueStr + values[i] + ","; } params.put(name, valueStr); } return params; }
下面是過(guò)濾器代碼
對(duì)分布式鎖的利用
package com.nursling.web.filter.transaction; import com.google.gson.Gson; import com.nursling.common.RandomUtil; import com.nursling.dao.util.TransactionUtils; import com.nursling.model.ApiResult; import com.nursling.model.ApiRtnCode; import com.nursling.web.filter.context.ContextLJ; import org.apache.log4j.Logger; import javax.servlet.*; import javax.servlet.http.HttpServletResponse; import java.io.IOException; /** * 對(duì)事物進(jìn)行控制 并且 避免接口 直接報(bào)漏異常信息 * 并且過(guò)濾頻繁請(qǐng)求 * Created by yangchao on 2016/11/4. */ public class TransactionFilter implements Filter { Logger log = Logger.getLogger(this.getClass()); @Override public void init(FilterConfig filterConfig) throws ServletException { } @Override public void doFilter(ServletRequest request, ServletResponse myResp, FilterChain chain) throws IOException, ServletException { String sign = "sign_" + ContextLJ.getSign(request); // 生成摘要 String tiD = RandomUtil.getRandomString(3) + "_" + Thread.currentThread().getId(); // 當(dāng)前線(xiàn)程的身份 try { if (!ContextLJ.lock(sign, tiD)) { log.warn("放棄相同 并發(fā)請(qǐng)求" + sign); frequentlyError(myResp); return; } if (!ContextLJ.checklock(sign, tiD)) { log.warn("加鎖驗(yàn)證失敗 " + sign + " " + tiD); frequentlyError(myResp); return; } chain.doFilter(request, myResp); // 放行 } catch (Exception e) { // 捕獲到異常 進(jìn)行異常過(guò)濾 log.error("", e); retrunErrorInfo(myResp); } finally { ContextLJ.clent(sign, tiD); } } /** * 頻繁請(qǐng)求 * @param myResp */ private void frequentlyError(ServletResponse myResp) throws IOException { ApiResult<Object> re = new ApiResult<>(); ((HttpServletResponse) myResp).setHeader("Content-type", "text/html;charset=UTF-8"); re.setMsg("稍安勿躁,不要頻繁請(qǐng)求"); re.setCode(ApiRtnCode.API_VERIFY_FAIL); myResp.getWriter().write(new Gson().toJson(re)); } /** * 返回異常信息 * @param myResp */ private void retrunErrorInfo(ServletResponse myResp) throws IOException { ApiResult<Object> re = new ApiResult<>(); re.setMsg("server error"); // 這里不必理會(huì) re.setCode(ApiRtnCode.SERVICE_ERROR); myResp.getWriter().write(new Gson().toJson(re)); } @Override public void destroy() { } }
程序本身應(yīng)該還有需要完善的地方, 不過(guò)經(jīng)過(guò)一段時(shí)間的測(cè)試。 這個(gè)解決方案還是比較可靠的 并發(fā)測(cè)試 + 生產(chǎn)環(huán)境上 也沒(méi)有再出現(xiàn) 重復(fù)請(qǐng)求的問(wèn)題
非極端情況下 還是很可靠的
以上所述是小編給大家介紹的java解決分布式環(huán)境中高并發(fā)環(huán)境下數(shù)據(jù)插入重復(fù)問(wèn)題詳解整合,希望對(duì)大家有所幫助,如果大家有任何疑問(wèn)請(qǐng)給我留言,小編會(huì)及時(shí)回復(fù)大家的。在此也非常感謝大家對(duì)腳本之家網(wǎng)站的支持!
相關(guān)文章
淺談SpringMVC HandlerInterceptor詭異問(wèn)題排查
這篇文章主要介紹了淺談SpringMVC HandlerInterceptor詭異問(wèn)題排查,小編覺(jué)得挺不錯(cuò)的,現(xiàn)在分享給大家,也給大家做個(gè)參考。一起跟隨小編過(guò)來(lái)看看吧2019-05-05java數(shù)據(jù)結(jié)構(gòu)圖論霍夫曼樹(shù)及其編碼示例詳解
這篇文章主要為大家介紹了java數(shù)據(jù)結(jié)構(gòu)圖論霍夫曼樹(shù)及其編碼示例詳解,有需要的朋友可以借鑒參考下,希望能夠有所幫助,祝大家多多進(jìn)步早日升職加薪2021-11-11java高并發(fā)的用戶(hù)線(xiàn)程和守護(hù)線(xiàn)程詳解
本篇文章主要介紹了淺談java中守護(hù)線(xiàn)程與用戶(hù)線(xiàn)程,小編覺(jué)得挺不錯(cuò)的,現(xiàn)在分享給大家,也給大家做個(gè)參考。一起跟隨小編過(guò)來(lái)看看吧2021-10-10Java8 HashMap鍵與Comparable接口小結(jié)
這篇文章主要介紹了Java8 HashMap鍵與Comparable接口小結(jié),具有很好的參考價(jià)值,希望對(duì)大家有所幫助。如有錯(cuò)誤或未考慮完全的地方,望不吝賜教2022-01-01mybatis實(shí)現(xiàn)增刪改查_(kāi)動(dòng)力節(jié)點(diǎn)Java學(xué)院整理
本文通過(guò)實(shí)例代碼給大家介紹了mybatis實(shí)現(xiàn)增刪改查功能,非常不錯(cuò),具有參考借鑒價(jià)值,需要的朋友參考下吧2017-09-09Mybatis自定義插件Interceptor問(wèn)題
這篇文章主要介紹了Mybatis自定義插件Interceptor問(wèn)題,具有很好的參考價(jià)值,希望對(duì)大家有所幫助。如有錯(cuò)誤或未考慮完全的地方,望不吝賜教2022-11-11