ITeye博客

gao_xianglong的自言自语

gao_xianglong · 共 108 篇文章

[置顶] 大促场景下热点数据写(库存扣减)技术难题解决方案

《大促场景下热点数据写(库存扣减)技术难题解决方案》 已经很久没有足够的时间让自己安静下来撰写一篇技术文章,确实近年来,大部分都花在了工作和2017年的新作品上。今天难得自己给自己打了瓶100ML的鸡血,出一篇前段时间针对交易系统大促场景下热点数据写优化的相关案例。当然,不同的企业有不同的解决方案和实现,但是万变不离其宗,还是那句话, 对于大型网站而言,其架构一定是简单和清晰的,而不是炫技般的复杂化,毕竟解决问题采用最直接的方式直击要害才是最见效的,否则事情只会变得越来越糟 。 在大部分情况下,商品库存都是直接在关系型数据库中进行扣减,那么在限时抢购活动正式开始后,那些单价比平时更给力、更具…

2017-11-17 17:31 · 系统架构,解决方案 · 评论(0)

[置顶] 如何支撑过亿流量和交易额,新作《人人都是架构师》告诉你

《请先别急着嘲笑书名——这才是真正的大型网站架构解决方案》 作者介绍 : 高翔龙,杭州云集微店架构师,基础架构组负责人,负责基础技术平台的架构设计和中间件研发等工作,技术书籍《Java虚拟机精讲》作者,热衷于开源技术,常年游走在Github上。 本书重点 : 1、货真价实的互联网场景下大型网站架构演变过程中核心技术难题的 解决方案 ; 2、全部来源于作者真实经历的生产案例,大型网站应对高并发、大流量的应急宝典; 3、分布式服务案例全面剖析,为大家讲解如何构建一个分布式调用跟踪系统; 4、大流量限流/消峰案例全面剖析,将流量尽可能挡在系统上游,避免对交易系统产生较大冲击; 5、分布式配置管理服…

2017-05-18 15:48 · 系统架构,解决方案 · 评论(0)

[置顶] 云集微店亿级交易额下的Order子系统架构演变

原文地址: http://mp.weixin.qq.com/s?__biz=MzIzNTIxMDg0NQ==&mid=2649370365&idx=1&sn=ed5c890401f50c060511c6c2de9179f0&scene=0#rd

2016-05-25 17:08 · 系统架构 · 评论(0)

[置顶] 轻量级Mysql Sharding中间件——Shark

Shark简介 前身为Kratos,轻量级Mysql分库分表(Sharding)中间件,丰富的Sharding算法支持(2类4种分片算法),能够方便DBA实现库的水平扩容和降低数据迁移成本。Shark站在巨人的肩膀上(SpringJdbc、Druid),采用与应用集成架构,放弃通用性,只为换取更好的执行性能与降低分布式环境下外围系统的宕机风险。 中文手册 常见问题 Shark的优点 动态数据源的无缝切换; master/slave一主一从读写分离; Sql独立配置,与逻辑代码解耦; 单线程读重试(取决于的数据库连接池是否支持); 单独且友好支持Mysql数据库; 非Proxy架构,与应用集成…

2016-01-14 10:41 · 中间件 · mysql,Shark · 评论(6)

[置顶] 轻量级Mysql分库分表(Sharding)中间件——Kratos

Github: https://github.com/gaoxianglong/kratos kratos简介 轻量级Mysql分库分表(Sharding)中间件,丰富的Sharding算法支持(2类4种分片算法),能够方便DBA实现库的水平扩容和降低数据迁移成本。Kratos站在巨人的肩膀上(SpringJdbc),采用与应用集成架构,放弃通用性,只为换取更好的执行性能与降低分布式环境下外围系统的宕机风险。 kratos使用手册 kratos的优点 动态数据源的无缝切换; master/slave一主一从读写分离; 单线程读重试(取决于的数据库连接池是否支持,推荐使用淘宝Druid); 单…

2015-09-19 20:28 · Kratos · 评论(0)

[置顶] 笔者带你剖析大规模分布式Java平台JVM性能调优基础

《笔者带你剖析大规模分布式Java平台JVM性能调优基础》 前言 其实说到对JVM进行性能调优早已是一个老生常谈的话题,如果你所在的技术团队还暂时达不到淘宝团队那样的高度,无法满足在OpenJDK的基础之上根据自身业务进行针对性的 二次开发 和 定制调优 ,那么对于你来说,唯一的选择就是尽可能的熟悉JVM的内存布局,以及熟练掌握与GC相关的那些选项配置,否则JVM的基础性能调优不是 痴人说梦 ? 目录 一、性能调优的一些概念和目标; 二、性能调优的基本原则; 三、新生代的性能调优; 四、老年代的性能调优; 一、性能调优的一些概念和目标 相信对JVM有所了解的开发人员,对于调优过程中牵扯的 吞…

2015-06-30 16:57 · JVM,GC,JVM性能调优 · 评论(1)

[置顶] 蔡学镛力荐,本人作品《Java虚拟机精讲》上市

蔡学镛力荐,本人作品《Java虚拟机精讲》上市 先做个自我介绍吧,高翔龙,7年左右的工龄,做过码农、技术经理、高级架构师,呆过大公司、混过创业公司,目前任职一家创业的互联网企业担任系统架构师,负责平台架构搭建、优化、hadoop的推广和实施,以及企业新员工的培训工作。平时喜欢倒腾 中间件 、喜欢重 复造轮子 、更喜欢买本书不看,回家摆着吃灰(或许感觉心里踏实些)。 对于我来说,写一本书,真的是 如履薄冰 。习惯了写博客,对于写书来说,真的是一次不小的挑战。最关键的是写的是跟JVM相关的东西,更是让我 忐忑不安 。再加上前面优秀的JVM作品也不少,更是让我的 情绪近乎崩溃 。或许我的能力有限,…

2015-04-14 13:32 · JVM,Java虚拟机 · 评论(7)

[置顶] 笔者带你剖析轻量级消息中间件ActiveMQ

《笔者带你剖析轻量级消息中间件ActiveMQ》 前言 软件系统的发展,简单来说是从单机应用逐步演变为 分布式+集群 模式,当然这根互联网的兴起是密不可分的。笔者曾经面试过一些开发人员,当你们使用代码编写一个简单的Login模块时,大概需要花费多少周期?有些开发人员不假思索的脱口而出,5分钟、10分钟等。OK,我们先不管他们是否真的能够在这么短的时间内开发出一个简单的Login功能,我真正想问的是,这个看似简单的功能背后,如果存放在互联网场景下,如何能够保证系统同时承载100——100W人的 并发洗礼 而不会出现宕机?紧接着是死一般的 沉寂 。 目录 一、分布式系统与消息中间件 二、JMS与…

2015-04-08 16:33 · Apache,ActiveMQ · 评论(0)

[置顶] 笔者带你剖析Python3.x

《笔者带你剖析Python3.x》 前言 其实不太想写跟Java无关的东西,但是实在憋得难受,想想一个项目组的其他同事都回家过年了,就剩下我一个苦逼的还在坚守在战斗一线,酱油也打了一段时间了,再憋下去难受了,所以趁着过年前发一篇博文吧,也可以打发下时间,何乐而不为呢? 废话说了一箩筐,回到正题。Python相信有不少开发人员,尤其是运维人员应该是非常熟悉的,那么请大家听我好好掰扯下Python究竟能够做什么,如果你觉得Python是个好东西,那么也请你尝试着使用它为你的项目增添一点色彩。笔者本文所使用的Python版本为3.x,尽管和Python2.x相比,3.x 在语法层面的改变是比较大的…

2015-02-15 12:21 · Python · 评论(3)

[置顶] 笔者带你剖析Spring3.x——集中贴

貌似已经很久没有写这个专题了,主要是近年来确实没时间,且心思更多投入到写书和项目中去了,只能后期补上。在此归纳下之前这个专题的目的,方便阅读和查找。 详解SSJ(Spring3.x mvc + Spring3.x Core + JPA2.x)轻量级集成开发目录汇总 详解SSJ(Spring3.x mvc + Spring3.x Core + JPA2.x)轻量级集成开发—序章 详解SSJ(Spring3.x mvc + Spring3.x Core + JPA2.x)轻量级集成开发—第1章 剖析IOC容器 详解SSJ(Spring3.x mvc + Spring3.x Core + JPA2…

2015-01-24 17:51 · Spring,JPA,Maven · 评论(0)

[置顶] 笔者带你剖析Apache Commons DbUtils 1.6

《笔者带你剖析Apache Commons DbUtils 1.6》 前言 关于Apache的DbUtils中间件或许了解的人并不多,大部分开发人员在生成环境中更多的是依靠Hibernate、Ibatis、Spring JDBC、JPA等大厂提供的持久层技术解决方案,或者是企业内部自己研发的持久层技术。但无论如何,使用这些技术的初衷和本质都是为了能够减少企业开发成本,提高生产效率,降低耦合。 放眼企业级项目,Hibernate等ORM产品是首选,而互联网领域,大部分开发人员往往并不会在生产环境中上这些ORM技术,原因很简单,要的就是 效率, 其次都不重要。对于刚接触SQL和JDBC的开发人员…

2014-12-15 16:23 · Apache,DbUtils · 评论(27)

[置顶] 笔者带你剖析淘宝TDDL——Matrix层的分库分表配置与实现

笔者带你剖析淘宝TDDL(TAOBAO DISTRIBUTE DATA LAYER) 注:本文部分内容引用本人博客 http://gao-xianglong.iteye.com/blog/1973591 前言 在开始讲解淘宝的TDDL(Taobao Distribute Data Layer)技术之前,请允许笔者先吐槽一番。首先要开喷的是淘宝的社区支持做的无比的烂,TaoCode开源社区上面,几乎从来都是有人提问,无人响应。再者版本迭代速度也同样差强人意**,就目前而言 TDDL5.0 的版本已经全线开源(Group、Atom、Matrix)大家可以在Github上下载源码。** 目录 一、…

2014-11-05 15:08 · TDDL,Diamond · 评论(6)

[置顶] 笔者带你剖析大数据存储HBase特性

《笔者带你剖析大数据存储HBase特性》 前言 如今在软件开发领域,谈及大数据已经是家常便饭。笔者相信在未来几年内,大数据的运算和存储一定会成为企业关注的 核心 。在此普及一个概念,什么级别的数据才能称之为大数据?如果你存储在DB中的数据达到了PB或者单表过亿甚至几十亿行的时候,这就是大数据。传统的RDBMS架构的数据库,在特殊的应用场景下,处理一些 半结构化 的大数据时,渐渐变得力不从心,虽然构表建索引等一系列的检索优化机制,但仍然无法高效解决大数据背景下的数据存取 瓶颈 。 目录 一、关系模型与Nosql; 二、HBase环境部署; 三、HBase Shell的使用; 四、HBase内核…

2014-03-15 17:32 · HBase · 评论(3)

[置顶] 笔者带你剖析Java7.x新特性

前言 最近在ITeye上看见一些朋友正在 激烈 讨论关于Java7.x的一些语法结构,所以笔者有些手痒,特此 探寻 了7.x(此篇博文笔者使用的是目前最新版本的JDK-7u15)的一些 新特性 分享给大家。虽然目前很多开发人员至今还在沿用Java4.x(笔者项目至今沿用4.x),但这并不是成为不前进的 借口 。想了解Java的发展,想探寻Java的未来,那么你务必需要时刻保持一颗永不落后的心。 当然笔者此篇博文 并不代表官方观点 ,如果有朋友觉得笔者的话语是妙论,希望指正提出,笔者会在第一时间纠正博文内容。在此笔者先谢过各位利用宝贵的时间阅读此篇博文,最后笔者祝愿各位新年大吉,工作顺利。再次…

2013-03-01 12:18 · JVM,API · 评论(40)

云集的全链路压测之路

《云集的全链路压测之路》 其实说句实话,我们的全链路压测之路走的还是比较艰辛的,从最初纠结用什么压测工具开始,到压框架、压单接口、压压测环境,到线上环境一步步摸索,并结合其它友商的经验和方案,直至今天, 将近耗时一年多的漫长时间,我们才最终在黑暗中摸索出了一条属于我们鸡场人自己的全链路压测之路 ,我们就是在不停的试错过程中逐步成长和成熟起来的。 一、 究竟什么是全链路压测 流量不大的时候,开发人员、测试人员随便在线下做一把功能测试,只要功能能够正常跑通就行了,但随着用户规模线性上涨,流量越来越大,我们逐渐会意识到,光靠常规的功能测试似乎是远远不够的,流量上来了,必须重视系统性能了,毕竟谁也不…

2017-11-20 01:12 · 系统架构,解决方案 · 评论(1)