天猫双十一是怎么保证高并发、分布式系统中,数据一致性的?
今年交易库应该使用的还是全程参与过的Oceanbase0.5版,还可以回答一下 1.
数据一致性的保证,这是个分布式问题,解决方法就是就是Paxos协议。Oceanbase的updateserver节点由一个master和两个slave组成,每条redolog都要保证写master本地成功,并且任意一个slave确认持久化成功才算成功,否则不应答客户端。工程实现上经过了简化,比较类似raft,slave只能应答ID连续的日志同步,而不是megastore里那样,来一条就持久化一条(OB1.0是完美的Multi-Paxos,以后我单独分享blog)。相对与mysql/oracle主备同步要在Maximum
Protection和的Maximum
availability之间取舍设计,Paxos最大的优势在于,3台机器任意宕掉一台(或者说N台机器任意宕掉N/2台),剩下的机器可以继续提供服务,而不必担心丢失日志。
2.
分库分表事务怎么办,OB的事务都在单点updateserver上执行没有分布式事务问题,由于交易库压力巨大,OB也部署了多个集群,但是交易库的特性是没有跨域交易的事务,因此尽管有一笔交易内的跨表事务,但是业务可以按照交易ID来分库,库与库之间没有事务操作。至于其他业务跨库事务,是靠业务逻辑处理实现事务的。
3.
库存加锁是个好问题,OB和mysql优化方式不太一样,本质是都是批处理,之前是听说mysql通过将多条扣减库存的sql合并为一条sql来优化的,优化逻辑需要处理sql解析,个人感觉比较定制化,后续优化成什么样就不太清楚了;而OB使用了多个优化设计:(1)对于并发扣减库存的语句,引入了一种叫做“early
lock release”的机制来优化,在事务提交前释放行锁,使得对同一行的修改有可能能够在一次group
commit提交;(2)扩充了sql语法增,类似存储过程,使得insert,update能够在一次auto
commit中完成,避免了持锁与客户端交互;(3)支持hint提示,让客户端能够提示可能的冲突,使得我们可以将可能冲突的请求在一个线程中排队处理。如上几个优化效果很显著,但是比较遗憾是,由于某些原因,OB当年没有拿下库存中心,后续才转而主攻更核心的交易库。
什么是大数据,通俗的讲
大数据是指无法在一定时间范围内用常规软件工具进行捕捉、管理和处理的数据集合,是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力的海量、高增长率和多样化的信息资产,简单来说大数据就是海量的数据,就是数据量大、来源广、种类繁多(日志、视频、音频),大到PB级别,现阶段的框架就是为了解决PB级别的数据。
大数据的7大特征:海量性,多样性,高速性,可变性,真实性,复杂性,价值性
随着大数据产业的发展,它逐渐从一个高端的、理论性的概念演变为具体的、实用的理念。
很多情况下大数据来源于生活。
比如你点外卖,准备什么时候买,你的位置在哪,商家位置在哪,想吃什么……这都是数据,人一多各种各样的信息就越多,还不断增长,把这些信息集中,就是大数据。
大数据的价值并不是在这些数据上,而是在于隐藏在数据背后的——用户的喜好、习惯还有信息。
今年双十一的交易额有多少?
凤凰网科技讯(作者/郑媛)2019年11月12日消息,天猫双11狂欢节当日交易额截止24:00交易额为2684亿元,去年双11的交易额为2135.5亿元,2017年为1682亿。 2019天猫双11销售额统计数据: 00:01:36,2019天猫双11全球成交额破100亿,用时96秒,2018年破百亿用时2分05秒; 00:12:49,2019天猫双11全球成交额破500亿,用时12分49秒; 01:03:59,2019天猫双11全球成交额超过1000亿 01:26:07,2019天猫双11全球成交额超过1207亿!打破2016年天猫双11全天交易额纪录; 10:04:49:,2019天猫双11全球成交额超过1682亿!打破2017年天猫双11全天交易额纪录!! 12:00:00,2019天猫双11全球半天成交额已超1845亿! 14:21:27,2019天猫双11成交额超过2000亿元! 16:31:21,天猫双十一交易额2135亿,打破2018年天猫双11全天交易额纪录! 24:00:00,2019天猫双11交易额为2684亿元,超出2018年全天交易额549亿。 扩展资料: 对于双11销量的预期,天猫蒋凡在接受凤凰网科技等媒体的采访时表示,“我们内部甚至都没有提要达到多少亿,到这个规模上数字不是最重要的”,他表示,希望双十一变成一个真正的节日,给消费者带来更多的乐趣。 在天猫与淘宝的关系上,蒋凡表示,天猫淘宝是阿里巴巴的两个品牌,水乳交融。天猫代表的是体系化的商家运营体系,与品牌有更加紧密的联系;淘宝的关键词为乐趣,代表更多的创新 ,淘宝直播就是从淘宝独立出来的。 参考资料来源:凤凰网—— 2684亿元 2019天猫双十一全天总成交额出炉
推荐阅读
- ○ 火影忍者338
- ○ 25岁眼霜哪个牌子好
- ○ 斗破苍穹第四季第12集
- ○ 我的2010
- ○ 308激光治疗
- ○ 美人心计4
- ○ 金刚狼1电影国语
- ○ 英文字母26个字母表
- ○ 山东2020高考录取分数线
- ○ 300分左右的专科
最新文章
- ○ 火影忍者338
- ○ 25岁眼霜哪个牌子好
- ○ 斗破苍穹第四季第12集
- ○ 我的2010
- ○ 308激光治疗
- ○ 美人心计4
- ○ 金刚狼1电影国语
- ○ 英文字母26个字母表
- ○ 山东2020高考录取分数线
- ○ 300分左右的专科