阿里巴巴解决数据拆分的伪分布式数据库 中间件Cobar正式开源

六月 19, 2012 by · 1 Comment 

编者加注:

阿里巴巴于2012年6月19日,正式对外开源的数据库中间件Cobar,前身是早已经开源的Amoeba,不过其作者陈思儒离职去盛大之后,阿里巴巴内部考虑到Amoeba的稳定性、

性能和功能支持,以及其他因素,重新设立了一个项目组并且更换名称为Cobar,当时的开发人员是贺贤懋(备注:可能名字的字不对,实在有点久远,虽然当时一起合作),还

有一位百阿的同事也加入这个团队(备注:旺旺密码不记得了,所以他的名字也无法记起,看见请莫怪我这位记忆力不好的百阿同学),开发语言是Java,一开始只支持MySQL

数据库,并且用在新项目BRMMS(中文名称:商人社区,BRMMS是项目代号,一般只记得代号,实在参与过太多项目研发),后来也支持Oracle数据库,因为阿里巴巴中文站

的Offer数据库,需要从Oracle数据库+存储设备,迁移到MySQL+PC Server平台上,为保证用户数据的安全性,迁移过程是每128分之一切换的模式。虽然测试的非常严格,我

们几乎所有可能碰到的情况,甚至极端情况都测试过,但是依然碰过一些莫名其妙的问题,比如从MySQL双主复制模式,从主A切换为B,出现过某个小集群的应用程序连接确实

切换成功,但是又自己切换回来了,直到我离开也没有找出原因,不过后来再切换又从未出现过,Cobar开源对大家解决数据的垂直拆分和水平拆分,那是如虎贴翼,非常方便!

 

场景描述

Cobar是关系型数据的分布式处理系统,它可以在分布式的环境下像传统数据库一样为您提供海量数据服务。以下是快速启动场景:

  • 系统对外提供的数据库名是dbtest,并且其中有两张表tb1和tb2。
  • tb1表的数据被映射到物理数据库dbtest1的tb1上。
  • tb2表的一部分数据被映射到物理数据库dbtest2的tb2上,另外一部分数据被映射到物理数据库dbtest3的tb2上。
    如下图所示:

Read more

原创文章,转载请注明: 文章地址阿里巴巴解决数据拆分的伪分布式数据库 中间件Cobar正式开源

阿里巴巴系统运维实战 详解分析了阿里巴巴的现状与面临挑战、网络架构和CDN架构等

六月 19, 2012 by · 4 Comments 

阿里巴巴集团技术保障-系统部的康伯(注:淘宝内部的花名),为大家分享主题:阿里巴巴系统运维实战,讲述阿里巴巴运维的现状、网络架构和未来发展方向。

PPT内容摘要:
1>.阿里巴巴的系统规模和面临的挑战
2>.资源管理和成本优化
3>.阿里巴巴的基础架构介绍

4>.高效率运维实践
4.1>.自动化
4.2>.标准化
4.3>.无状态化

5>.创新@阿里巴巴

1.阿里巴巴的系统规模和面临的挑战

Read more

原创文章,转载请注明: 文章地址阿里巴巴系统运维实战 详解分析了阿里巴巴的现状与面临挑战、网络架构和CDN架构等

腾讯、阿里巴巴等公司遭遇的2万名员工的管理屏障

五月 20, 2012 by · 3 Comments 

作者:虎嗅网
20000人,对互联网公司或许真的是一个带有符号意义的门槛。在这道门槛之前,再天才的创始人、再优秀的团队,都难免徘徊、盘整,经受阶段性挑战。虎嗅认为,对需要时刻创新的IT与互联网公司来说,20000名员工的公司规模,是道门槛,是个诅咒。 20000名员工规模,在传统制造乃至IT外包公司中,都是小case。富士康,大陆员工即超100万人,虽说也面临员工规模庞大带来的管理难题,但无论如何不会在两万即遇卡壳。

 

而多条产品线、创新竞争激烈的互联网公司却不一样。数起经验案例表明,员工规模达“20000″,是一个值得高度重视的数字。在这道门槛前后,有觉悟的公司最高领导人,都会操刀对公司的管理架构、文化、员工心态进行大力度调整。 Read more

原创文章,转载请注明: 文章地址腾讯、阿里巴巴等公司遭遇的2万名员工的管理屏障

阿里巴巴集团去IOE运动的思考与总结

五月 7, 2012 by · 10 Comments 

【导读】

预计2012年5月7日,阿里巴巴集团将正式公布技术团队合并的事情,涉及的部门:阿里巴巴运维团队、阿里巴巴DBA团队、阿里巴巴平台技术部、大淘宝运维团队、大淘宝DBA团队、大淘 宝核心系统部、阿里云计算运维团队、阿里云计算DBA团队和阿里巴巴集团安全团队,从一些可以猜测到的信息分析,上述技术团队合并之后,大淘宝的员工将成为相关技术团队的掌舵者去IOE政治运动是阿里巴巴集团首席架构师某博士主导的,阿里巴巴和淘宝的技术团队内部非常有影响力的XX负责执行,合并之后阿里巴巴集团内部所有子公司去IOE运动,将继续深化。个人就淘宝、阿里巴巴和支付宝去IOE事件,以局外人的角度进行利弊分析,希望能达到给明白真相和不明白真相 群众,一个合情合理中立的分析。

 

淘宝和阿里巴巴去Oracle化事件 引发数据库技术人员大讨论一 文,只是把对阿里巴巴、淘宝等子公司内部非常熟悉的人士观点和建议分别整理出来,以及还有部分外部人士的猜测和分析,本篇文章我们从几个不同的角度综合分 析阐述去IOE事件对阿里巴巴、淘宝等公司的内部DBA团队价值和意义,对阿里巴巴、淘宝等公司的业务和成本影响,对互联网行业的DBA从业者的影响… Read more

原创文章,转载请注明: 文章地址阿里巴巴集团去IOE运动的思考与总结

大淘宝、阿里巴巴B2B和阿里云 运维团队和DBA团队即将合并到阿里巴巴集团

五月 4, 2012 by · 8 Comments 

导读

“合久必分,分久必合”传递是阴阳之理,现在这个事情即将正式发生在阿里巴巴集团内部,这也是2009年初内部就开始探讨和争论的事情,考虑把技术团队合并为一家公司,或者优先把运维团队(简称:OPS团队)和DBA团队合并到阿里巴巴集团或某一子公司,然后统一对阿里巴巴集团内部的公司提供技术服务。阿里巴巴(中国)网络科技有限公司正式发布计划从香港证券市场退市,此事之前阿里巴巴集团的参谋们,就应该已经确定要合并阿里巴巴集团内部(注:支付宝已经不属于阿里巴巴集团的成员,后续讲解)所有子公司的运维团队(简称:OPS团队)和DBA团队的人员,年初的时候就优先把阿里云的运维部门合并到阿里巴巴集团。

Read more

原创文章,转载请注明: 文章地址大淘宝、阿里巴巴B2B和阿里云 运维团队和DBA团队即将合并到阿里巴巴集团

派出所所长到互联网架构师的传奇人生

四月 24, 2012 by · 8 Comments 

导读

网友@兰帝魅晨- 新浪微博上@mysqlops曾经受邀请知乎问答上,帮人解答过一个职业选择的话题:IT类专业的人,毕业后进入IT领域的机会有多大?,提到随便有很多非IT专业人员,不仅从事IT技术工作,且做的非常出色。他的微博信息突然促使我想起曾经阿里巴巴的百阿培训的同学—王所长的经历,从个人QQ空间迁移到www.mysqlops.com上,使更多对IT行业有兴趣的朋友能阅读到其个人经历,也希望对大家有积极的作用。
王所长: Read more

原创文章,转载请注明: 文章地址派出所所长到互联网架构师的传奇人生

阿里巴巴离职DBA 35岁总结的职业生涯

四月 17, 2012 by · 55 Comments 

导读:
去年很多朋友私下或新浪微博上在总结自己的职业生涯与职业规划,也感觉到很纠结与彷徨,尤其技术人的职业生涯,随年龄增加,一些优势逐渐丧失。4月13日数据库技术大会的主办方举行的晚宴上,也让本人主持一个大家感兴趣又贴合实际的话题,最后选择的话题是 “三十岁后的IT人 如何抉择人生路”,遗憾的是预订酒店饭桌是几个房间打通的长排格局,而不是一个大厅方式(总共:8桌),大家无法围绕在一起,为此只是小范围讨论了下,今天看到曾经阿里巴巴数据库团队的海波兄弟总结分享,非常有意义,转载给大家共同欣赏!

十五年前,你或许还不懂爱情,看Jack和Rose执手相看泪眼,只是蒙胧的心痛。十五年后,你会和谁一起走进影院,更会和谁一起,走到生命终点。
十五年前,我还不太懂技术,凭兴趣玩着C语言。十五年后,当铁达尼的旋律再次响起,我会选择和哪门技术,一起走到我职业生涯的终点。

序言
—- 回望雨中的园区,更是回望来时的路。

此时天空飘着小雨,正如丝丝织雨细如愁。我刚刚离职,一路走出园区,回望了一眼雨中阿里巴巴的大楼,思绪随着微风,四处飘散。突然想起几年前我刚到杭州哪天,也是细雨微风。我走
进城西的创业大厦,终于见识了大师Biti的风采,也从此开始我的阿里巴巴之旅。
杭州的特点,是隐匿在山青水秀之间,有很多雅至的主题饭店,团队第一次出外聚餐,就是在山间绕来绕去,最后到了一处青山环绕、绿水长流之处。Biti在会议上就“什么是架构”进行了
精彩的评论,高度已经超越普通技术人员,至今我仍记忆犹新。但不久之后,Biti调至支付宝,真是遗憾。而这让我面临了空前巨大的压力,因为Biti一走,我变成了团队级别最高的DBA。初来乍到 Read more

原创文章,转载请注明: 文章地址阿里巴巴离职DBA 35岁总结的职业生涯

淘宝和阿里巴巴去Oracle化事件 引发数据库技术人员大讨论

三月 29, 2012 by · 17 Comments 

导读

本周 @红袖添香夜杀猪 于新浪微博上发表阿里系去Oracle化去Yahoo化的事情,引发众多技术界朋友们的讨论,甚至导致很多正在或想学习Oracle数据库技术的网友,担忧Oracle DBA的发展前景问题,为此把去O化或称去oracle化问题的来龙去脉,以及一些较好的回复和争论点,整理清楚分享给大家,以免更多的技术人被一些错误的信息误导。

 

(一)   新浪微博上的信息,已经有人转移到 问答网站 知乎上进行讨论,问答信息

@红袖添香夜杀猪 内容:阿里系去Oracle化去Yahoo化阻力如何,很想听听这背后的故事,通过什么样的努力促使开源技术在阿里系的广泛使用,尤其是mysql、lvs这些很适合互联网公司使用的产品,有空编写本中国版的《浪潮之颠》吧。。期待。链接:weibo.com/19121747… Read more

原创文章,转载请注明: 文章地址淘宝和阿里巴巴去Oracle化事件 引发数据库技术人员大讨论

阿里云飞天系统的技术架构

十一月 2, 2011 by · 7 Comments 

我们接到阿里云计算有限公司法务部的邮件通知,为此不得不删除此文,望各位技术朋友谅解!

阿里云计算有限公司法务部来信内容:

致启者:
本人谨代表阿里云计算有限公司就题述网站所涉及内容致函贵网站。

贵网站所涉及页面的展现内容,包括“阿里云云计算系统代号为飞天系统的技术架构”“飞天系统的技术架构图”(具体网址包括:http://www.mysqlops.com/2011/11/02/aliyun.html )等内容为我公司的商业秘密,我公司未授权许可任何人(包括自然人、法人、事业单位等任何第三方)公开与之有关的任何信息。 Read more

原创文章,转载请注明: 文章地址阿里云飞天系统的技术架构

阿里巴巴Dubbo分布式服务框架项目开源 提供源码下载

十月 22, 2011 by · Leave a Comment 

Dubbo Overview:

Serving  1000+services with 1,000,000,000invocations everyday, Dubbo becomes the key part of Alibaba’s SOA solution and has been deployed to the whole alibaba.com family:

So, What is Dubbo?

Dubbo is a service framework enpowers applications with service import/export capability with high performance RPC.
It’s composed of three kernel parts: Read more

原创文章,转载请注明: 文章地址阿里巴巴Dubbo分布式服务框架项目开源 提供源码下载

Next Page »

知识共享许可协议
作品采用知识共享署名 2.5 中国大陆许可协议进行许可。