技术架构 分布式架构云平台在充分分析IT技术发展趋势，遵循集中化、标准化、集成化、可靠化和可扩展化的设计原则，以价值创造为使命，以规范化、一体化、智能化的云平台为支撑，实现信息的透明共享、业务的敏捷协同、管控及时、决策科学为设计目标，选择传统成熟的J2EE、SOA、应用集成和BI信息技术和新一代的云计算、大数据、移动应用信息技术相结合的技术路线。 分布式架构云平台规划设计了集约化、云架构动态配置的企业IT基础设施； 共享化、集中数据存储管理的企业数据资源服务； 组件化、平台化、柔性集成的企业应用支撑服务； 标准化、服务化、整合智能的企业业务应用服务； 一站式、多终端服务的企业信息展示交互服务等技术层，每层又包括若干成 …

非科班，材料计算，研一上学期学了点Python，看了点培训班视频写了一个小网站，里面老师说会了这个就可以去找工作，我觉得寒假没什么事，就写了个简历去找实习了，几乎没有招Python实习的，就投了一些1-2年小公司，收到一个面试，然后就让我回去等通知了，发现Python比较难找工作，网上都是乱吹的 寒假中~ 研一下期，怒转Java 3月：Java基础，《算法》 4月：Java web，《疯狂Java讲义》 5月：SSM三大框架 ，Lintcode 6月：慕课网的商城项目，《深入理解Java虚拟机》 7月：牛客网刷了半个月面筋，就投了一些简历，哦，不是一些，有100来份，我乱投的，有7-8个面试，武汉的七月真的热，有两个是培训机构，气死 …

互联网架构的演进之路 互联网的四个阶段 web 1.0 时代 传统广告业务化 web 2.0 时代 内容产业数据化 互联网+ 移动互联网时代 生活服务业数据化 万物互联 云计算大数据时代 一切产业数据化 1. 第一阶段 单一应用架构 all in one 所有模块集中在一起，不做任何分层! 单机部署所有应用程序和软件，所有代码写在一块 称之为all in one 特点： 不具备代码可维护性 容错性差 （出错不容易恢复，无法捕获异常，处理异常，出错容易引起宕机） 分层开发 解决方案： 分层开发 （提高项目可维护性）【解决容错性】 MVC 设计模式 （web 应用三层架构） 特点： …

近日，阿里云宣布上海数据中心正式上线，而上周腾讯云深圳金融专区也正式上线运营。几乎在同一时间，两家国内公有云市场领头企业不约而同在金融云领域密集发力，背后有哪些看点呢？ 今年7月，银监会发布《中国银行业信息科技“十三五”发展规划监管指导意见（征求意见稿）》，该意见指出，为了助力银行业的转型升级，应对经济新常态对银行业带来的多挑战，到“十三五”末期，面向互联网场景的主要信息系统尽可能迁移至云计算架构平台。业界评论认为，意见的出台将是大力推动金融云的政策东风，而在竞争异常激烈的云市场中，金融云业务还是一片尚未完全开发出来的处女地，也或许会决定未来整个市场分配格局。 云计算对于金融行业的意义不言而喻。一方面，随着金融业务场景越来越复杂，金 …

**导读：**揭秘阿里云对象存储OSS可用性SLA背后的技术体系。 作者 | 云布道师 罗庆超 来源 | 凌云时刻（微信号：linuxpk） 1. 概述 2020年6月，阿里云对象存储OSS通过十年积累的技术红利，将可用性SLA（Service Level Agreement) 提升10倍，做到了全球第一的核心竞争力，是其他的云厂家的10～20倍。 其中， OSS 的标准型（同城冗余）存储，SLA 从 99.95% 提升到 99.995%，简单理解就是如果 10万 个请求中只要有5个请求返回服务端错误，OSS 将会赔付。 2. OSS可用性SLA说明 2.1 常见的可用性指标（年故障时长） 业界对可用性的描述，通常采用年故障时 …

利益相关，本尊是做DRDS的，当然也了解tidb，蟑螂数据库, oceanbase，否则没法做商业产品。 如果这个问题纯粹从当前时间、单纯技术层面去看，对比技术先进性，那就说不清楚，每个产品都能说出一堆的优点，比如pg非常优秀，有搞定全世界所有数据库需求的架势，但是实际上也有很多问题，就像 @郭宽 同学说的，业务想要银弹，可惜没有完美的银弹：），所以必须加上业务场景来聊。 从业务领域来说：前台在线业务，后台adhoc+分页+打标，后台adhoc+聚合，数据报表和分析。大概这4类业务。确实很多业务方将这4类需求混在了一块，然后丢给一个NB数据库处理，然后出来各种问题，可能一个单条数据主键查询要个2秒钟--(我们真碰到过这种情况)，因为 …

9月25日，在华为全联接2020（HUAWEI CONNECT 2020）上，华为发布一站式AI开发平台ModelArts3.0和多样性计算系列开发套件，云与计算开发者已达180万。为推进计算产业人才培养，华为联合首批72所高校，共同发布 “智能基座”产教融合协同育人基地。 一、云与计算生态开发者蓬勃发展 联接、计算、云、AI、行业应用这5种技术、5大机会史无前例地汇聚到一起。联接、计算、云和AI技术就像100多年前的电力，而行业应用就像家用电器和工业电气化。放眼未来，决定各行各业竞争力的关键就在于如何驾驭这些数字技术，构建行业应用。开发者无疑是推进这一进程，加速智能升级的核心力量。 从2016年至今，华为云与计算领域开发者数量已 …

1 微服务的发展 微服务倡导将复杂的单体应用拆分为若干个功能简单、松耦合的服务，这样可以降低开发难度、增强扩展性、便于敏捷开发。当前被越来越多的开发者推崇，很多互联网行业巨头、开源社区等都开始了微服务的讨论和实践。Hailo有160个不同服务构成，NetFlix有大约600个服务。国内方面，阿里巴巴、腾讯、360、京东、58同城等很多互联网公司都进行了微服务化实践。当前微服务的开发框架也非常多，比较著名的有Dubbo、SpringCloud、thrift 、grpc等。 2 微服务落地存在的问题 虽然微服务现在如火如荼，但对其实践其实仍处于探索阶段。很多中小型互联网公司，鉴于经验、技术实力等问题，微服务落地比较困难。如著名架构 …

现在做任何事情都要看投入产出比，对应到数据库上其实就是性价比。POLARDB作为一款阿里自研数据库，经常被问的问题是：性能怎么样？能不能支撑我的业务？价格贵不贵？很显然，在早期调研阶段，对稳定性、可靠性很难有量化的指标时，性能的好快就成了一个非常关键的决策因子。 POLARDB在一开始设计时就把性能作为一项关键的需求指标列入产品需求说明书，从架构设计到新硬件选型，再到代码实现，从驱动到分布式块存储，再到分布式文件系统和数据库引擎，打通整个技术栈做协同优化，最终才能保证性能上有数量级的提升。 高性能背后的技术 在2018杭州云栖大会上分享的这张架构图展示了POLARDB的内部细节。自下而上来看，POLARDB由__共享分布式存 …

如果说核心系统是金融机构业务系统的“心脏”，那么数据库则是“心脏”的“心脏”，业务数据就像流淌在业务系统中的“血液”，拥有一颗健壮的“心脏”是系统高效处理业务和维持正常运转的必备条件。由于金融级数据库技术的高度复杂性，国内金融机构的核心系统长期依赖国外商用数据库产品，金融机构不但无法自主掌控核心系统的“心脏”，而且还需要长期投入高昂的软硬件成本，同时互联网业务的爆发性增长也导致“心脏”压力骤增，成本呈指数级增加。因此，如何实现金融级数据库的自主可控和降本增效，为核心系统平稳换“心”，成为金融行业关注的焦点。 6月17日，腾讯分布式数据库TDSQL负责人潘安群受邀出席深圳市金融科技协会举办的“湾区金科(FinTech)沙龙(第六期)— …

2019年8月28日，腾讯云数据库在京正式启动战略升级，腾讯云数据库副总经理王义成宣布未来数据库发展将从“数据库+云”模式全面转向“云+数据库”模式，聚焦于云原生、自治、超融合三大战略。 2020年9月，距离腾讯云“云+数据库”战略升级已经过去了一年左右的时间。在这一年中，腾讯云数据库发生了什么样的变化？2020年，腾讯云又有哪些新的数据库产品和服务？未来，腾讯云数据库的整体发展战略是怎样的？......为了解答这些问题，我们时隔一年，我们再次采访了腾讯云数据库副总经理王义成。 战略转型的一年，腾讯云数据库发生了什么样的变化？ 如何理解从“数据库+云”转向“云+数据库”呢？之前，大家都是把数据库架在云上，借用云计算商业模式，将常用的 …

**华为云瑶光（Alkaid）**作为面向云、AI、5G时代的分布式云操作系统，承载未来“分布式、确定性、多维智慧”的云，致力于打造“极优、极简”的云上体验。 根据Frost&Sullivan对于中国公有云市场的调查研究结果显示，2019年Q4华为云IaaS市场份额位列第三，在Top厂商中继续保持稳健增速。伴随华为云持续的规模扩展及服务种类创新，必须通过底层全链路的数字化，才能进一步优化经营水平实现降本增效。 在本期“瑶光TechTalk”直播中，华为云计算服务域架构师雷老师为我们从架构层面剖析了华为云的数字化经营实战。 图1 瑶光TechTalk第三期 当前，华为云面临多维经营挑战： 1）规模大：华为云布局全球多个地理区域 …

欢迎大家前往腾讯云+社区，获取更多腾讯海量技术实践干货哦~ 是的，你没有看错。腾讯智造，新一代云数据库CynosDB，“C”位出道了！ CynosDB是腾讯云自研的新一代高性能高可用的企业级分布式云数据库。融合了传统数据库、云计算与新硬件的优势，100%兼容开源数据库，百万级QPS的高吞吐，不限存储，价格仅为商用数据库的1/10。面向通用硬件的极致优化，打破安迪-比尔定律，释放硬件红利！ Cynos源于拉丁语中的Cynosura，古希腊神话中的北极星，意为焦点，引人注目的人或物。CynosDB作为腾讯云自研的新一代高性能高可用的企业级分布式云数据库，无论在地位还是能力上，都是天生的“Center”位。 由云重新定义数据库 数据库从来 …

数据库正成为数字经济发展的底层核心技术，也是国内云厂商竞争的核心重地。 据国际权威咨询机构Gartner报告显示，数据库的未来是上云，2018年腾讯云数据库市场份额增速达123%，位列国内所有数据库厂商之首，过去两年，腾讯云在全球范围内的增速已经达到全球前三的迅猛势头。 无独有偶，除了Gartner等权威机构的认可之外，另一家国家权威评测机构 Forrester今年6月份也将腾讯云数据库评为全球数据库领域"实力竞争者"。能取得如此成绩，腾讯云凭的是什么？在这之前，或许我们可以先了解一下腾讯云数据库的产品布局。 布局完善，超强的产品实力 截止目前，腾讯云数据库服务涵盖了关系型数据库，非关系型数据库，分布式数据库、新 …

本篇文章约14000字，包含如下5部分内容： 1.开篇 2.国产数据库产品清单，包括产品名称，产品类别及厂商名称； 3.国产数据库各产品概述，产品基本介绍、应用场景等； 4.国产数据库在金融领域应用案例； 5.分布式、关系型、云化及内存数据库占比统计。 文章来源：国产数据库清单（2020年第1季度） - 墨天轮 01 开篇 在刚刚过去的一年也就是2019年是国产数据库崛起的元年，众多的国产数据库产品闯入了我们的视线，目前国产数据库市场呈现出百花齐放的新局面，国产数据库发展至今，我们刨除完全自研或是借助开源的概念，目前国产数据库市场上有多少个产品呢？ 58个，我花了一些时间在网络上搜集了各个产品的资料，由于个人水平及搜索手段有 …

9月25日，在HUAWEI CONNECT 2020期间， 华为云发布ModelArts 3.0，融合骨干模型、联邦学习、智能评估、智能诊断和高效算力。 华为云AI首席科学家田奇介绍华为云长期扎根AI基础技术研究，覆盖计算机视觉、语音语义和决策优化三大AI领域，提出了六大基础研究计划。这些计划产生的许多研究成果以即插即用的方式逐步部署于华为云ModelArts，助力行业AI落地。 以下是田奇演讲全文： 大家好，ModelArts在多个行业和项目中有了成功落地，这离不开华为云EI在人工智能领域的长期投入。 华为云长期扎根AI基础研究，覆盖计算机视觉、语音语义和决策优化三大领域。我们聚焦于模型高效、数据高效、算力高效、知识高效4大方向， …

序：华为智能助手是华为在手机终端中推出的智能应用服务，在手机负一屏中聚合用户所需要的内容与服务，并结合用户的习惯与喜好进行智能推荐。用户只需在首屏轻轻一划，不用打开各类繁琐的手机应用，即可直接获取想要的服务与内容，帮助用户的工作生活更加智能和便捷。 随着智能手机的日益普及，手机中的智能应用正在走进人们生活中的每一个角落，作为运行在华为手机上的超级应用，华为智能助手以[url=]3.2[/url]亿[l1] 的用户体量运行在华为云的终端云上，为用户提供稳定可靠的智能生活服务，其中应用市场日活高达6500万，云端相册每日新增相片已达4200万，庞大的体量使得应用系统稳定、可靠、敏捷的运行显得至关重要，而在背后全天候高效支撑的正是华为 …

前言 在互联网和大数据的背景下，越来越多的网站、应用系统需要支撑 海量数据存储、高并发请求、高可用、高可扩展性 等特性要求。传统的 关系型数据库 已经难以应对类似的需求，各种各样的 NoSQL（Not Only SQL）数据库因此而产生。 本文将分析 传统数据库 的存在的问题，以及几类 NoSQL 如何解决这些问题。在不同的 业务场景 下，作出正确的 数据存储 技术选型。 正文 1. 传统数据库缺点 缺点 解释说明 大数据场景下 I/O 较高 因为数据是按 行存储，即使只针对其中 某一列 进行运算，关系型数据库也会对 整行数据 进行扫描，从存储设备中 读入内存，导致 I/O 较高 结构化存储 不够灵活 存储的是 行记录，无法存储 灵 …

近日，腾讯云正式发布微服务中间件TSF(Tencent Service Framework)。 这个围绕应用和微服务的 PaaS 平台，将为企业解决IT系统复杂、升级迭代慢、运维扩展性差、海量用户支撑能力薄弱、数据孤岛等一系列难题，帮助传统企业快速构建面向互联网亿万用户的大规模分布式架构，降低企业IT成本，助力企业云化升级转型。 久经锤炼的一站式微服务解决方案, 赋能传统企业互联网转型 目前传统企业的IT系统以单体架构为主，这种架构在面对互联网业务的冲击时，系统架构的性能瓶颈会逐渐显现。 随着系统架构的演进，新型的微服务架构逐渐成为企业IT架构转型的趋势，其核心思想就是通过IT架构的微服务化，将复杂的单体架构，重组为小而美的独立服 …

谈及阿里云、腾讯云、华为云都在用的“分布式系统”，很多程序员的第一感觉多半是“高大上”和“深不可测”，犹如武林绝学——行走江湖，即便没有见过，也应听过其名。 分布式系统凭借其高吞吐、高并发、低延迟和负载均衡的特点，迎合了互联网飞速发展背后的巨大承载量需求，民间和官方都有忠实粉丝为其著书立说，然而，大多倾向于理论，对于初学者十分不友好。 那么，如何将分布式从理论应用到实战呢？ 切入点的选取是关键，一个最具“通用性”的角度——中间件（Middleware） 中间件是基础软件的一大类，属于可复用软件的范畴，顾名思义，中间件处于操作系统软件与用户的应用软件的中间，因此，中间件具有很好的独立性，可作为一个独立的软件系统运转。 …

李飞飞，现任阿里巴巴集团副总裁、高级研究员，阿里云智能数据库事业部总负责人。加入阿里巴巴之前为美国犹他大学计算机系终身教授。研究成果多次获得了IEEE ICDE、ACM SIGMOD最佳论文奖等重要学术奖项。 2018年，李飞飞加入阿里巴巴达摩院，带领团队投入到具有自主知识产权的研究当中。目前，带领的阿里云智能数据库事业部所研发的新一代分布式数据库系统，支撑了阿里巴巴集团的复杂业务、海量数据和双11交易洪峰的挑战，已经被应用于多个城市的智能城市交通网络管理，并服务了金融、零售、物流、制造等行业企业。 2018年，阿里云数据库成功进入Gartner数据库魔力象限，这是该榜单首次出现中国公司，近日，阿里云数据库再次入选Forrester …

一 旗帜鲜明地先说结论：之所以新的分布式数据库又开始支持关系模型了，是因为大部分程序员的数据库水平太糟糕。 二 论证之前惯例先吐个小槽。咱们就不吐槽题主的问题描述本身是不是就已经论证了我的观点，比如啥“良好的查询语言”是不是等于SQL等于关系模型，又比如“比关系数据库多了一层”是什么奇怪的说话。我还是来讲两个真实的小故事吧。 大概4、5年前，大家还在老老实实地用RDBMS实现业务数据库，一段时间过去发现查询变得很慢，大家纷纷议论：要不要换成NoSQL啊？ 然后我被派去做帮助做数据库优化，然后加了几个索引，把查询的时间从30多秒优化到了30多毫秒。 大概4、5个月前，大家已经开始快快乐乐地在新业务的数据库上用上NoSQL了，结果发现查 …

转载：[盘古：阿里云飞天分布式存储系统设计深度解析](https://yq.aliyun.com/articles/64374) 盘古是什么？ 上图列举了目前主流的云计算厂商，我们发现一个很有趣的事情：所有云计算厂商都是“富二代”，它们的分布式存储技术全部采用自研技术，而没有用大家耳熟能详的开源分布式系统。 飞天梦 第一代飞天人的梦想是在大量廉价的PC服务器上，对外提供各种计算和存储服务。具体到以下几个组件：夸父，主要负责网络；女娲，主要负责协同；伏羲，主要负责调度；盘古，主要负责存储；神农，主要负责监控。 上图介绍了盘古的底层存储平台，其承担承上启下的作用。盘古作为分布式存储系统，主要提供两种类型的接口：Append Only接 …

数据库正成为数字经济发展的底层核心技术，也是国内云厂商竞争的核心重地。 据国际权威咨询机构Gartner报告显示，数据库的未来是上云，2018年腾讯云数据库市场份额增速达123%，位列国内所有数据库厂商之首，过去两年，腾讯云在全球范围内的增速已经达到全球前三的迅猛势头。 无独有偶，除了Gartner等权威机构的认可之外，另一家国家权威评测机构 Forrester今年6月份也将腾讯云数据库评为全球数据库领域"实力竞争者"。能取得如此成绩，腾讯云凭的是什么？在这之前，或许我们可以先了解一下腾讯云数据库的产品布局。 布局完善，超强的产品实力 截止目前，腾讯云数据库服务涵盖了关系型数据库，非关系型数据库，分布式数据库、新 …

主讲人 | 腾讯云数据库副总经理-王义成 张康 编辑整理 量子位编辑 | 公众号 QbitAI 6月中旬起，量子位发起了以数据库为主题的系列公开课，邀请来自腾讯云、浪潮、蚂蚁集团等头部企业的数据库技术线负责人，围绕数据库的行业现状、趋势与技术进展等内容，以线上直播的形式为大家带来3期分享。 6月17日第一期直播中，腾讯云数据库副总经理—王义成全面剖析了全球数据库的发展历程，同时分享了如何将云计算、新基建、数据库的能力进行融合创新，以及自主创新研发新型国产数据库技术背后的历程。此外还结合实际金融案例，详细介绍了腾讯云自研国产数据库TDSQL和TBase的产品核心架构和最佳实践。 以下是分享内容实录，直播回放链接、PPT获取方式见文末。 …

徐东山：腾讯云安全副总监， 2005 年进入腾讯并服务至今，历任后台开发、后台策略安全等岗位。从 2010 年腾讯开放平台和腾讯云启动迄今，一直从事腾讯云安全相关的业务规划和系统建设工作。对海量服务系统开发、后台策略安全设计等有较强烈兴趣和一定积累。 分享主概要 ： 1、腾讯云安全在腾讯云不同发展阶段，承担着不同的使命和职责，在这些不同阶段，腾讯云安全建设方向有着怎么样的体现。对于使用腾讯云的客户，腾讯云安全主要提供的保障和服务。 2、对腾讯云安全的网络防护（大禹）、业务安全（天御）、移动安全（乐固）等产品服务和技术实现的说明。 分享实录 首先介绍下我自己，我是来自腾讯公司的徐东山，当前主要负责腾讯云安全的架构设计与产品规划等工作。 …

最底层是Linux+PC Server，上层软件是飞天，飞天是阿里云09年开始开发的一款分布式系统软件，主要提供分布式存储和分布式计算的调度、编程框架。开发语言是C++, 2013年该系统在生产环境支持调度5000台机器的集群。 飞天比较有意思的是模块的名字，都是从中国传统的神话中选择，比如分布式存储模块叫盘古，调度叫伏羲。 站在hadoop的角度看，飞天提供的功能和hadoop是类似的，在yarn之前，hadoop主要的编程模型是MapReduce，飞天的编程模型是一个有向无环图，而且除了支持批处理任务以外还支持常驻的Service。实现的细节上当然完全不同，首先实现的编程语言飞天就选择了C++。其他像安全、运维体系都有很大区别。 …

阿里云分布式关系型数据库（DRDS） Distribute Relational Database Service（DRDS）是分布式关系型数据库，它主要是一种水平拆分、可平滑扩容、读写分离的在线分布式数据库服务。 DRDS在使用的过程中存在于我们的应用和数据库之间，当单台的RDS没有办法满足我们大型业务的需要和支撑的时候，利用DRDS可以去增加更多RDS的服务的节点。DRDS在中间起到了一个转发的效果，所以DRDS本身是不存数据的，数据还是存在于RDS中。DRDS对于应用层是透明的，用户在使用DRDS的时候和直接使用RDS没有感观上的差别。 DRDS 主要解决了以下问题： 单机数据库容量瓶颈： 随着数据量和访问量的增长，单机数据 …

摘要： 本文盘点2016年数据库市场各个数据库市场、技术特点等 【数据库排名年度盘点】 说到盘点，首先肯定得看看DB-Engines的全球数据库排名。下表是2017年1月份前20名数据库引擎最新排名。 DB-Engines 2017-01数据库前20名列表 DB-Engines这个排名在业界引用得非常多，权威性也很高，总体来说比较客观，它不像很多咨询机构采用市场调查，或者某个数据库厂商发布的数据，而是通过以下6个方面的统计数据来综合评估各个数据库产品得分并给出综合排名： 数据库相关网站数量（当前通过google、bing、yandex搜索引擎统计） 公众关注度（通过Google trends计算） 技术讨论活跃度（通 …

本文作者：叶金荣，知数堂联合创始人，3306pai社区联合创始人 说说使用腾讯云数据库MySQL和CynosDB的几点感受。 近日对腾讯云旗下的两款数据库产品云数据库 MySQL(下面称为“标准版MySQL”，产品网址：https://cloud.tencent.com/product/cdb) 和MySQL版CynosDB(下面称为“CynosDB MySQL”，产品网址：https://cloud.tencent.com/product/cynosdb) 做了个小测试，在体验过程中有些个人看法，于是就有了本文。 1. 产品介绍体验 1.1 标准版MySQL 腾讯云数据库 MySQL（TencentDB for MySQL） …