图论是计算机科学中最重要、最有趣的分支之一，对于存在拓扑关系的业务场景，理解和使用图可以对业务有很多帮助。本文主要针对图理论在大数据量下的技术和应用场景做全貌性的介绍。 1 图论的起源 在18世纪，一个叫做柯尼斯堡的城市，河流将该城市切成了四部分，割裂的土地之间通过七座桥连接起来了。 当时，有一个与柯尼斯堡的桥相关的问题：如何只通过每座桥一次而穿过整个城市。 为了分析并解决这个问题，人们把该问题做了进一步的抽象：将割裂的区域抽象成一个节点，连接两个区域的桥抽象成两个节点之间的一条边，进一步将该问题转换成了最早的有关图论的问题：柯尼斯堡七桥问题，也叫作一笔画问题。 到了19世纪50年代，又有了一个关于地图染色的问题将图论的影响和关注起 …

【编者Peter Ye按】 本篇文章的主体部分是腾讯云美女技术专家Vivian Lei在2017年11月8日第二届日知录企业存储峰会上的演讲《EB级别云存储是如何涨成的？》，本篇文章在日知录首发。转载经Vivian和日知录授权。本文标题略有改动，也即《腾讯云存储深度解读》。不过正文开始之前，也对我关于SDS分类图更新做一个说明。另外，微信公众号-乐生活与爱IT 曾在2018年1月19日发表过 《阿里专有云深度解读》。 我觉得，云存储，尤其是以对象接口形式呈现的，仍可以视为软件定义存储的一部分。换句话说，软件定义的存储，可以理解为API定义的存储。实际上，存储对OpenStack Cinder的支持就和这个类似。不过，最最厉害的莫过 …

云计算不但没有将企业级存储抛弃，而且还给了企业级存储新的发展机会。 RightScale的《2018年云状况调查》报告分析，针对不同工作负载、不同的云，自然需要不同的解决方案，企业面临数据中心最大的挑战必将是来自多云战略方面。在1000+名受访者中，81%的企业采用了多云战略。 无独有偶，之前的一个IDC调查发现：**80％的受访者表示将从公有云环境中回收工作负载，并有50％**受访者计划在未来两年内将公有云应用程序迁移到托管的私有或本地。 再早一些，2017年ESG的调查显示，超过半数的受访者已经从公有云撤回了一些工作负载，**68%**的受访者表示他们的应用程序仍然在存储在本地。 可见，对于企业用户来说，IT投资需要用在不同地 …

吴林、黄伟 近日，华为云自研关系型数据库 Taurus 公开亮相。作为华为云自研的最新一代云原生分布式数据库，Taurus 完全兼容 MySQL 8.0，采用计算与存储分离、日志即数据的架构设计，支持 1 写 15 读，性能达到原生 MySQL 的 7 倍。 过去多年，数据库技术本质上并没有出现颠覆式发展。作为核心基础设施，数据库是一款用户粘性非常高的产品，一旦核心业务数据落定，企业轻易不会尝试更换，因此很长一段时间内，大众习惯于老牌 IT 厂商垄断数据库市场的状况。然而，云厂商涉足数据库领域的消息近年层出不穷，比如 AWS Aurora、阿里云 PolarDB 以及华为云 Taurus。 在互联网、移动和物联网等新场景之下，图 …

看到谈到云存储基于图片存储，我正好近期两家都用过，谈谈我的感受。 整体感觉阿里云的图片存储服务还不错，值信赖的。阿里云的图片云存储服务，是在对象存储OSS产品的基础上，集成CDN，并提供图片业务常用的格式、裁剪、缩略、水印等多种图片加工处理的整体解决方案。 又拍云就是做图片处理起家的，控制台体验和使用的友好性上做的不错。 1、价格 近期阿里云存储产品的几次降价非常给力，直接让利客户的态度和做法值得肯定。回到图片服务，阿里云的图片加工处理是免费的，收取的是资源的使用费用，按量收费，阶梯计价，用的越多，单价越低。包括 阿里云： 存储费：根据图片大小和数量。最便宜区域 0.149/GB/月/青岛 流量费：分CDN回源流量和OSS下行流量。 …

一、OBS是什么 OBS即对象存储服务（Object Storage Service），是一个基于对象的海量存储服务，为客户提供海量、安全、高可靠、低成本的数据存储能力，包括：创建、修改、删除桶，上传、下载、删除对象等。 OBS系统和单个桶都没有总数据容量和对象/文件数量的限制，为用户提供了超大存储容量的能力，适合存放任意类型的文件，适合普通用户、网站、企业和开发者使用。由于OBS是一项面向Internet访问的服务，提供了基于HTTP/HTTPS协议的Web服务接口，用户可以随时随地连接到Internet的电脑上，通过OBS管理控制台或客户端访问和管理存储在OBS中的数据。此外，OBS支持SDK和OBS API接口，可使用户方便管 …

“华为云”崩了！IPFS才是********5G时代云存储的归宿 疫情之下，万物皆可“云”。上班族“云办公”、学生党“云上课”。自全国大中小学校陆续在网上开课，上千万家企业迎来新一波“复工潮”以来，各线上平台跻身“顶流”。但突如其来的流量暴增让各大线上平台上演“连环崩”，系统接连崩溃，加载错误等情况时有发生。 近日，据微博多位网友反映，华为云出现故障，华为云登录、管理后台无法访问。随后“华为云崩了、华为云挂了” 等词语登上了微博热搜。 网友在线吃瓜；这服务器是水果做的？ 针对华为云崩了一事，不少网友表示对公司业务影响很大，游戏全部宕机、公司电话被打爆、客户投诉公司跑路等，甚至有部分公司已经在开始计算要向华为云申请赔偿的金额。 云存储 …

前言 在互联网和大数据的背景下，越来越多的网站、应用系统需要支撑 海量数据存储、高并发请求、高可用、高可扩展性 等特性要求。传统的 关系型数据库 已经难以应对类似的需求，各种各样的 NoSQL（Not Only SQL）数据库因此而产生。 本文将分析 传统数据库 的存在的问题，以及几类 NoSQL 如何解决这些问题。在不同的 业务场景 下，作出正确的 数据存储 技术选型。 正文 1. 传统数据库缺点 缺点 解释说明 大数据场景下 I/O 较高 因为数据是按 行存储，即使只针对其中 某一列 进行运算，关系型数据库也会对 整行数据 进行扫描，从存储设备中 读入内存，导致 I/O 较高 结构化存储 不够灵活 存储的是 行记录，无法存储 灵 …

这一章节，我们主要讲，腾讯云上的产品。  1.腾讯云优势  2.腾讯云服务器  3.腾讯云存储  4.腾讯云数据库  5.腾讯云高级应用 腾讯云优势  腾讯云数据中心的建设，是符合国际ISO标准，以及国内的可信云、信息安全等级保护三级标准，这为数据中心的稳定运行以及安全提供了可靠依据。  腾讯在发展的过程中，同时运营着微信、QQ，微信支付三个拥有海量客户的业务，这三个业务每天都会产生巨大数量的数据需要做处理，腾讯云在支撑这些业务的发展过程中，形成了成熟的计算架构和团队，沉淀出了超大规模应用 的运营管理经验。腾讯在发展云计算的时候，将这些经验同时应用到了腾讯云计算的架构中  在处理海量数据的过程中，腾讯基于业务的需求，对于mysql数 …

1.日常的应用中，我们会使用多种方式来存储数据，以下哪个不是数据存储的介质? 　A .U盘 　B .激光笔 　C .磁带 　D .硬盘 2.访问控制RAM是一个稳定可靠的集中式访问控制服务，以下说法错误的是? 　A .主子账号单独付费，主账号可以监督子账号的费用情况 　B .主账号可以分配子账号具有哪些权限 　C .可以设置管理OSS权限和只读OSS权限 　D .子账号可以分配给企业成员或合作伙伴 3.以下哪个API是OSS上传文件的API接口? 　A .getobject 　B .putobject 　C .updateobject 　D .deleteobject 4.我们可以使用多种方式来上传或下载OSS中的文件，关于OSS文 …

MyISAM： 创建一个myisam存储引擎的表的时候回出现三个文件 1.tb_demo.frm，存储表定义； 2.tb_demo.MYD，存储数据； 3.tb_demo.MYI，存储索引。 MyISAM表无法处理事务，这就意味着有事务处理需求的表，不能使用MyISAM存储引擎。 MyISAM存储引擎特别适合在以下几种情况下使用： 1.选择密集型的表。MyISAM存储引擎在筛选大量数据时非常迅速，这是它最突出的优点。 2.插入密集型的表。MyISAM的并发插入特性允许同时选择和插入数据。例如：MyISAM存储引擎很适合管理邮件或Web服务器日志数据。 InnoDB： InnoDB是一个健壮的事务型存储引擎MySQL 5.6.版本以 …

背景：5月23-24日，以“焕启”为主题的腾讯“云+未来”峰会在广州召开，广东省各级政府机构领导、海内外业内学术专家、行业大咖及技术大牛等在现场共议云计算与数字化产业创新发展。 来自腾讯TEG技术工程事业群架构平台部的刘金明在腾讯“云+未来”峰会的「开发者专场」做了主题为“腾讯云EB级对象存储架构剖析及实践”的技术内容分享。 关于对象存储，我们先从腾讯存储平台TFS开始说起，早在2016年腾讯推出了自研的云存储平台TFS，几年间为相册、QQ、微信、微云、腾讯视频等腾讯内部产品提供了优质的存储服务。 2013年，腾讯云把存储能力包装之后开始对外开放。 2014年，腾讯存储突破500PB，数据量达到万亿级别。 2015年，引擎升级商用标 …

配置腾讯云COS图床图床是什么腾讯云COS是什么腾讯云提供的对象存储类型计费项计费周期使用腾讯云COS搭建图床上传图片到腾讯云COS的总结网页端在控制台上传使用客户端使用 REST API使用 SDK实战iOS 端MWeb自动上传Ubuntu 上Typora使用腾讯云COS做图床 图床是什么 图床，也就是专门提供存储图片的地方，我们只要通过图床提供的 API 接口，把图片上传上去，就可以通过外链访问了，根本不用操心图片是怎么存的，硬盘空间不够了，硬盘坏了，访问速度比较慢等等问题，这些图床都会帮我们搞定，他们会用各种技术帮我们做图片相关的优化和服务，比如多机互备、CDN 加速、图片处理、图片鉴黄、文本识别等等。 腾讯云COS 是什 …

在云计算的世界里，如果云厂商有能力将服务水平提升一个等级，则意味着在未来一段时间里，将具备差异化竞争力，也很容易在市场中形成独树一帜的优势。 华为云存储就在云计算基础服务领域中干着这样一件事情。近日，在“成都·选择不凡-华为云城市峰会2019”上，华为云正式发布存储All-Flash战略，并推出战略落地的首款产品——全新一代极速IO云硬盘，这标志着华为云在存储这项基础云服务上实现了大幅的性能提升，率先引领云上存储从毫秒进入到微秒时代。 在华为云看来，以Flash介质替代HDD、数据处理从毫秒进入到微秒，背后是存储架构、芯片、算法等一系列技术的重构与突破。 华为云CTO张宇昕介绍华为云存储All-Flash战略 华为云之所以如此果敢地 …

本文来自OPPO互联网技术团队，如需要转载，请注明出处及作者。欢迎关注我们的公众号：OPPO_tech 图论是计算机科学中最重要、最有趣的分支之一，对于存在拓扑关系的业务场景，理解和使用图可以对业务有很多帮助。本文主要针对图理论在大数据量下的技术和应用场景做全貌性的介绍。 1. 图论的起源 在18世纪，一个叫做柯尼斯堡的城市，河流将该城市切成了四部分，割裂的土地之间通过七座桥连接起来了。 当时，有一个与柯尼斯堡的桥相关的问题：如何只通过每座桥一次而穿过整个城市。 为了分析并解决这个问题，人们把该问题做了进一步的抽象：将割裂的区域抽象成一个节点，连接两个区域的桥抽象成两个节点之间的一条边，进一步将该问题转换成了最早的有关图论的问题：柯 …

导语 | 缓存+存储的系统架构是目前常见的系统架构，缓存层负责加速访问，存储层负责存储数据。这样的架构需要业务层或者是中间件去实现缓存和存储的双写、冷热数据的交换，同时还面临着缓存失效、缓存刷脏、数据不一致等问题。本文是对腾讯云数据库高级产品经理邹鹏老师在「云加社区沙龙online」的分享整理，希望与大家一同交流 点击视频，查看完整直播回放 前言 在互联网和移动互联网两波浪潮的推动下，存储技术有了飞速发展。移动互联网用户在过去十年增长了10倍，用户的增长带动了数据量的指数级增长，因为激烈的市场竞争，企业和用户对应用程序的响应性能要求越来越高，在完美应对庞大的用户规模和海量数据集的同时保证优秀的产品体验，是数据库面临的挑战。 在机械硬 …

这三种存储，分别对应了不同的访问协议，这也就决定了他们的本质差别。 先说一下文件存储，主要操作对象是文件和文件夹。以 NFS 为例，文件相关的接口包括：LOOKUP/ACCESS/READ/WRITE/CREATE/REMOVE/RENAME 等等，文件夹相关的接口包括：MKDIR/RMDIR/READDIR 等等。同时也会有 FSSTAT/FSINFO 等接口用于提供文件系统级别的信息。POSIX，SAMBA 等也是文件存储协议。协议更注重接口的灵活，以及访问权限控制。 块存储，主要操作对象是磁盘。以 SCSI 为例，主要接口有 Read/Write/Read Capacity/Inquiry 等等。FC，iSCSI，也是块存储协 …

一、导语 10月10日晚，「火星总编时刻」第49期在火星社群展开，本期对话主题为本期对话主题为「YTA PK IPFS，去中心化存储价值重心何在?」。由火星财经合伙人、总编辑李劳深度对话YottaChain创始人王东临。 YottaChain区块链存储公链创始人王东临，是中国十大青年科学家、密码学分布式存储科学家、中国软件业十大杰出青年、OASIS国际工业标准组织UOML-X技术委员会主席、火星大学导师。王东临具有20年以上的密码学应用经验和10年的分布式存储经验，均达到世界顶级水平，先后发明十多项国际领先技术，创造多个中国IT业的里程碑，拥有200多项国内外专利。 二、YTA（YottaChain） …

AzureStack是Azure的私有云解决方案。AzureStack可以帮助用户实现混合云的部署模式。 本文将介绍混合云的模式下，Azure作为计算资源，AzureStack作为存储资源。如下图： 在Azure上我们创建Hadoop的计算资源，在AzureStack上创建存储账户，把需要分析的数据存储在Azure Stack上。把Hadoop的存储采用wasb协议指向AzureStack的存储账号。 具体部署过程如下： 一 在AzureStack上创建存储账户 在AzureStack的portal页面上创建一个存储账户：hdisa 二 在Azure上创建Hadoop集群 1 选择HDInsight Clusters 2 选 …

因为开年过后一个比赛的选题和云计算有关，所以通过查阅论文，翻阅相关书籍好好把云计算的概念温习了一下。本文对云计算的概念以及云计算分类，应用以及国内外云计算发展等做了概述。 转载请注明原出处。 开篇一张图（图片为《云计算架构与实践》第一章内容） 下图看不清点击图片链接地址查看。 一下内容皆是自己学习过程整理在笔记本上的笔记。如有问题敬请告知。 1-云计算定义  目前对云计算的定义有不下百种说法。云计算是一种通过Internet以服务的方式提供动态可伸缩的虚拟化的资源的计算模式。现阶段广为接受的是中国云计算专家咨询委员会副主任、秘书长刘鹏教授给出的定义：“云计算是通过网络提供可伸缩的廉价的分布式计算能力。”；美国国家标准与技术研究 …

华为也需要IPFS 如今提起华为，大家都不自觉地与5G联系起来，并对华为的研发进程竖起大拇指。华为的发展方向不仅在5G领域，在集成5G Soc芯片和鸿蒙系统，以及量子计算机上，华为都有着非常深的建树。 华为云宕机事件 然而4月10日上午，华为遇到个“头疼”的问题，华为云突然宕机，短时间内大量使用华为云的用户表示登录异常、管理后台无法访问等问题，有客户表示业务已经停摆。 据微博多位网友反映，华为云登录、管理后台均无法访问，随后“华为云崩了、华为云挂了” 等词语登上了微博热搜。 针对华为云崩了一事，不少网友表示对公司业务影响很大，游戏全部宕机、公司电话被打爆、客户投诉公司跑路等，甚至有部分公司已经在开始计算要向华为云申请赔偿的金额。 对 …

本文单从存储成本角度对比了自建Ceph存储和业界公有云存储的硬件成本，不包括IDC带宽成本。 统计Ceph集群的用到的主要设备为： OSD、MON、RGW服务器 、TOR交换机、 机架。 下表解释： Port ： 交换机端口年成本 Rack ： 机架租赁年成本 Server： OSD/MON/RGW 服务器的成本。 OSD成本较高，采用了万兆网卡和12*4T硬盘。 成本数据来源 阿里： https://www.aliyun.com/price/product?spm=5176.7740655.2.3.itdt9W#/oss/detail …

本文转载自：https://yq.aliyun.com/articles/7483?userCode=xo0yanhm 阿里云的产品种类繁多，今天让我们一起来了解下对象存储（Object Storage Service，简称OSS）吧！ 什么是对象存储呢？ 简单来说，对象存储OSS是阿里云提供的海量、安全和高可靠的云存储服务。存储容量和处理能力的弹性扩展，按量付费真正使您专注于核心业务。您还可以方便的同其他云产品搭配使用，广泛的应用于海量数据存储与备份，数据加工与处理，内容加速分发，业务数据挖掘分析等多种业务场景。 对象存储 OSS，可以理解为一个即开即用，无限大空间的存储集群。相比传统自建服务器存储，它有哪些优势呢？下面我来给大家 …

原文链接 “如果有款存储产品能在保证业务正常运行的时候节省60%的成本，我会毫不犹豫选择它”。 我的工作是做生物基因测序的，我们公司很早就在云上搭建了数据分析平台（云的优势不多说了，省心省钱），数据通过采集设备生成后，会立即上传到云端进行预订的测序分析。当然了，考虑到算法更新，这些数据都是保存在云端的，有了新的分析方法就可以进行更多维度的分析，无需重新采集。 存储周期长是基因数据的特点，在采集后的最初几个月内会被频繁访问，对于数据实时的响应性要求极高。但经过开始的几个月后，原始数据访问频率就开始大幅下降，所以我们尽量会寻找不同访问特性的存储，去降低总存储成本。 之前我们用的一直是阿里云的OSS标准存储，虽然速度快、延迟低、吞吐能力 …

10月27日下午，2018中国计算机大会上举办了主题“存储软硬件之国产化挑战与机遇”的技术论坛，一起探讨存储软硬件栈上的关键系统与技术的国产化发展道路。论坛上，阿里云分布式存储团队架构师黄硕针对存储软硬件国产化进行了《云上自研分布式文件系统服务的设计与实践》的报告。 专家简介： 黄硕，阿里云分布式存储团队架构师，主要从事分布式文件系统上云、元数据管理、分布式一致性协议、高性能存储引擎与QoS等相关架构设计和研发工作。 黄硕从云上分布式文件系统（DFS，Distributed File System）的价值出发，详述了存储发展的关键推动力——大数据分析，包括大数据分析的数据量增长前景、存储方案发展历程与现状等，对比了DFS服务相对于开 …

结论：  阿里云存储 七牛云存储 标准：REST、HTTP 99%符合 50% 基本功能：送二级域名、绑定域名、CDN 支持 支持 自定义文件HTTP header 支持 少量支持 高级服务：图片处理 不提供 很完善地提供 收费策略 收费 小流量免费。大流量收费。 官方PHP SDK 差，依赖亚马逊http库，而不是PHP官方PEAR HTTP_Request2 差 在国内的VPS服务器厂商中，阿里云做的很好，所以项目倾向于使用阿里云开放存储服务（aliyun OSS）。 把阿里云存储官方混乱的PHP SDK 重写成PEAR，然后作为apk下载使用。 然后想把图片服务器也迁移到云存储，这样不占用VPS带宽。这时候才发现 阿里云OSS …