Google云服务词汇表
发布日期：2022-03-10 00:55 点击次数：189
|
最近开始接触Google云，简单做了一些笔记，记录一下Google中的各种产品和概念。文中不好打缩进就用减号代替一下吧，表示层级概念常规概念GCP Google Cloud Platform，对标微软Azure云，提供各种云服务。-Cloud IAM身份和访问权限管理（Identity and Access Management，IAM），包括一组预设权限、API、工具。是预设的平台功能，贯穿于所有云服务之中。简单来说就是GCP的权限系统。G Suite (现在改名叫做Google Workspace了)对标微软的M365（原O365），提供在线Office、会议、聊天等功能。有14天免费试用。Cloud Shell免费产品。这个是一个在Web上使用的命令行工具，可以用这个来管理自己的各种GCP服务。一个很有意思的细节是，他本身是一个GCE的虚拟机，自带5G的免费空间装载于$HOME目录。不过长期不用的话会被回收掉的。平台/算力产品GCE Google Compute Engine，GCP服务中的一项。就是提供虚拟机服务的平台。支持全球负载均衡。按秒计费。-抢占式虚拟机实例（Preemptible instance） 比常规虚拟机省钱80%的用法，其实就是把平台里的富裕资源拿出来卖，不提供任何保障。买一次最多管24小时，平台里的普通实例用户需要性能的时候，平台会随时关停抢占式主机，留30秒给用户做关机处置动作。Dataproc等产品可以用这个东西省钱。同类产品在Azure云上有“低优先级 VM”、亚马逊有AWS Spot Instances，意思都差不多。 -持续使用折扣，无需用户操作，只要在结算月份内持续使用特定资源就自动应用折扣。 -承诺使用折扣，购买折扣合约，按年买，按月扣。每月支付折扣价的费用，不管用不用都要扣，和移动套餐包年意思差不多。 -托管实例组 (MIG)，由GCP自动管理的虚拟机组，每个实例都是一样的，可以自动扩缩、自动修复、区域（多地区）部署和自动更新。这个可以搭配抢占式虚拟机用以省钱。 -非托管实例组，由用户自己管理的实例组，每个实例都可以单独设置。因为是异构架构的，所以不支持自动扩缩和自动修复，不支持滚动更新和多区域，也不允许使用实例模板。如果要对异构架构做负载均衡，或者想自己管理，就用非托管实例组。注意，不支持多区域，做负载均衡就需要单独去买负载均衡产品了。-Region、Zone 分别叫做区域和地区。注意真钱麻将游戏，这个和存储服务中的叫法有差异。一个Region类似于us-west1 真钱麻将游戏，它有3个zones叫做us-west1-a、us-west1-b 和 us-west1-cGoogle Kubernetes EngineK8S的云端版本，自动扩缩。可以挂接永久存储空间，所以不仅仅只能做无状态应用。它也支持用抢占式虚拟机省钱的用法。按秒计费Container Registry私有的Docker存储库。常常和GKE、还有CI/CD集成工具搭配使用。Google App Engine无服务器应用平台，可以对等理解成Azure上的Azure Functions 或者Azure App service产品（更像后者）。支持自动扩缩，支持Node.js、Java、Ruby、C#、Go、Python 或 PHP。支持运维套件生态产品，利用 Cloud Monitoring 和 Cloud Logging 监控应用的运行状况与性能，并借助 Cloud Debugger 和 Error Reporting 快速诊断和修复 Bug。支持版本控制、流量拆分（A/B测试以及逐步发布）。适合于做web应用，微服务等。 -App Engine 标准环境 在沙箱中运行的容器化环境。按用量计费，甚至可以直接缩减到0实例，所以很便宜。 -App Engine 柔性（flexible）环境与标准环境相对的概念。可以自定义GCE虚拟机，也就可以使用任何自定义的库了，同时也就更贵，需要更多的维护动作。柔性环境虚拟机实例每周重启一次。缩减不能到0，至少需要1台实例。 Cloud Functions理解成Azure云上的Azure Functions就行了，按用量计费、自动扩缩，无服务器应用。计费的用量包括：函数运行的时长、调用次数、预配的资源数量（比如网络资源）。因为有自动扩缩，所以这个计费较为复杂，不过有免费层，即超过了一定的初步用量才会开始计费，所以做点小东西还是非常实惠的。另外，缩减的时候最小是可以做到0的。Cloud Dataflow无服务器流式数据处理和批量数据处理服务，用来做实时数据分析的。支持自动扩缩、支持数据重排。常和Pub/Sub搭配使用。按秒计费。Pub/Sub就是一个高吞吐量的消息队列。可在全球范围内路由消息，从而简化多区域系统。可以根据特性过滤消息，从而减少传送给订阅者的数据量。按用量计费，每个月前10G是免费的。另有一个轻量化的版本叫做Pub/Sub Lite，存储量有限制，由全球服务降为区域服务，价格更低，吞吐量小一个数量级。AI Platform一组AI相关的工具集的全称，名字都是AI开头的。其中一些是免费的，一些是付费的。按训练模型和获得预测结果两种方式来计费。所以实际上工具类的组件基本都是免费的。同时，使用到的各种其它基础资源都按其各自的计价方式另行计费存储产品Persistent Disk永久磁盘，相对于local Disk而言的。有SSD和HDD两种，就是虚拟硬盘，可以放在GCE或者GKE里用。上限是64T。注意一个奇怪的知识点，SSD的性能，也就是IOPS并不是一致的，买的越大，给的IOPS越高。所以买了较小的SSD速度不够好，可以通过加大容量的方式来增加性能。这一点和Azure云是一样的，但是Azure卖的更灵活，可以不加大容量，直接买更高的ＩＯＰＳ。另外，为了高可用，他们还有区域永久和地区永久的概念，即在多区域里高可用的永久磁盘。 Local SSD本地SSD，这个词汇很有迷惑性，实际上是一种易失存储，只适合用于缓存、处理空间或低价值数据等临时存储用途。可以放在GCE或者GKE里用。上限是9T。 Cloud MemorystoreRedis 和 Memcached的云端服务版本，提供亚毫秒级数据访问的应用缓存。容量可以到5T，QPS是百万级的。计费与硬件、流量有关。Transfer Appliance严格来说Transfer Appliance是一种硬件设备，目前有两款型号可选。实际上是一种“用卡车运硬盘”的数据传输方式。在指定地区可以使用该服务，运一次数据大约需要一周时间，所以适合超大量的数据，比如超过10Ｔ以上。计费按次收取使用费、外加运输费，如果超过了约定的日期还没有寄送完成，还会按天收取滞纳金。 -Rehydrator 这是一个虚拟机镜像，初始化出来用来和Transfer Appliance配套使用。硬盘运到Google之后，他们会把数据丢进Storage里面，这时候数据是加密状态的。Rehydrator就是用户自己来执行解密以完成复原数据操作的工具。因为操作比较耗时，所以使用此虚拟机时会需要设置提醒，一旦开始执行数据复原，是不支持取消的。所以严格来说，用一次Transfer Appliance不光要付使用费和运输费，还要为使用Rehydrator复原的虚拟机和Storage付费。同样的，用一次Transfer Appliance所需要的时间不光是运送，还要考虑复原。解压解密海量数据需要的时间可不少，不要把时间算错影响工作。数据库/大数据产品Cloud Dataproc大数据产品，做数据分析用途的，用来构建开源的Apache Spark、Apache Hadoop、Presto 及其它 OSS 集群，支持GKE容器化，自动扩缩，内置 Cloud Storage、BigQuery、Cloud Bigtable、Cloud Logging、Cloud Monitoring 和 AI Hub 集成 Cloud BigtableNoSQL 数据库服务，特点是高吞吐，延迟时间始终在 10 毫秒以内，每秒可处理数百万个请求。可轻松连接到 Google Cloud 服务（例如 BigQuery）或 Apache 生态系统Cloud Datastore适用于 Web 应用和移动应用的NoSQL 数据库。提供ACID 事务、类似 SQL 的查询、索引。计费方式是按存储空间和操作次数双重计费的。Cloud FirestoreCloud Datastore的换代产品，可扩缩的无服务器文档数据库。适合于开发移动、Web 和 IoT 应用，与 Firebase 以及 Cloud Functions 和 BigQuery 等 Google Cloud 服务无缝集成。计费是按存储量、操作次数、使用带宽三重收费的。Cloud SQLMySQL、PostgreSQL 和 SQL Server 的网络服务版。提供高可用，易于与GKE 和 BigQuery 等集成。支持时间点恢复。支持扩容，其上限是64核心、400G内存、30T存储。需要注意的是，他们的高可用（HA）是由专门的选项开关来控制的，其中SQL Server由于原装就有Always On高可用功能，所以概念上可能会重叠，实际上用Cloud SQL并不基于Always On。按秒计费。和GCE一样，有承诺使用折扣。BigQuery很有特点的产品，关键字：无服务器、多云、数据仓库。特点是分析速度快，总拥有成本低。可以做实时数据分析、自动高可用、支持符合 ANSI:2011 规范的标准 SQL 方言。提供免费的每月10G活跃存储和1T查询数据的沙盒环境，这个沙盒比较特别，甚至不需要开支付账号，也不用信用卡就可以免费用。Cloud Spanner关系型数据库，全球扩缩，5个9的高可用，跨区复制。按节点和存储收钱，以及流量计费。Cloud Dataprep by Trifacta用于数据清洗、转换、模式匹配、采样、剖析的一款全能型数据清洗工具。不是google的产品，而是合作伙伴Trifacta的。如果是流式数据的话，还可以直接用Cloud Dataflow来执行Cloud Dataprep，与GCP的集成度很高。除了功能丰富，还有一个特点就是它有交互式的web界面。计费由设计和使用两段分别计费。Cloud Datalab交互式数据分析和机器学习环境，交互界面是Web形式。它是被打包到虚拟机里运行的，所以本身并不需要付费，自身只是一个镜像。但是他会用到虚拟机、Cloud Storage、BigQuery、Cloud Machine Learning、Cloud Dataflow等诸多付费服务，这些服务按各自的费用进行计费。Cloud DLP（Data Loss Prevention）数据脱敏和安全防护产品。可以自动把敏感信息脱敏，也可以加密。比如对Cloud Storage里的静态数据进行加密；也可以操作传输中的数据，比如Dataflow。按检索和转换2个操作的数据量计费。网络产品Cloud Load Balancing这个是单卖的网络产品（某些服务自己带负载均衡），提供全球范围的自动扩缩和负载均衡服务。用于 HTTP(S)、HTTP/2、gRPC 、TCP/SSL 、 UDP、QUIC 等所有流量，还可以使用 HTTPS 负载平衡和 SSL 代理功能来终止 SSL 流量Cloud Storage 网盘服务，对标AWS的S3服务或者Azure的Storage。-Bucket 和AWS的Bucket、Azure的容器一样，存储单元。-Region注意Cloud Storage的区域和GCE的区域概念上相同，但是使用上有区别。区域的名字类似于us-west1，和GCE一样，但是用户无需关心Zone的问题。GCS还有双区（Dual-regions）和多区（Multi-regions）的概念。双区和多区都是预设的，不能由用户自由搭配。双区是ASIA1、EUR4和NAM4这三个；多区是ASIA、EU、US这三个，都是固定选项。所以如果企图对全球提供低延迟的服务，买下全部3个多区是不合适的，因为澳洲、非洲、南美、英国（他们现在脱欧了）都不在3个多区范围内。-ACL访问控制列表，管存储对象权限的。注意的是桶和对象是分开的权限，并没有继承关系。所以一个对桶没有权限的人实际上也是可以访问有权限的文档的。对没有google账号的人可以使用“签名Url”的方式提供可用的链接来访问。-Cloud Storage FUSE这是一个没有质保的开源社区工具，可以把Bucket作为文件系统装载到Linux 或 macOS虚拟机里（包括虚拟机和本地系统）。工具本身是免费的，在google的文档里也有指引，但是，这东西绝对不提供任何质保。同时，因为使用API操作Cloud Storage了，所以需要为API请求次数，以及桶的存储容量付费。Cloud Interconnect专用互连，往google连专线，速度最快。分为两种：专用互联、合作伙伴互联-Cloud Dedicated Interconnect专用互连，对客户网络条件、地理位置都有一定要求需要和本地网络运营商支持。网络之间传输大量数据，比在公网上加带宽更加经济实惠，主要特点是带宽大。-Partner Interconnect和专用互联类似，本地网络运营商和google直连，顾客直接购买接入。和专用互联的区别是带宽是接入的顾客分享了。其它概念是一致的。Direct Peering直接对等互联，这个东西概念上和专用互联相似，把自己的网络连接到google云，但是不是专线。实际上就是把自己的本地网络变成了google的边缘网络。开通这个服务本身是免费的，费用按实际网络流量收取，但是需要开通的话，仅限于已开通服务的某些地区。本地网络直接访问 Google Workspace 和 Google API 的时候可以用这个服务。Cloud VPN顾名思义，就是google的VPN产品。最高提供3G的带宽。分为标准VPN和高可用VPN，后者用2个IP提供更高的可用性。需要注意的是，VPN提供的是基于现有网络的联通性服务，并不提高现有带宽。Cloud Router顾名思义，就是路由器产品，注意它是网络服务，而不是实体设备，用来做自定义的动态路由的。可与传统网络和 Virtual Private Cloud (VPC) 网络配合使用Cloud CDN顾名思义，就是google的CDN服务。支持HTTPS。集成运维套件，直接可以得到原始请求的日志。带宽和请求数量双重计费。 -CDN Interconnect这个是CDN的第三方版本。其他运营商可以和google直连，然后对用户提供CDN服务，其实就是google的合作伙伴卖的CDN。计价由google代为收取。工具类Stackdriver（Google Cloud's operations suite）运维套件，以前叫作Stackdriver。由很多组件构成，有提供免费配额，按用量计费。 -Cloud Logging 从任何来源提取自定义日志数据、安全地存储、搜索、分析您的日志数据和事件，可以与 Cloud Monitoring 集成来发送提醒。支持把按特定格式错误汇总成Error Reporting，以便全局集中管理错误。也支持把日志导到各种其他产品里去。 -Cloud Audit Logs 为每个 Cloud 项目、文件夹和组织维护审核日志，可以用来知晓“哪些用户何时在何处执行了什么操作”-Cloud Monitoring字面含义，提供监控。在主机上或者替他环境里，需要安装一个开源的代理（agent）守护程序，可以把虚拟机收集到的磁盘、CPU、网络和进程指标发送到Monitoring里。不装也是可以的，他会监视一些常规指标，但是google推荐安装到每一台虚拟机里。在需要做自定义指标监控的时候会比较方便。-Cloud Trace从应用收集延迟时间数据的。这个是收费的。-Cloud Debugger支持您实时检查正在运行的应用的状态，既不需要停止应用，也不会拖慢应用运行速度。当您在源代码中的任意位置截取调用栈和变量的快照时，您的用户不会受到影响。您可以使用该功能了解生产环境中的代码行为，并分析其状态，从而找到难以发现的 Bug。这个是免费的-Cloud Profiler能够持续分析整个应用中执行的 CPU 密集型或内存密集型函数的性能。这个是免费的Secret Manager存储 API 密钥、密码、证书和其他敏感数据，和GCP的IAM集成。按存储和访问次数双重计费。功能对标Azure的Key-Valut。Key Management这个是也是密钥管理工具，和Secret Manager不同的是，Key Management管理的是密钥这件东西，提供加密、解密、签名、验签服务；而Secret Manager提供的是“敏感数据”的保存和取回。Key Management主要用于需要合法合规的场合里，统一保管密钥，并支持使用大量的加密算法。这个服务由几种子服务构成，每一种的计费规则都是单独的，基本都是按用量计费。Deployment Manager用 yaml 格式声明云资源，然后可以批量部署这个yaml所指定的资源。支持Python 或 Jinja2 模板将配置参数化，相当于一个云端版本的jira。免费产品。Cloud Scheduler图形界面的cron 作业调度服务，支持 App Engine、Cloud Pub/Sub 和任意 HTTP 端点，允许作业触发 Compute Engine、Google Kubernetes Engine 和本地资源。按月使用次数计费，一次10美分，算是不便宜的了，做一些运维动作还可以接受，做业务动作怕会用不起。Google Cloud Directory Sync (GCDS)一个用来将 Google 帐号中的数据与 Microsoft Active Directory 或 LDAP 服务器同步的工具。这个只同步账号、联系人、群，不同步其各自的内容（如日历、邮件、文件）。Cloud Endpoints集中管理API的认证、部署、加密、日志的平台服务。按调用次数收钱，阶梯制定价。
|
