【胡艺友】如何快速学习新技术 - 基于项目需求用2小时掌握AWS关键技术方案

浏览: 2436

1.  方法

a)      需求向导:只学习过往项目架构设计使用到的内容

b)      零基搜索:对a)结构成零散的点,再百度搜索各点的功能

c)      充分理解不同组件的关系

d)      与过往相同功能的工具进行类比

e)      通过视频网站了解工具界面及操作方法

2.  案例介绍

以某AWS云项目为例

a)      获取客户架构图,并找出不理解或新出现的内容

b)      通过谷歌了解AWS Data Pipeline/ S3/ Glue/ EMR/ EC2/ VPC等组件作用

c)      基于业务需求及架构逻辑流程理解功能模块之间的关系

d)      将AWS S3/ Glue/ EMR/ EC2与Oracle、Informatica/CDH/ 服务器进行类比

e)      在youtube上看相关组件操作,深化理

1.png

注:图片仅做参考示意,客户实际AWS架构图已替换,仅保留部分相关组件文字描述。

3.  基于上述案例介绍AWS各模块功能介绍

3.1   基础架构

l  EC2:当做云服务器即可

https://baike.baidu.com/item/亚马逊EC2/9162664?fr=aladdin

l  AWS S3:当做存储即可

https://baike.baidu.com/item/amazon%20s3/10809744?fr=aladdin

l  VPC:AWS公有云上的私有云服务

https://amazonaws-china.com/cn/vpc/faqs/

3.2   功能模块

l  EMR:AWS的hadoop

https://amazonaws-china.com/cn/emr/faqs/

l  AWS Direct Connect

docs.aws.amazon.com/zh_cn/directconnect/latest/UserGuide/Welcome.html

AWS Direct Connect 通过标准的 1 Gb 10 Gb 以太网光纤电缆将您的内部网络链接到 AWSDirect Connect 位置。电缆的一端接到您的路由器,另一端接到 AWS Direct Connect 路由器。有了此连接以后,您就可以创建直接连接到公共 AWS 服务 (Amazon S3) Amazon VPC 的虚拟接口,从而绕过您的网络路径中的 Internet 服务提供商。

3.3   ETL

l  AWS Glue:无Server的ETL工具

https://amazonaws-china.com/cn/glue/faqs/#

l  AWS Pipeline:数据操作配置操作工具

https://amazonaws-china.com/cn/datapipeline/

l  AWS Kinesis:视频数据处理ETL工具

https://amazonaws-china.com/cn/kinesis/

推荐 0
本文由 胡艺友_数据胡 创作,采用 知识共享署名-相同方式共享 3.0 中国大陆许可协议 进行许可。
转载、引用前需联系作者,并署名作者且注明文章出处。
本站文章版权归原作者及原出处所有 。内容为作者个人观点, 并不代表本站赞同其观点和对其真实性负责。本站是一个个人学习交流的平台,并不用于任何商业目的,如果有任何问题,请及时联系我们,我们将根据著作权人的要求,立即更正或者删除有关内容。本站拥有对此声明的最终解释权。

0 个评论

要回复文章请先登录注册