PowerPoint Presentation

Size: px

Start display at page:

Download "PowerPoint Presentation"

眠策卜
5 years ago
Views:

1 搭建无服务器应用的 10 个秘密黄卓斌,AWS 解决方案架构师

2 议程 1. 快速搭建 Web 应用 2. 如何正确响应 3. 调用方式 4. 消息队列消费 5. 优化性能 6. AWS Lambda 的启动 7. 关于 Amazon VPC 8. 并发控制 9. 网关与其他 AWS 服务集成 10. 网关与后端 HTTP 服务集成

3 什么是无服务器应用无需维护服务器灵活自动扩展高可用没有闲置的资源

4 无服务器应用组件计算数据流数据库 AWS Lambda Amazon Kinesis Amazon DynamoDB 网关存储消息 Amazon API Gateway Amazon S3 Amazon SQS / SNS 其他更多更多

5 快速搭建 Web 应用

6 Amazon API Gateway + AWS Lambda 模式 AWS Mobile apps Internet Amazon API Gateway AWS Lambda Other AWS services Amazon S3 无需维护基础架构, 只需要上传代码即可搭建无服务器 Web 应用

7 三步完成 Amazon API Gateway 与 AWS Lambda 的集成

8 1. 新建 API 并创建一个资源 1. 勾选代理资源点创建资源

9 2. 选择要集成的 Lambda 函数 2. 选择区域以及对应的 Lambda 函数保存保存时弹出提示将权限添加到 Lambda 函数点确认

10 3. 部署 API 可以在 Console 上进行 API 在线测试 3. 直接部署 API 部署完之后就可以访问 API 了

11 Amazon API Gateway 消息传递给 AWS Lambda Amazon API Gateway 触发 AWS Lambda, 并把以下信息在 JSON 发给 Lambda: Amazon API Gateway JSON AWS Lambda Request Method GET/POST Request Header X-header-extend: string Request QueryString example.com/?min=1&max=2 Client Information Source IP, useragent Request Body Auth, Account

12 AWS Lambda 如何返回结果

13 AWS Lambda 应该如何返回结果 JSON Amazon API Gateway AWS Lambda AWS Lambda 响应示例 Node.js AWS Lambda 响应格式要求 { } "isbase64encoded" : "boolean", "statuscode": "number", "headers": {... }, "body": "JSON string" 具体参见文档

14 AWS Lambda 的调用方式

15 同步调用 AWS Lambda Amazon API Gateway 触发 Lambda Lambda 函数运行最终结果返回 AWS Lambda AWS IoT

16 异步调用 AWS Lambda Amazon S3 触发 Lambda 返回确认消息 Lambda 函数运行 AWS Lambda Amazon CloudWatch 事件

17 Amazon API Gateway AWS Lambda 调用 ( 进阶 ) Amazon API Gateway Trigger AWS Lambda 默认是同步调用可以实现异步调用 AWS Lambda 吗? 为什么 Amazon API Gateway 要异步调用 AWS Lambda? 利用 Lambda retries 同步调用是不重试的, 异步调用重试 2 次突破 API Gateway connection timeout 29s Performance 原因 JSON API Gateway Lambda

18 异步调用 Amazon API Gateway 调用 AWS Lambda 的 Header 指定 : X-Amz-Invocation-Type: Event 则是异步调用 ( 事件方式 ) 取消 Lambda 代理集成模式在 Amazon API Gateway 的集成请求中配置增加一个自定义 Header 名称是 X-Amz- Invocation-Type 属性是 'Event'

19 流式调用 Amazon Kinesis Amazon DynamoDB Stream AWS Lambda

20 无服务器的消息队列消费架构

21 传统的处理消息队列的方式定时任务触发批量读取 SQS Message 应用集群 Amazon SQS Delete Message 监控堆积的消息数量增减应用服务器数量

22 Amazon SQS 触发调用 AWS Lambda 自动触发并自动完成 : 批量读取 SQS Message Amazon SQS Lambda 函数正常完成自动删除 SQS Message AWS Lambda Lambda 函数只需负责处理所收到的 SQS Message

23 AWS Lambda 优化性能

24 设置内存当前 AWS Lambda 最大支持 3GB 内存自动匹配相应的 CPU 资源

25 内存大就价格更高吗? 一个大数据运算的例子 : 128 MB sec $ MB sec $ MB sec $ MB sec $ 参考

26 AWS Lambda 启动

27 AWS Lambda 原理

28 AWS Lambda 的启动下载你的 code 启动新的 container 引导 runtime 启动你的 code Cold start Warm start AWS 优化的部分你优化的部分

29 利用 AWS Lambda 容器重用机制有效地重用容器资源 var AWS = require('aws-sdk'); var uuid = require('node-uuid'); var db; 容器生成的时候执行在容器重用, 即 Lambda Function 第二次调用时不再执行 Lambda Function 函数被调用时执行 exports.myhandler = function(event, context, callback) { if (!db db.isconnected()) { db = setupconnection(); } // Rest of logic } P99 情况不会遇到冷启动如果经测试, 冷启动时间较长, 影响用户体验, 可以进行定时预热, 特别是 Java 和 C# 的应用并发预热, 可以利用 Amazon CloudWatch 定时任务触发预热的 AWS Lambda, 利用诸如 Node.js 的非阻塞机制进行并发预热一定数量的容器

30 AWS Lambda 与 Amazon VPC

31 AWS Lambda in Amazon VPC 下载 your code 启动新 container 建立 VPC ENI 连接 VPC ENI 引导 runtime 启动 code Full cold start Warm start 如非确实必要, 则不要将 Lambda 运行在 VPC 模式 Lambda 的 VPC ENI IP 地址只会是私有 IP

32 AWS Lambda in Amazon VPC 最佳实践至少配置运行在两个可用区给 Lambda functions 配置专门的子网 subnets Lambda 的子网要有足够的 IP 地址, 以应对潜在的并发扩容

33 AWS Lambda in Amazon VPC 最佳实践如果 Lambda 函数需要发起访问 Internet, 需要配置 NAT, 参考 : 给 AWS Lambda 的 Role 配置权限 ec2:createnetworkinterface, ec2:describenetworkinterfaces, ec2:deletenetworkinterface 以上三个权限包含在了系统自带的 AWSLambdaVPCAccessExecutionRole 中

34 AWS Lambda 并发控制

35 AWS Lambda 并发 AWS Lambda 根据增加的流量动态扩展容量突增流量,Lambda 将立即根据预定量增加您的并发执行函数 500 增加您的并发执行函数直到达到账户的安全限制, 或并发执行的函数数量足以成功处理增加的负载 THINK CONCURRENT, NOT TPS

36 需求 AWS Lambda 调用的后端系统顶不住那么多突发流量怎么办? 同一个账号, 测试环境的 Lambda 占用过多并发, 生产环境受影响? 关键应用怎么确保有足够的并发? 怎么暂停 Lambda?

37 AWS Lambda 并发控制设定单个 Function 的保留并发 1. 预留 2. 封顶 3. 停用

38 Amazon API Gateway 与其他 AWS 服务集成

39 例如 : 直接写 Amazon DynamoDB AWS Mobile apps Internet Amazon API Gateway Amazon DynamoDB

40 为什么经 Amazon API Gateway 访问 AWS 其他服务更灵活的认证方式访问 AWS 服务而不使用 AWS API 所要求的认证利用 API Gateway 所提供的功能 : 缓存, 数据转换, 响应码转换等减少中间的应用服务层, 例如不用 AWS Lambda 一些旧有的应用, 特殊的应用, 不方便修改为直接访问 AWS API

41 直接写 Amazon DynamoDB API Gateway Integration 中配置集成 AWS 服务服务选择 Amazon DynamoDB HTTP 方法 POST 操作 PutItem 设置执行角色的 Role ARN Amazon API Gateway 作为 Amazon DynamoDB 的 Proxy 参考文档

映射模版写 Amazon DynamoDB 举例, 在 POST 中带参数 https://xxx.

42 映射模版写 Amazon DynamoDB 举例, 在 POST 中带参数 Amazon API Gateway 映射模板

43 Amazon API Gateway 与后端 HTTP 服务集成

44 HTTP 服务集成 AWS Mobile apps Internet Amazon API Gateway HTTP Endpoint 利用 Amazon API Gateway 认证请求参数转换响应码转换缓存

提取 QueryString, 作为向后端请求的 Header 方法请求举例请求 https://xxx.

45 提取 QueryString, 作为向后端请求的 Header 方法请求举例请求转换到输出的请求中含一个自定义 header x-custom-header01: 12 集成请求

46 编写映射的参考文档 Request and Response Data Mapping Reference (Path/QueryString/Header) Mapping Template Reference (Body) Apache Velocity

感谢参加 AWS INNOVATE 2018 在线技术大会我们希望您在这里找到感兴趣的内容! 也请帮助我们完成投票打分和反馈问卷欲获取关于 AWS 的更多信息和技术内容, 可以通过以下方式找到我们 : 微信公众号 :AWSChina 新浪微博 :https://www.weibo.com/amazonaws/ 领英 :https://www.

47 感谢参加 AWS INNOVATE 2018 在线技术大会我们希望您在这里找到感兴趣的内容! 也请帮助我们完成投票打分和反馈问卷欲获取关于 AWS 的更多信息和技术内容, 可以通过以下方式找到我们 : 微信公众号 :AWSChina 新浪微博 : 领英 : 知乎 : 视频中心 : 更多线上活动 :

PowerPoint Presentation

PowerPoint Presentation 巧妙利用 AWS 进行物联网解决方案开发牛付强, AWS 解决方案架构师议程 AWS IoT 组成单元利用 AWS IoT Device SDK 进行 AWS IoT 的开发演示 AWS IoT 的作用如果你知道每一个事物的状态并能在数据上面推理你会解决什么问题 AWS IoT 架构 ( 设备到云端 ) IoT 设备类型 IoT 设备类型 Amazon FreeRTOS Amazon