快速搭建 Serverless 人臉識別離線服務

本文轉載自查看原文 2019-12-23 14:38 809 serverless

簡介

首先介紹下在本文出現的幾個比較重要的概念：

函數計算（Function Compute）：函數計算是一個事件驅動的服務，通過函數計算，用戶無需管理服務器等運行情況，只需編寫代碼並上傳。函數計算准備計算資源，並以彈性伸縮的方式運行用戶代碼，而用戶只需根據實際代碼運行所消耗的資源進行付費。函數計算更多信息參考

函數工作流（Function Flow）：函數工作流是一個用來協調多個分布式任務執行的全托管雲服務。用戶可以用順序，分支，並行等方式來編排分布式任務，FnF 會按照設定好的步驟可靠地協調任務執行，跟蹤每個任務的狀態轉換，並在必要時執行用戶定義的重試邏輯，以確保工作流順利完成。函數工作流更多信息參考

本文將重點介紹如何快速地通過函數計算與函數工作流部署一個定時離線批量處理圖片文件並標注出人臉的服務。

開通服務

免費開通函數計算，按量付費，函數計算有很大的免費額度。
免費開通函數工作流，按量付費，目前該產品在公測階段，可以免費使用。
免費開通對象存儲，按量付費。

解決方案

流程如下：

設定定時觸發器，定時觸發函數計算中的函數。
函數被觸發后，調用一次函數工作流中的流程。
函數工作流中的流程被執行:
調用函數計算中的函數，列舉出 OSS Bucket 根路徑下的圖片文件列表。
對於步驟1中列出的文件列表，對每個文件：

- 調用函數計算中的函數處理，進行人臉識別並標注。將標注后的文件存入 OSS，最后將處理過的文件進行轉移。

判斷當前 OSS 根路徑下是否有更多的文件

- 如是，繼續步驟1
- 如否，結束流程

快速開始

Clone 工程到本地

git clone git@github.com:ChanDaoH/serverless-face-recognition.git

替換項目目錄下 template.yml 文件中的 YOUR_BUCKET_NAME 為在杭州區域的 OSS Bucket (可以不是杭州區域的，需要同步修改 OSS_ENDPOINT)

ROSTemplateFormatVersion: '2015-09-01'
Transform: 'Aliyun::Serverless-2018-04-03'
Resources:
  face-recognition:
    Type: 'Aliyun::Serverless::Service'
    Properties:
      Policies:
        - Version: '1'
          Statement:
            - Effect: Allow
              Action:
                - 'oss:ListObjects'
                - 'oss:GetObject'
                - 'oss:PutObject'
                - 'oss:DeleteObject'
                - 'fnf:*'
              Resource: '*'
    listObjects:
      Type: 'Aliyun::Serverless::Function'
      Properties:
        Handler: index.handler
        Runtime: python3
        Timeout: 60
        MemorySize: 128
        CodeUri: functions/listobjects
        EnvironmentVariables:
          OSS_ENDPOINT: 'https://oss-cn-hangzhou-internal.aliyuncs.com'
    detectFaces:
      Type: 'Aliyun::Serverless::Function'
      Properties:
        Handler: index.handler
        Runtime: python3
        Timeout: 60
        MemorySize: 512
        CodeUri: functions/detectfaces
        EnvironmentVariables:
          OSS_ENDPOINT: 'https://oss-cn-hangzhou-internal.aliyuncs.com'
    timer:
      Type: 'Aliyun::Serverless::Function'
      Properties:
        Handler: index.handler
        Runtime: python3
        Timeout: 60
        MemorySize: 512
        CodeUri: functions/timer
      Events:
        timeTrigger:
          Type: Timer
          Properties:
            CronExpression: '0 * * * * *'
            Enable: true 
            # replace YOUR_BUCKET_NAME to your oss bucket name
            Payload: '{"flowName": "oss-batch-process", "input": "{\"bucket\": \"YOUR_BUCKET_NAME\",\"prefix\":\"\"}"}'
  oss-batch-process:
    Type: 'Aliyun::Serverless::Flow'
    Properties:
      Description: batch process flow
      DefinitionUri: flows/index.flow.yml
      Policies:
        - AliyunFCInvocationAccess