0

0

GAE 任务调度:跨服务执行任务的实现方案

心靈之曲

心靈之曲

发布时间:2025-07-14 15:42:17

|

765人浏览过

|

来源于php中文网

原创

gae 任务调度:跨服务执行任务的实现方案

本文档旨在解决 Google App Engine (GAE) 中任务调度跨服务执行的问题。核心在于如何将一个服务创建的任务,指定由另一个服务来执行。通过分析 dispatch.yaml 文件的路由规则,以及利用 HTTP 调用作为中介,提供两种可行的解决方案,帮助开发者实现灵活的任务调度策略,从而优化应用架构和资源利用。

在 Google App Engine (GAE) 中,使用任务队列可以将耗时或资源密集型任务异步执行,从而提高应用的响应速度和用户体验。默认情况下,任务由创建它的服务执行。然而,在某些场景下,我们可能需要将任务提交到一个服务,但由另一个服务来执行。本文将介绍两种实现这一目标的方法。

方法一:利用 dispatch.yaml 文件进行路由

dispatch.yaml 文件用于定义 GAE 应用的请求路由规则。如果你的 dispatch.yaml 文件仅基于路径进行路由,而没有涉及域名或子域名,那么可以直接在任务的 relative_uri 中指定目标服务的路径,从而将任务路由到目标服务。

示例:

假设你的 dispatch.yaml 文件包含以下路由规则:

dispatch:
  - url: "*/mobile/*"
    service: mobile-frontend

  - url: "*/work/*"
    service: static-backend

这意味着所有以 /mobile/ 开头的请求都将被路由到 mobile-frontend 服务,而所有以 /work/ 开头的请求都将被路由到 static-backend 服务。

现在,如果你想从 static-backend 服务提交一个任务,并让 mobile-frontend 服务来执行,你可以将任务的 relative_uri 设置为 /mobile/mobile_task。这样,任务队列会将任务路由到 mobile-frontend 服务,并执行 /mobile/mobile_task 对应的处理程序。

注意事项:

  • 这种方法的前提是 dispatch.yaml 文件仅基于路径进行路由。如果路由规则包含域名或子域名,则需要使用方法二。
  • 确保目标服务中存在与 relative_uri 对应的处理程序,否则任务将无法执行。

方法二:使用 HTTP 调用作为中介

如果你的 dispatch.yaml 文件路由规则包含域名或子域名,或者你想更明确地指定任务的执行服务,可以使用 HTTP 调用作为中介。

实现步骤:

百家CMS微商城
百家CMS微商城

百家CMS微商城从诞生开始,就坚持着简单实用的原则,基于目前最流行的WEB2.0的架构(php+mysql),拥有成熟、稳定的微电商技术解决方案。基于完整的会员等级制度,完善的微商城购物流程,订单管理、优惠券、搜索、购物车等功能。采用跨平台机制,可同时对接微信公众号平台和支付宝服务窗,兼容微博、手机QQ等平台;丰富的支付方式、支持微信支付、支付宝支付、货到付款、余额支付、网银支付等。并且拥有完整的

下载
  1. 在目标服务中创建一个 HTTP 端点,用于接收任务数据并将其提交到任务队列。
  2. 在源服务中,向目标服务的 HTTP 端点发起 HTTP 请求,并将任务数据作为请求体发送。
  3. 目标服务的 HTTP 端点接收到请求后,将任务提交到任务队列,并指定自身作为任务的执行服务。

示例:

假设你有一个服务部署在 blog.example.com,你想让这个服务来执行从 default 服务提交的任务。

  1. 在 blog.example.com 服务中,创建一个名为 /prep_task_invocation/ 的 HTTP 端点。

  2. 从 default 服务,向 blog.example.com/prep_task_invocation/ 发起一个 HTTP POST 请求,并将任务数据作为请求体发送。

  3. blog.example.com/prep_task_invocation/ 端点接收到请求后,将任务提交到任务队列,并指定 blog.example.com 服务自身作为任务的执行服务。

代码示例 (Python):

  • default 服务 (提交任务):
import requests
import json

task_data = {"message": "Hello from default service!"}
url = "http://blog.example.com/prep_task_invocation/"
headers = {'Content-type': 'application/json'}
response = requests.post(url, data=json.dumps(task_data), headers=headers)

if response.status_code == 200:
    print("Task submission request sent successfully!")
else:
    print(f"Error sending task submission request: {response.status_code}")
  • blog.example.com 服务 (接收任务并提交到队列):
from flask import Flask, request
from google.cloud import tasks_v2
import json

app = Flask(__name__)

@app.route('/prep_task_invocation/', methods=['POST'])
def prep_task_invocation():
    task_data = request.get_json()
    print(f"Received task data: {task_data}")

    # Create a client.
    client = tasks_v2.CloudTasksClient()

    # TODO: Fill in the queue path.
    queue = client.queue_path("[PROJECT_ID]", "[LOCATION_ID]", "[QUEUE_ID]")

    # Construct the request body.
    task = {
            "app_engine_http_request": {  # Specify the type of request.
                "http_method": "POST",
                "relative_uri": "/process_task", # Endpoint to actually process the task
                "body": json.dumps(task_data).encode() # Pass the data
            }
    }

    # Use the client to build and send the task.
    response = client.create_task(request={"parent": queue, "task": task})

    print(f"Created task {response.name}")

    return "Task submitted successfully!", 200

@app.route('/process_task', methods=['POST'])
def process_task():
    task_data = request.get_json()
    print(f"Processing task with data: {task_data}")
    # Your task processing logic here
    return "Task processed successfully!", 200

if __name__ == '__main__':
    app.run(debug=True, host='0.0.0.0', port=8080)

注意事项:

  • 确保目标服务的 HTTP 端点能够正确接收和处理任务数据。
  • 在生产环境中,建议对 HTTP 请求进行身份验证和授权,以确保安全性。

总结

本文介绍了两种在 Google App Engine 中实现任务调度跨服务执行的方法:利用 dispatch.yaml 文件进行路由和使用 HTTP 调用作为中介。选择哪种方法取决于你的应用架构和具体需求。使用 dispatch.yaml 文件进行路由更加简洁,但仅适用于简单的路由规则。使用 HTTP 调用作为中介更加灵活,但需要额外的代码来实现 HTTP 请求和任务提交。根据实际情况选择最适合你的解决方案,可以有效地优化你的 GAE 应用。

相关专题

更多
python开发工具
python开发工具

php中文网为大家提供各种python开发工具,好的开发工具,可帮助开发者攻克编程学习中的基础障碍,理解每一行源代码在程序执行时在计算机中的过程。php中文网还为大家带来python相关课程以及相关文章等内容,供大家免费下载使用。

769

2023.06.15

python打包成可执行文件
python打包成可执行文件

本专题为大家带来python打包成可执行文件相关的文章,大家可以免费的下载体验。

661

2023.07.20

python能做什么
python能做什么

python能做的有:可用于开发基于控制台的应用程序、多媒体部分开发、用于开发基于Web的应用程序、使用python处理数据、系统编程等等。本专题为大家提供python相关的各种文章、以及下载和课程。

764

2023.07.25

format在python中的用法
format在python中的用法

Python中的format是一种字符串格式化方法,用于将变量或值插入到字符串中的占位符位置。通过format方法,我们可以动态地构建字符串,使其包含不同值。php中文网给大家带来了相关的教程以及文章,欢迎大家前来阅读学习。

659

2023.07.31

python教程
python教程

Python已成为一门网红语言,即使是在非编程开发者当中,也掀起了一股学习的热潮。本专题为大家带来python教程的相关文章,大家可以免费体验学习。

1345

2023.08.03

python环境变量的配置
python环境变量的配置

Python是一种流行的编程语言,被广泛用于软件开发、数据分析和科学计算等领域。在安装Python之后,我们需要配置环境变量,以便在任何位置都能够访问Python的可执行文件。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

549

2023.08.04

python eval
python eval

eval函数是Python中一个非常强大的函数,它可以将字符串作为Python代码进行执行,实现动态编程的效果。然而,由于其潜在的安全风险和性能问题,需要谨慎使用。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

579

2023.08.04

scratch和python区别
scratch和python区别

scratch和python的区别:1、scratch是一种专为初学者设计的图形化编程语言,python是一种文本编程语言;2、scratch使用的是基于积木的编程语法,python采用更加传统的文本编程语法等等。本专题为大家提供scratch和python相关的文章、下载、课程内容,供大家免费下载体验。

730

2023.08.11

html编辑相关教程合集
html编辑相关教程合集

本专题整合了html编辑相关教程合集,阅读专题下面的文章了解更多详细内容。

38

2026.01.21

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
最新Python教程 从入门到精通
最新Python教程 从入门到精通

共4课时 | 11万人学习

Django 教程
Django 教程

共28课时 | 3.3万人学习

SciPy 教程
SciPy 教程

共10课时 | 1.2万人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号