GAE 任务跨服务执行:Python 到 NodeJS 的任务调度

DDD
发布: 2025-07-14 15:36:36
原创
556人浏览过

gae 任务跨服务执行:python 到 nodejs 的任务调度

本文旨在解决 Google App Engine (GAE) 应用中,任务需要在不同服务之间调度执行的问题。假设你有一个使用 Python3 编写的默认服务和一个使用 NodeJS18 编写的服务。现在需要从 Python3 服务提交一个任务,并让 NodeJS18 服务来执行这个任务。

在使用 google.cloud.tasks_v2 Python 客户端提交任务时,虽然可以指定任务队列,但并没有直接的方法来指定哪个 GAE 服务应该处理该任务。下面将介绍两种可行的方案来实现跨服务任务调度。

方案一:利用 dispatch.yaml 路由规则

如果你的 dispatch.yaml 文件仅基于路径进行路由,而没有涉及域名,那么你可以通过设置 relative_uri 属性来将任务路由到目标服务。

dispatch.yaml 文件定义了如何将传入的 HTTP 请求路由到不同的服务。例如:

立即学习Python免费学习笔记(深入)”;

- url: "*/mobile/*"
  service: mobile-frontend

- url: "*/work/*"
  service: static-backend
登录后复制

在这种情况下,如果你想让 mobile-frontend 服务处理一个任务,只需将 relative_uri 设置为 /mobile/mobile_task。即使任务是从 /work/page-1 发起的,它也会被路由到 mobile-frontend 服务。

注意: 这种方法未经实际验证,请谨慎使用,并在测试环境中进行充分测试。

方案二:通过 HTTP 调用触发目标服务提交任务

如果你的 dispatch.yaml 文件包含基于域名或子域名的路由规则,那么可以先向目标服务的 URL 发送一个 HTTP 请求(例如 POST 请求),然后让目标服务自身提交任务。

百度AI开放平台
百度AI开放平台

百度提供的综合性AI技术服务平台,汇集了多种AI能力和解决方案

百度AI开放平台 42
查看详情 百度AI开放平台

例如,假设你有一个可以通过 blog.example.com 访问的服务,并且希望这个服务处理一个从默认服务提交的任务。

  1. 从默认服务向 blog.example.com/prep_task_invocation/ 发送一个 HTTP 请求,并将需要执行的任务数据作为参数传递。

  2. blog.example.com/prep_task_invocation/ 接收到请求后,将任务提交到自身,即 blog.example.com 服务。假设 relative_uri 不会将任务路由到其他服务。

示例代码 (Python3 - 默认服务):

import requests
import json

def submit_task_to_node_service(task_data):
  """
  向 NodeJS 服务发送 HTTP 请求,触发其提交任务。
  """
  url = "https://blog.example.com/prep_task_invocation/"
  headers = {'Content-type': 'application/json'}
  response = requests.post(url, data=json.dumps(task_data), headers=headers)
  return response

# 示例任务数据
task_data = {"payload": "This is the task payload"}

# 提交任务
response = submit_task_to_node_service(task_data)

if response.status_code == 200:
  print("Task submission request successful")
else:
  print(f"Task submission request failed with status code: {response.status_code}")
登录后复制

示例代码 (NodeJS18 - 目标服务):

const { CloudTasksClient } = require('@google-cloud/tasks');
const express = require('express');
const bodyParser = require('body-parser');

const app = express();
app.use(bodyParser.json());

const client = new CloudTasksClient();
const project = process.env.GOOGLE_CLOUD_PROJECT;
const location = 'your-location'; // e.g., 'us-central1'
const queue = 'default';

app.post('/prep_task_invocation/', async (req, res) => {
  const payload = req.body.payload;

  const task = {
    httpRequest: {
      httpMethod: 'POST',
      url: 'https://blog.example.com/process_task/', // 任务处理的 URL
      headers: {
        'Content-Type': 'application/json',
      },
      body: Buffer.from(JSON.stringify({payload: payload})).toString('base64'),
    },
  };

  const queuePath = client.queuePath(project, location, queue);

  const request = {
    parent: queuePath,
    task: task,
  };

  try {
    const [response] = await client.createTask(request);
    console.log(`Created task ${response.name}`);
    res.status(200).send('Task created successfully');
  } catch (error) {
    console.error('Error creating task:', error);
    res.status(500).send('Error creating task');
  }
});

app.post('/process_task/', (req, res) => {
  const payload = JSON.parse(Buffer.from(req.body.payload, 'base64').toString());
  console.log(`Processing task with payload: ${payload.payload}`);
  // 在这里处理任务
  res.status(200).send('Task processed');
});


const port = process.env.PORT || 8080;
app.listen(port, () => {
  console.log(`Server listening on port ${port}`);
});
登录后复制

注意事项:

  • 确保 NodeJS 服务具有创建 Cloud Tasks 的权限。
  • 根据实际情况修改 location 和 queue 变量。
  • process_task 路由负责实际的任务处理逻辑。
  • HTTP body 需要进行 base64 编码,以便在任务中传输。

总结

本文介绍了两种在 GAE 中实现跨服务任务调度的方法。第一种方法利用 dispatch.yaml 路由规则,适用于仅基于路径进行路由的情况。第二种方法通过 HTTP 调用触发目标服务提交任务,适用于包含域名或子域名路由规则的情况。选择哪种方法取决于你的应用架构和 dispatch.yaml 文件的配置。在实际应用中,建议进行充分的测试,以确保任务能够正确地路由到目标服务并成功执行。

以上就是GAE 任务跨服务执行:Python 到 NodeJS 的任务调度的详细内容,更多请关注php中文网其它相关文章!

最佳 Windows 性能的顶级免费优化软件
最佳 Windows 性能的顶级免费优化软件

每个人都需要一台速度更快、更稳定的 PC。随着时间的推移,垃圾文件、旧注册表数据和不必要的后台进程会占用资源并降低性能。幸运的是,许多工具可以让 Windows 保持平稳运行。

下载
来源:php中文网
本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn
最新问题
开源免费商场系统广告
热门教程
更多>
最新下载
更多>
网站特效
网站源码
网站素材
前端模板
关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新 English
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送
PHP中文网APP
随时随地碎片化学习

Copyright 2014-2025 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号