0

0

GAE 任务跨服务执行:Python 到 NodeJS 的任务调度

DDD

DDD

发布时间:2025-07-14 15:36:36

|

565人浏览过

|

来源于php中文网

原创

gae 任务跨服务执行:python 到 nodejs 的任务调度

本文旨在解决 Google App Engine (GAE) 应用中,任务需要在不同服务之间调度执行的问题。假设你有一个使用 Python3 编写的默认服务和一个使用 NodeJS18 编写的服务。现在需要从 Python3 服务提交一个任务,并让 NodeJS18 服务来执行这个任务。

在使用 google.cloud.tasks_v2 Python 客户端提交任务时,虽然可以指定任务队列,但并没有直接的方法来指定哪个 GAE 服务应该处理该任务。下面将介绍两种可行的方案来实现跨服务任务调度。

方案一:利用 dispatch.yaml 路由规则

如果你的 dispatch.yaml 文件仅基于路径进行路由,而没有涉及域名,那么你可以通过设置 relative_uri 属性来将任务路由到目标服务。

dispatch.yaml 文件定义了如何将传入的 HTTP 请求路由到不同的服务。例如:

立即学习Python免费学习笔记(深入)”;

- url: "*/mobile/*"
  service: mobile-frontend

- url: "*/work/*"
  service: static-backend

在这种情况下,如果你想让 mobile-frontend 服务处理一个任务,只需将 relative_uri 设置为 /mobile/mobile_task。即使任务是从 /work/page-1 发起的,它也会被路由到 mobile-frontend 服务。

注意: 这种方法未经实际验证,请谨慎使用,并在测试环境中进行充分测试。

方案二:通过 HTTP 调用触发目标服务提交任务

如果你的 dispatch.yaml 文件包含基于域名或子域名的路由规则,那么可以先向目标服务的 URL 发送一个 HTTP 请求(例如 POST 请求),然后让目标服务自身提交任务。

ArrowMancer
ArrowMancer

手机上的宇宙动作RPG,游戏角色和元素均为AI生成

下载

例如,假设你有一个可以通过 blog.example.com 访问的服务,并且希望这个服务处理一个从默认服务提交的任务。

  1. 从默认服务向 blog.example.com/prep_task_invocation/ 发送一个 HTTP 请求,并将需要执行的任务数据作为参数传递。

  2. blog.example.com/prep_task_invocation/ 接收到请求后,将任务提交到自身,即 blog.example.com 服务。假设 relative_uri 不会将任务路由到其他服务。

示例代码 (Python3 - 默认服务):

import requests
import json

def submit_task_to_node_service(task_data):
  """
  向 NodeJS 服务发送 HTTP 请求,触发其提交任务。
  """
  url = "https://blog.example.com/prep_task_invocation/"
  headers = {'Content-type': 'application/json'}
  response = requests.post(url, data=json.dumps(task_data), headers=headers)
  return response

# 示例任务数据
task_data = {"payload": "This is the task payload"}

# 提交任务
response = submit_task_to_node_service(task_data)

if response.status_code == 200:
  print("Task submission request successful")
else:
  print(f"Task submission request failed with status code: {response.status_code}")

示例代码 (NodeJS18 - 目标服务):

const { CloudTasksClient } = require('@google-cloud/tasks');
const express = require('express');
const bodyParser = require('body-parser');

const app = express();
app.use(bodyParser.json());

const client = new CloudTasksClient();
const project = process.env.GOOGLE_CLOUD_PROJECT;
const location = 'your-location'; // e.g., 'us-central1'
const queue = 'default';

app.post('/prep_task_invocation/', async (req, res) => {
  const payload = req.body.payload;

  const task = {
    httpRequest: {
      httpMethod: 'POST',
      url: 'https://blog.example.com/process_task/', // 任务处理的 URL
      headers: {
        'Content-Type': 'application/json',
      },
      body: Buffer.from(JSON.stringify({payload: payload})).toString('base64'),
    },
  };

  const queuePath = client.queuePath(project, location, queue);

  const request = {
    parent: queuePath,
    task: task,
  };

  try {
    const [response] = await client.createTask(request);
    console.log(`Created task ${response.name}`);
    res.status(200).send('Task created successfully');
  } catch (error) {
    console.error('Error creating task:', error);
    res.status(500).send('Error creating task');
  }
});

app.post('/process_task/', (req, res) => {
  const payload = JSON.parse(Buffer.from(req.body.payload, 'base64').toString());
  console.log(`Processing task with payload: ${payload.payload}`);
  // 在这里处理任务
  res.status(200).send('Task processed');
});


const port = process.env.PORT || 8080;
app.listen(port, () => {
  console.log(`Server listening on port ${port}`);
});

注意事项:

  • 确保 NodeJS 服务具有创建 Cloud Tasks 的权限。
  • 根据实际情况修改 location 和 queue 变量。
  • process_task 路由负责实际的任务处理逻辑。
  • HTTP body 需要进行 base64 编码,以便在任务中传输。

总结

本文介绍了两种在 GAE 中实现跨服务任务调度的方法。第一种方法利用 dispatch.yaml 路由规则,适用于仅基于路径进行路由的情况。第二种方法通过 HTTP 调用触发目标服务提交任务,适用于包含域名或子域名路由规则的情况。选择哪种方法取决于你的应用架构和 dispatch.yaml 文件的配置。在实际应用中,建议进行充分的测试,以确保任务能够正确地路由到目标服务并成功执行。

相关专题

更多
python开发工具
python开发工具

php中文网为大家提供各种python开发工具,好的开发工具,可帮助开发者攻克编程学习中的基础障碍,理解每一行源代码在程序执行时在计算机中的过程。php中文网还为大家带来python相关课程以及相关文章等内容,供大家免费下载使用。

769

2023.06.15

python打包成可执行文件
python打包成可执行文件

本专题为大家带来python打包成可执行文件相关的文章,大家可以免费的下载体验。

661

2023.07.20

python能做什么
python能做什么

python能做的有:可用于开发基于控制台的应用程序、多媒体部分开发、用于开发基于Web的应用程序、使用python处理数据、系统编程等等。本专题为大家提供python相关的各种文章、以及下载和课程。

764

2023.07.25

format在python中的用法
format在python中的用法

Python中的format是一种字符串格式化方法,用于将变量或值插入到字符串中的占位符位置。通过format方法,我们可以动态地构建字符串,使其包含不同值。php中文网给大家带来了相关的教程以及文章,欢迎大家前来阅读学习。

659

2023.07.31

python教程
python教程

Python已成为一门网红语言,即使是在非编程开发者当中,也掀起了一股学习的热潮。本专题为大家带来python教程的相关文章,大家可以免费体验学习。

1345

2023.08.03

python环境变量的配置
python环境变量的配置

Python是一种流行的编程语言,被广泛用于软件开发、数据分析和科学计算等领域。在安装Python之后,我们需要配置环境变量,以便在任何位置都能够访问Python的可执行文件。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

549

2023.08.04

python eval
python eval

eval函数是Python中一个非常强大的函数,它可以将字符串作为Python代码进行执行,实现动态编程的效果。然而,由于其潜在的安全风险和性能问题,需要谨慎使用。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

579

2023.08.04

scratch和python区别
scratch和python区别

scratch和python的区别:1、scratch是一种专为初学者设计的图形化编程语言,python是一种文本编程语言;2、scratch使用的是基于积木的编程语法,python采用更加传统的文本编程语法等等。本专题为大家提供scratch和python相关的文章、下载、课程内容,供大家免费下载体验。

730

2023.08.11

html编辑相关教程合集
html编辑相关教程合集

本专题整合了html编辑相关教程合集,阅读专题下面的文章了解更多详细内容。

16

2026.01.21

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
快速入门Node.JS全套完整版
快速入门Node.JS全套完整版

共83课时 | 8.3万人学习

nodejs开发基础教程
nodejs开发基础教程

共15课时 | 4.5万人学习

JavaScript设计模式视频教程
JavaScript设计模式视频教程

共28课时 | 5.3万人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号