
本文详细阐述在apiato框架中,如何通过eager loading(预加载)技术解决n+1查询问题,并结合transformer进行关系数据的有效序列化。我们将探讨`l5-repository`的使用、请求参数处理以及transformer中`defaultincludes`与`availableincludes`的配置,确保数据库层面的性能优化与api响应的灵活输出同步进行。
1. 理解N+1查询问题及预加载的重要性
在开发API时,当我们需要获取一个主资源及其关联的多个子资源时,如果不采用适当的优化策略,往往会遇到臭名昭著的“N+1查询问题”。例如,在获取一个用户列表时,如果每个用户的订阅信息都需要单独查询,那么对于N个用户,将执行1次查询获取用户列表,再执行N次查询获取每个用户的订阅,总计N+1次数据库查询。这会严重影响API的性能和响应速度。
为了解决这一问题,Eager Loading(预加载)技术应运而生。通过预加载,我们可以在获取主资源时,一次性地将所有关联的子资源也查询出来,从而将N+1次查询减少到2次(一次主资源,一次所有关联子资源),显著提升数据库操作效率。
2. Apiato中的关系数据加载机制
Apiato框架基于Laravel,并集成了l5-repository(一个数据仓库模式实现)和Fractal Transformers(用于数据转换和序列化)。理解这三者如何协同工作是解决关系数据加载问题的关键:
- l5-repository与Eloquent: 负责数据库层面的数据查询,包括Eager Loading。它通过with()方法来指定需要预加载的关系。
- Fractal Transformers: 负责将Eloquent模型转换为标准化的API响应格式。它通过defaultIncludes(默认包含)和availableIncludes(按需包含)来控制哪些关系数据应被序列化并包含在最终响应中。
在Apiato中,通常使用?include=relationName这样的URL查询参数来触发Transformer的availableIncludes。而?with=relationName参数则主要用于指示l5-repository进行数据库层面的预加载。两者虽有区别,但在某些配置下,with参数也可能被Apiato内部处理并映射到Transformer的include逻辑。
3. 实现数据库层面的预加载
为了确保l5-repository在查询数据时能够执行预加载,我们需要在请求类中明确地传递with参数。这可以通过在请求类的prepareForValidation方法中添加参数来实现。
示例:强制在请求中添加with参数
// app/Containers/User/UI/API/Requests/GetAllUsersRequest.php
namespace App\Containers\User\UI\API\Requests;
use App\Ship\Parents\Requests\Request as ParentRequest;
class GetAllUsersRequest extends ParentRequest
{
/**
* Define which roles and/or permissions has access to this request.
*/
protected array $access = [
'permissions' => 'list-users',
'roles' => '',
];
/**
* Id's that needs decoding before applying the validation rules.
*/
protected array $decode = [
// 'id',
];
/**
* Defining the URL parameters (`/stores/{id}`) allows applying validation rules
* on them and selecting appropriate users (e.g., `id` would be selected with the getById() methods).
*/
protected array $urlParameters = [
// 'id',
];
/**
* Get the validation rules that apply to the request.
*/
public function rules(): array
{
return [
// 'id' => 'required|integer|exists:users,id',
];
}
/**
* Prepare the data for validation.
* 在这里强制添加 'with' 参数,确保l5-repository进行数据库预加载
*/
public function prepareForValidation()
{
// 将 'with=subscription' 添加到请求参数中
// 这会影响l5-repository在获取数据时调用 Eloquent 的 with() 方法
request()->request->add(['with' => 'subscription']);
request()->query->add(['with' => 'subscription']);
}
}通过上述配置,无论API请求URL是否包含?with=subscription,l5-repository在执行查询时都会尝试预加载subscription关系。这解决了N+1查询问题,确保了数据库查询的效率。
4. 配置Transformer以响应预加载和按需包含
仅仅在数据库层面进行预加载是不够的。如果Transformer没有被告知要序列化这些关系数据,它们将不会出现在最终的API响应中。当从Transformer中移除defaultIncludes后,关系将不再自动包含。为了实现按需包含,我们需要使用availableIncludes和对应的include[RelationName]方法。
示例:配置UsersTransformer以按需包含subscription
// app/Containers/User/UI/API/Transformers/UserTransformer.php
namespace App\Containers\User\UI\API\Transformers;
use App\Containers\User\Models\User;
use App\Containers\Subscription\UI\API\Transformers\SubscriptionTransformer; // 假设有 SubscriptionTransformer
use App\Ship\Parents\Transformers\Transformer;
use League\Fractal\Resource\Item;
class UserTransformer extends Transformer
{
/**
* @var array
*/
protected array $resourceKey = ['users', 'user'];
/**
* 移除 defaultIncludes,使关系不再默认包含
* public array $defaultIncludes = ['subscription'];
*/
/**
* 定义可按需包含的关系。
* 通常通过 URL 参数 ?include=subscription 来触发。
* Apiato 也会在某些情况下将 ?with=... 映射到这里。
*/
public array $availableIncludes = [
'subscription',
];
public function transform(User $user): array
{
return [
'id' => $user->getHashedKey(),
'name' => $user->name,
'email' => $user->email,
'email_verified_at' => $user->email_verified_at,
'created_at' => $user->created_at,
'updated_at' => $user->updated_at,
'readable_created_at' => $user->created_at->diffForHumans(),
'readable_updated_at' => $user->updated_at->diffForHumans(),
];
}
/**
* 定义如何包含 'subscription' 关系。
* 当请求中包含 ?include=subscription (或 ?with=subscription,如果被映射) 时,此方法会被调用。
*/
public function includeSubscription(User $user): ?Item
{
// 关键:检查关系是否已加载,避免N+1查询
if ($user->relationLoaded('subscription') && $user->subscription) {
return $this->item($user->subscription, new SubscriptionTransformer());
}
return null;
}
}解释:
- 移除defaultIncludes: 确保subscription关系不再默认出现在API响应中。
- availableIncludes = ['subscription']: 声明subscription是一个可以按需包含的关系。
- includeSubscription(User $user)方法: 当API请求的URL中包含?include=subscription(这是Apiato的标准方式)时,Fractal会调用此方法来序列化subscription数据。
- $user->relationLoaded('subscription'): 这是一个非常重要的检查。它确保只有当subscription关系已经通过Eager Loading加载到User模型上时,才进行序列化。这有效地防止了在Transformer层面重新引入N+1查询问题。
5. 综合示例与最佳实践
现在,结合数据库层面的预加载和Transformer的配置,我们可以通过以下URL请求来获取用户及其订阅信息:
API请求示例:
GET v1/users?include=subscription
当此请求到达Apiato时:
- GetAllUsersRequest的prepareForValidation方法会确保with=subscription参数被添加到请求中。
- l5-repository会根据with=subscription参数,在数据库查询时执行User::with('subscription')->get(),从而预加载所有用户的订阅数据。
- UsersTransformer会根据URL中的?include=subscription参数,调用其includeSubscription方法。
- includeSubscription方法会检查User模型上是否已加载subscription关系(由于步骤2的预加载,此时为true),然后使用SubscriptionTransformer对订阅数据进行序列化并包含在最终响应中。
注意事项:
- with vs include: 在Apiato中,with通常用于控制数据库层面的预加载(l5-repository),而include用于控制Transformer层面的序列化输出。虽然在某些情况下with参数可能被Apiato内部映射到include,但为了清晰和标准,建议在API请求中明确使用?include=relationName来控制Transformer的输出。
- 关系命名一致性: 确保Eloquent模型中的关系方法名(例如subscription())与availableIncludes数组中的名称以及include[RelationName]方法中的名称保持一致。
- 嵌套关系: 对于更复杂的嵌套关系(例如user.subscription.plan),你需要在每个层级的Transformer中配置availableIncludes和相应的include方法。
- 性能考量: 尽管预加载可以解决N+1问题,但过度预加载不必要的关联数据也可能导致查询的数据量过大,反而影响性能。应根据实际业务需求,按需选择预加载和包含的关系。
通过以上步骤,你可以在Apiato框架中高效地处理关系数据,既解决了N+1查询问题,又保持了API响应的灵活性和可控性。










