اختبار AWS Emulator: 5 خرافات تسبب مشاكل في الإنتاج
المحاكي الرسمي من AWS حقيقي، لكن الخرافات حوله ستكلفك غاليًا. تعرّف على أين تنكسر دقة المحاكاة وما الذي يجب أن يعمل فعليًا على AWS.

أسوأ فشل اختبار تكامل واجهته في حياتي كان باللون الأخضر. كل الفحوصات نجحت في CI، وخرج النشر إلى الإنتاج، وبعد عشرين دقيقة كان مهندس المناوبة يحدّق في طابور مليء برسائل سامة، لأن سلوك SQS الحقيقي اختلف عن الـ stub في نقطة واحدة لم يفكر أحد في فحصها. لذلك عندما أطلقت AWS محاكيها الخاص، وهو مساحة عمل Rust تضم حزمة (crate) لكل خدمة مولّدة من نماذج Smithy نفسها التي تُشغّل SDKs الحقيقية، لم يكن أول ما شعرت به حماسًا. كان الشعور: جيد، والآن لنكتشف أين يكذب. فكل محاكٍ يكذب في مكان ما، واختبار AWS emulator لا يفيد إلا إذا عرفت أين تقع هذه الأكاذيب.
الخرافة 1: "الاختبارات الخضراء على محاكي AWS تعني أنه يعمل على AWS"
هذا هو الاعتقاد الذي يؤذي الناس، والتوثيق الرسمي للمشروع صريح بشكل غير معتاد بخصوصه. تنشر AWS مع كل إصدار درجات دقة لكل خدمة، وتتتبع الفجوات في مجلد حرفي داخل المستودع اسمه issues/things-that-do-not-work/. هذا المجلد هو أول ما يجب أن تقرأه قبل أن تكتب أي اختبار. لقد اصطدم المستخدمون الأوائل بالجدران فعلًا: تعريفات Step Functions التي تستخدم الحقل Assign لا تعمل، ودعم Lambda لكود Python غير مكتمل بما يكفي لدرجة أن سير عمل يعمل بسلاسة على MiniStack يتوقف على المحاكي الرسمي. ولا شيء من هذا فضيحة، بل هو الوضع الطبيعي لمحاكٍ في مرحلة مبكرة. الفضيحة الحقيقية هي معاملة مجموعة اختبارات خضراء على أنها دليل على أي شيء أبعد من "كودك يعمل مع تفسير المحاكي لواجهة API".
النموذج الذهني الصحيح هو التغطية وليس الحقيقة. يغطي المحاكي أشكال الطلبات التي يرسلها SDK الخاص بك ويعيد استجابات معقولة. لا يغطي سلوك التقييد (throttling)، ولا تأخيرات انتشار البيانات بين الخدمات، ولا آلاف الخصائص غير الموثقة لنظام موزع عالميًا. هذه هي نفس فجوة المواصفة والتنفيذ التي تظهر في كل مكان في البنية التحتية: نموذج Smithy يخبرك بشكل بيانات السلك، لكنه لا يستطيع أن يخبرك أن SQS الحقيقي يسلّم أحيانًا الرسالة مرتين ضمن مهلة الرؤية، أو أن انتشار IAM يستغرق ثوانٍ وأن الدور الذي أنشأته للتو سيفشل في أول ثلاث استدعاءات. نجحت اختباراتك لأن المحاكي لم تتح له الفرصة أبدًا ليكون متأخرًا في الاتساق.
الخرافة 2: "أستطيع التحقق من سياسات IAM وضوابط الأمان محليًا"
لا، و AWS تقول ذلك بوضوح في صفحة الأمان الخاصة بالمحاكي. لا تستخدمه لاختبار سياسات IAM أو حدود الصلاحيات، ولا سياسات الموارد مثل سياسات الدلاء (bucket policies)، ولا سياسات مفاتيح KMS، ولا الوصول عبر الحسابات أو عبر المناطق، ولا أي ضابط أمني آخر. بعض الخدمات تقيّم IAM للمستخدمين والأدوار التي تنشئها داخل المحاكي، لكن ليس بالطريقة التي تفعلها AWS. المحاكي لا يرفض أبدًا طلبًا موقّعًا بمفتاحه الخاص. الطلب الذي كانت AWS سترفضه قد ينجح محليًا، وهذا يعني أن المحاكي ليس عديم الفائدة لاختبار الأمان فحسب، بل مضلّل فعليًا. سيعطيك نتيجة سلبية كاذبة وهو يبتسم.
رأيت فرقًا تتعلم هذا بالطريقة المكلفة. يشدد مطور سياسة دلو، ويشغّل المجموعة المحلية، ويرى اللون الأخضر، ثم يشحن التغيير، فتفشل المهمة الليلية على حساب الـ sandbox لأن السياسة الجديدة تحجب دور النسخ المتماثل. أو الحالة المعاكسة والأسوأ: السياسة متساهلة أكثر من اللازم، فكل شيء ينجح في كل مكان، ثم تكتشف بعد أشهر أثناء التدقيق أن دلوك "الخاص" كان قابلًا للقراءة من أي جهة موثوقة. منطق السياسات واحد من الأماكن التي تملك فيها المصادقة السحابية نقاط عمياء حقيقية، ولن ينقذك أي محاكٍ منها. إذا أردت التحقق من سلوك السياسات، تحتاج إلى تقييم IAM حقيقي. أي حساب فعلي، ويفضّل أن يكون sandbox مخصصًا تُقيّد فيه SCPs ما يمكنه الوصول إليه، واختبارات تتحقق من الرفض وليس فقط من النجاح:
import boto3
import pytest
from botocore import UNSIGNED
from botocore.config import Config
from botocore.exceptions import ClientError
def test_private_bucket_denies_anonymous_read():
# Runs only in the nightly job, against a dedicated sandbox account.
s3 = boto3.client("s3")
s3.put_object(Bucket=SANDBOX_BUCKET, Key="probe.txt", Body=b"x")
anon = boto3.client("s3", config=Config(signature_version=UNSIGNED))
with pytest.raises(ClientError) as err:
anon.get_object(Bucket=SANDBOX_BUCKET, Key="probe.txt")
assert err.value.response["Error"]["Code"] == "AccessDenied"
أمر أخير قبل أن توجّه كامل أسطول CI نحو هذه الأداة: القياس عن بُعد (telemetry) مفعّل افتراضيًا. تقول AWS إنه محدود ولا يتضمن أبدًا محتويات الطلبات أو بيانات الاعتماد، وليس لدي سبب للشك في ذلك، لكن قاعدتي أن أدوات التطوير لا تتصل بالمنزل ما لم أطلب منها ذلك. شغّلها مع --telemetry off أو اضبط EMULATOR_TELEMETRY=off في بيئة CI الخاصة بك وانتقل إلى ما بعدها.
الخرافة 3: "دقة بروتوكول السلك هي الجزء الصعب"

الحصول على تنسيق السلك الصحيح هو الحد الأدنى، وهو الجزء الذي كانت AWS ستتقنه دائمًا. تُولَّد SDKs الخاصة بها من نماذج Smithy، والمحاكي مولّد من النماذج نفسها، لذلك تتطابق كل عملية وكل حقل اختياري وكل شكل خطأ مع الواجهة الموثقة. علّق أحد المستخدمين على Hacker News بشكل جيد: التوليد المعتمد على المواصفات يغطي كل متغير لكل نقطة نهاية، بينما المحاكيات المجتمعية تنفذ تاريخيًا المجموعة الشائعة الاستخدام وتقرّب الباقي. هذه ميزة حقيقية للأداة الرسمية.
لكن دقة السلك هي الجزء السهل. الجزء الصعب هو الدقة السلوكية، ولا أحد يملكها: لا محاكي AWS ولا LocalStack ولا moto ولا Floci. الدقة السلوكية هي الأشياء التي ليست في أي نموذج: هل يغيّر بدء تشغيل Lambda البارد التوقيت بما يكفي لإسقاط مهلة العميل؟ هل يظهر تقييد DynamoDB كخطأ قابل لإعادة المحاولة بالمعدل الذي تصله حركة الإنتاج فعلًا؟ هل يتعطل حذف CloudFormation عشرين دقيقة عندما أُنشئت الموارد بترتيب قانوني لكنه غير موفق؟ سألني أحد الممارسين إن كان يمكنه توجيه مشروع CDK كامل نحو المحاكي واختبار cdk deploy من البداية إلى النهاية، وجوابي: يمكنك، وينبغي عليك، لكن فقط لاكتشاف أخطاء التركيب (synthesis) وشكل الواجهة. ديناميكيات النشر، مثل سلوك التراجع وترتيب استبدال الموارد واكتشاف الانحراف، هي بالضبط الأجزاء التي يكون المحاكي فيها الأضعف، لأنها خصائص ناشئة من مستوى التحكم الحقيقي.
- دقة السلك: أشكال الطلبات والاستجابات، وأكواد الأخطاء، والتسلسل. المحاكيات بارعة في هذا، ويفترض أن يكون المحاكي المولّد من Smithy الأفضل في فئته.
- دقة الحالة: دورات CRUD، والسرد، والتصفية، والترقيم الصفحي. جيدة عمومًا عبر المحاكيات، مع فجوات خاصة بكل خدمة يجب فحصها.
- الدقة السلوكية: توقيت الاتساق، والتقييد، والإخفاقات الجزئية، وخصائص دورة حياة الموارد. لا أحد يملكها، فخطط لذلك.
الخرافة 4: "المحاكيات قابلة للاستبدال المباشر، فقط غيّر نقطة النهاية"
وعد التسويق لكل محاكٍ هو "اضبط متغير بيئة واحدًا وانطلق". في اختبار دخان سريع، هذا صحيح. يستمع وضع الخادم على 127.0.0.1:9297 عبر HTTPS بشهادة موقّعة ذاتيًا، وهكذا يبدو توجيه واجهة سطر الأوامر نحوه:
export AWS_ENDPOINT_URL=https://localhost:9297
export AWS_ACCESS_KEY_ID=emulator
export AWS_SECRET_ACCESS_KEY=emulator
export AWS_REGION=us-east-1
# self-signed cert: don't disable verification globally, scope it
aws s3 ls --no-verify-ssl
قصة الاستبدال المباشر تنهار عند حجم مجموعات الاختبار. المشكلات العملية التي يصطدم بها الناس خلال الأسبوع الأول: لا توجد إعادة ضبط سريعة للحالة. إذا احتاجت مجموعتك إلى صفحة نظيفة بين الاختبارات (ومستخدمو moto معتادون تمامًا على ذلك، فزخرفة واحدة والعالم يصبح جديدًا)، فخيارك الحالي هو إعادة تشغيل العملية. هذا مقبول لعشرة اختبارات ومؤلم لعشرة آلاف. كذلك لا توجد محاكاة لعدة حسابات أو لـ Organizations، وهذا يُسقط أي اختبار يحاكي هيكل حساباتك الحقيقي. وإذا أغراك وضع Rust المضمّن، أي نسخة معزولة داخل العملية لكل اختبار دون الحاجة إلى إدارة نقاط النهاية أو الشهادات، وهو تصميم جميل فعلًا، فاقرأ قسم تكلفة البناء أولًا. مساحة العمل تضم حزمة لكل خدمة AWS، وبناء debug كامل يحتاج تقريبًا 100 غيغابايت من مساحة target/، وأول cargo test يُجمّع المحاكي إلى جانب كودك. نصيحتهم بمشاركة CARGO_TARGET_DIR واحد، وتخزين target/ مؤقتًا في CI، والتثبيت على commit إصدار محدد ليست زينة اختيارية. إنها الفرق بين مهمة CI تستغرق خمس دقائق وأخرى تستغرق خمسين.
use aws_emulator_embedded::{AwsEmulatorEmbedded, EmbeddedOptions, Telemetry};
let emulator = AwsEmulatorEmbedded::new(
EmbeddedOptions::default().telemetry(Telemetry::Off),
);
let http_client = emulator.http_client();
// wire http_client into your SDK client config — no endpoint,
// no env vars, one isolated instance per test
الخرافة 5: "محاكي AWS الرسمي سيقضي على LocalStack وmoto وغيرهما"
سمعت نسخًا من هذا خلال ساعات من الإعلان، وهو يسيء فهم ما تبيعه الأدوات القائمة فعلًا. لم تكن قيمة LocalStack يومًا مجرد "أعدنا تنفيذ واجهة S3". إنها سنوات من ضبط السلوك لكل خدمة، وإدارة الحالة، وتكامل testcontainers، وسهولة استخدام في CI، ومجتمع سجّل بالفعل الخطأ الذي أنت على وشك مواجهته. إعادة ضبط الحالة لكل اختبار عبر الزخارف في moto ميزة في سير العمل وليست ميزة في الواجهة، ولا يملك محاكي AWS جوابًا لها بعد. وأشار مؤيدو Floci إلى أنه يغطي GCP وAzure أيضًا، فإذا كانت بنيتك متعددة السحابات، فبيئة محلية موحدة تستحق أكثر من محاكٍ أعلى دقة لسحابة واحدة.
هناك أيضًا سؤال مشروع عن الثقة وطول العمر. أول تعليق في الخيط طرح ما كان الجميع يفكر فيه: هل هذا منتج حقيقي ستصونه AWS، أم مجرد تجربة؟ يقبل المستودع تقارير المشكلات لكنه لا يقبل طلبات الدمج، وهذا خيار مبرر لقاعدة كود مبنية على المواصفات، لكنه يعني أيضًا أن المجتمع لا يستطيع سد الفجوات بنفسه. إذا أُعيد تكليف الفريق، فأنت تحتفظ بنسخة مرخصة بموجب CC0 لا تُحدَّث. موقفي: قيّمه كأي اعتمادية لها مُصين واحد، فهو مقبول للتبنّي لكنه متهوّر إذا راهنت عليه بكل شيء. والشك نفسه ينطبق على الضجيج المتحمس حول "وكلاء كتبوه بـ Rust، فقد انتهى الخندق الدفاعي". لم يكن الخندق يومًا في سطح الواجهة، بل في التميز التشغيلي، وكان تقليد الواجهة دائمًا الجزء الرخيص. رأينا هذه الديناميكية تتكرر مع SQLite الموزعة وraft أيضًا: نسخ الواجهة يستغرق أسابيع، بينما مطابقة دلالات الفشل تستغرق سنوات.
ما الذي يجب أن يعمل فعليًا على بنية AWS التحتية الحقيقية

هذا هو التقسيم الذي أطبّقه في المشاريع الحقيقية، ولم يفشل بعد. كل ما هو سريع ومحدد وموجّه للشكل يعمل على المحاكي في كل commit: التسلسل، ومعالجة الأخطاء للأكواد الموثقة، ومنطق إعادة المحاولة، وآلات الحالة التي تعتمد فقط على دورات CRUD. هذا حوالي 90% من مجموعتك حسب عدد الاختبارات، ونحو 10% حسب المخاطر.
تعمل الـ 10% المتبقية ليلًا على sandbox حقيقي ومعزول، وهي الجزء الذي يلتقط ما يوقظك فعلًا:
- سياسات IAM وسياسات الموارد. أكّد الرفض الصريح، لا المسارات المسموحة فقط. المحاكي لا يستطيع فعل ذلك بنيويًا، فهو لا يرفض أبدًا طلبًا موقّعًا بمفتاحه.
- أي شيء له تأخير انتشار. أدوار جديدة، وتغييرات DNS، ومنح KMS. إذا أنشأ كودك موردًا واستخدمه فورًا، فلن يخبرك إلا AWS الحقيقية إن كنت تحتاج حلقة إعادة محاولة.
- سلوك التسليم مرة واحدة على الأقل والـ idempotency. تسليمات SQS المكررة، وإعادة محاولات Lambda عند المهلة، والإخفاقات الجزئية في الدفعات. المحاكيات مهذبة، أما الإنتاج فليس كذلك.
- دورة حياة البنية التحتية. دورات كاملة من
cdk deploy/terraform applyوالحذف، خاصة ترتيب الحذف ومسارات التراجع. - حدود التقييد والحصص. إذا كان الأمر مهمًا تحت حمل الإنتاج، فهو موجود فقط عند سلوك واجهات API الإنتاجية.
يحتاج الـ sandbox إلى ضوابطه الخاصة: سياسات تحكم الخدمات (SCPs) تحدّ مما يستطيع فعله، وتنبيهات للميزانية، وأداة تنظيف تحذف الموارد المتبقية، لأن مهمتك الليلية ستُسرّب أشياء بالتأكيد. هذا عبء تشغيلي حقيقي، وهو بالضبط سبب قيمة المحاكي، إذ يُبقي 90% من حلقة ملاحظاتك سريعة ومجانية، فتستطيع تحمّل جعل الـ 10% الأخيرة صادقة.
مهمة المحاكي أن يجعل حلقة ملاحظاتك سريعة. ليست مهمته أن يمنحك الثقة. الثقة ما زالت تكلّف استدعاءات API حقيقية.
محاكي AWS الرسمي أداة جيدة فعلًا: تغطية مولّدة من المواصفات، ووضع مضمّن بعزل حقيقي، وتوثيق صريح بشكل منعش حول ما لا يستطيع فعله. تبنّاه لما هو عليه: أسرع طريقة ممكنة لتكون على صواب في معظم الأحيان. ثم قرر، بعناية وكتابةً، أي الاختبارات يحق لها أن تدّعي النوع الآخر من الصواب، ذلك الذي يأتي فقط من بنية تحتية تستطيع فعلًا أن ترفض طلبك، وتُبطئ عميلك، وتسلّم رسالتك مرتين.


