بيانات القياس المجمعة
التحضير
إذا كان تجميع البيانات القديم (<=8.1.2) نشطًا، فسيكون من الضروري تعطيل مهمة مزامنة PostgreSQL.
psql -U infosim -d infosim -c "SELECT delete_job((SELECT max(job_id) FROM timescaledb_information.jobs where proc_schema = 'stablenet' AND proc_name = 'update_measurement_data_aggregated'));"
علاوة على ذلك، يُنصح بإزالة جداول التجميع القديمة وإعادة هيكلة استعلامات البيانات لاستخدام الجداول التي أنشأتها مزامنة البيانات الجديدة.
تأكد من أن الإعدادات الموجودة في /etc/stablenet-fdw/stablenet-fdw.conf صحيحة.
المزامنة الأولية
تتم مزامنة بيانات القياس من StableNet/Oracle/MySQL باستخدام نصوص SKOOR البرمجية التالية التي يتم إنشاؤها في مجموعة StableNet عند تشغيل init-data-source.py.
يجب تشغيل النصوص البرمجية يدويًا في المرة الأولى بترتيب تسلسلي للتأكد من أن كل شيء يعمل بشكل جيد.
عند تشغيل النصوص البرمجية لأول مرة، تتم مزامنة بيانات اليوم الحالي فقط. يمكن مزامنة البيانات التاريخية لاحقًا، بعد إعداد المزامنة التلقائية.
لا يلزم استخدام متغير البيئة SERVER_ID إلا إذا تم تكوينه. يجب تنفيذ هذه الأوامر لكل SERVER_ID على حدة.
مزامنة القياسات
يقوم هذا النص البرمجي بمزامنة القياسات من واجهة برمجة تطبيقات StableNet استنادًا إلى عوامل تصفية العلامات المكوّنة. يُستخدم هذا لاحقًا في المزامنة التزايدية لمزامنة بيانات القياسات المطلوبة فقط.
المزامنة التزايدية
يقوم هذا الأمر بمزامنة بيانات القياس الأولية من Oracle/MySQL إلى PostgreSQL. في كل عملية تشغيل، تتم مزامنة البيانات الجديدة فقط. يتم تخزين البيانات في sn_ping_data وsn_snmp_data وsn_usrscript_data. بالإضافة إلى ذلك، يقوم بتجميع هذه البيانات الأولية في جدول stablenet_measurement_data_minutely الذي يحتوي على value_avg وvalue_min وvalue_max.
مزامنة التجميع
هذه الخطوة اختيارية ولا تلزم إلا إذا كنت بحاجة إلى فترات الـ 5 والـ 15 دقيقة. وإلا، فتابع بالمزامنة الساعية بدلاً من ذلك. إذا لم تكن بحاجة إليها، فيجب عليك أيضًا إزالة أحجام الفترات المقابلة من استعلام البيانات dq_stablenet_measurement_data.
يُجمّع البيانات الأولية من المزامنة التزايدية في فترات كل 5 دقائق وكل 15 دقيقة. يتم تخزين البيانات في stablenet_measurement_data_5_minutely وstablenet_measurement_data_15_minutely. تحتوي الجداول الناتجة على الأعمدة value_avg وvalue_min وvalue_max للصفوف المجمّعة.
مزامنة التجميع الساعية
يُجمّع البيانات من جدول stablenet_measurement_data_minutely في stablenet_measurement_data_hourly. على الرغم من أن هذا الجدول يحتوي على value_min وvalue_max، إلا أنه لا يحتوي على value_avg. وبدلاً من ذلك، فإنه يحتوي على أعمدة إحصائيات timescaledb (stats_agg statssummary2d، percentile_agg uddsketch، state_agg stateagg، ). يمكن استخدام هذه الأعمدة لاحقًا للحصول على الكثير من المعلومات الإحصائية حول البيانات المجمّعة.
يجب تكوين القياسات التي يتم الحصول على بيانات state_agg لها في /etc/stablenet-fdw/stablenet-fdw.conf باستخدام الخيار snmp_state_agg_measurements. يتم تعريف القياسات بواسطة اسم القالب ومفتاح المقياس، على سبيل المثال:
snmp_state_agg_measurements = Interface Relative IPMPLS 64Bit#1008
يمكن الفصل بين أزواج القياس / مفتاح المقياس المتعددة بفاصلة.
قم بتفعيل state_agg فقط على القياسات / المقاييس ذات التعددية المنخفضة، مما يعني وجود عدد قليل جدًا من القيم المميزة فقط (مثل التعدادات enums).
مزامنة الإحصائيات
يُجري تجميعًا للبيانات الإحصائية من stablenet_measurement_data_hourly إلى stablenet_measurement_data_daily وstablenet_measurement_data_weekly وstablenet_measurement_data_monthly وstablenet_measurement_data_quartely وstablenet_measurement_data_yearly.
المزامنة التلقائية
بعد تشغيل نصوص المزامنة البرمجية يدويًا، نريد تمكين جداول تشغيل النصوص البرمجية لإجراء المزامنة تلقائيًا.
مزامنة السجل التاريخي
قم بتشغيل هذا النص البرمجي بعد المزامنة الأولية وبعد إعداد المزامنة التلقائية.
يقوم هذا النص البرمجي بمزامنة البيانات التاريخية استنادًا إلى تكوين [history_sync] لـ days وstart_date وend_date. عادةً، لإجراء مزامنة تاريخية أولية، قد ترغب فقط في تعيين days أو إبقاء الإعدادات كما هي والمزامنة للخلف ببساطة لمدة عام واحد.
