تنسيق البيانات

تُعرَّف إدارة البيانات بأنها تنظيم ودمج البيانات المُجمَّعة من مصادر مُتعددة. تشمل هذه العملية إضافة التعليقات التوضيحية، ونشر البيانات، وعرضها، بهدف الحفاظ على قيمتها بمرور الوقت وضمان استمرارية توافرها لإعادة الاستخدام والحفظ. تشمل إدارة البيانات "جميع العمليات اللازمة لإنشاء البيانات وصيانتها وإدارتها وفقًا لمبادئ مُحددة وبطريقة مُحكمة ، إلى جانب القدرة على إضافة قيمة إلى البيانات". ^{[ 1 ]} في مجال العلوم، قد تُشير إدارة البيانات إلى عملية استخلاص المعلومات المهمة من النصوص العلمية، مثل المقالات البحثية التي يُعدّها الخبراء، وتحويلها إلى صيغة إلكترونية، مثل إدخالها في قاعدة بيانات بيولوجية . ^{[ 2 ]}

في عصر البيانات الضخمة المعاصر ، برزت أهمية تنظيم البيانات بشكل متزايد، لا سيما في أنظمة معالجة البيانات المعقدة ذات الأحجام الكبيرة للبرمجيات . ^{[ 3 ]} ويُستخدم هذا المصطلح أيضًا في العلوم الإنسانية، ^{[ 4 ]} حيث تتطلب البيانات الثقافية والأكاديمية المتزايدة من مشاريع العلوم الإنسانية الرقمية الخبرة والممارسات التحليلية لتنظيم البيانات. ^{[ 5 ]} وبشكل عام، يشمل تنظيم البيانات مجموعة من الأنشطة والعمليات المتعلقة بإنشاء وإدارة وصيانة والتحقق من صحة أي مكون . ^{[ 6 ]} وعلى وجه التحديد، يُقصد بتنظيم البيانات محاولة تحديد المعلومات التي تستحق الحفظ ومدة حفظها. ^{[ 7 ]}

عادةً ما يبدأ المستخدم ، وليس قاعدة البيانات نفسها، عملية تنظيم البيانات وصيانة البيانات الوصفية . ^{[ 8 ]} ووفقًا لكلية الدراسات العليا لعلوم المكتبات والمعلومات بجامعة إلينوي ، فإن "تنظيم البيانات هو الإدارة النشطة والمستمرة للبيانات طوال دورة حياتها، بدءًا من أهميتها وفائدتها للبحث العلمي والتعليم؛ إذ تُمكّن أنشطة التنظيم من اكتشاف البيانات واسترجاعها، والحفاظ على جودتها، وإضافة قيمة لها، وتوفير إمكانية إعادة استخدامها بمرور الوقت." [ ^{9 ] ويختلف} سير عمل تنظيم البيانات عن إدارة جودة البيانات ، وحماية البيانات ، وإدارة دورة حياتها ، ونقلها . ^{[ 8 ]}

تتوفر بيانات التعداد السكاني في شكل بطاقات مثقبة مُجدولة منذ أوائل القرن العشرين، وأصبحت إلكترونية منذ ستينيات القرن نفسه. ^{[ 10 ]} ويشير موقع اتحاد الجامعات للبحوث السياسية والاجتماعية (ICPSR) إلى عام 1962 كتاريخ إنشاء أول أرشيف لبيانات المسح. ^{[ 11 ]}

نُشرت معلومات أساسية معمقة حول مكتبات البيانات في عدد عام 1982 من مجلة " اتجاهات المكتبات" الصادرة في إلينوي. ^{[ 12 ]} وللاطلاع على معلومات تاريخية حول حركة أرشفة البيانات، يُرجى مراجعة "احتياجات المعلومات الاجتماعية والعلمية للبيانات الرقمية: تطور البنية التحتية الدولية لأرشفة البيانات". ^{[ 13 ]} وتعتمد عملية التنسيق الدقيقة التي تُجرى داخل أي مؤسسة على حجم البيانات، ومستوى التشويش فيها، ومعنى الاستخدام المستقبلي المتوقع لها في نشرها. ^{[ 3 ]}

أدت الأزمات في بيانات الفضاء إلى إنشاء نموذج نظام المعلومات الأرشيفية المفتوحة (OAIS) في عام 1999 ، ^{[ 14 ]} الذي أشرفت عليه اللجنة الاستشارية لأنظمة بيانات الفضاء (CCSDS) ، والتي تم تشكيلها في عام 1982. ^{[ 15 ]}

يُستخدم مصطلح "تنسيق البيانات" أحيانًا في سياق قواعد البيانات البيولوجية ، حيث تُجمع معلومات بيولوجية محددة من مجموعة من المقالات البحثية، ثم تُخزن ضمن فئة معينة في قاعدة البيانات. على سبيل المثال، يمكن الحصول على معلومات حول مضادات الاكتئاب من مصادر متعددة، وبعد التحقق من توفرها في قاعدة البيانات، تُحفظ ضمن فئة مضادات الاكتئاب في قاعدة بيانات الدواء. كما تستخدم المؤسسات تنسيق البيانات في عملياتها التشغيلية والاستراتيجية لضمان جودة البيانات ودقتها. ^{[ 16 ] [ 17 ]}

يدرس مشروع حزم نشر المعلومات لإعادة استخدام المعلومات (DIPIR) بيانات البحث التي ينتجها ويستخدمها علماء الاجتماع الكميون وعلماء الآثار وعلماء الحيوان. ويستهدف المشروع الباحثين الذين يستخدمون البيانات الثانوية، والقائمين على المحفوظات الرقمية، ومديري المستودعات الرقمية، وموظفي مراكز البيانات، وغيرهم ممن يجمعون المعلومات الرقمية ويديرونها ويخزنونها. ^{[ 18 ]}

تأسس بنك بيانات البروتين في عام 1971 في مختبر بروكهافن الوطني ، وتطور ليصبح مشروعًا عالميًا. ^{[ 19 ]} يحتوي بنك بيانات البروتين، وهو قاعدة بيانات للبيانات الهيكلية ثلاثية الأبعاد للبروتينات والجزيئات البيولوجية الكبيرة الأخرى، على أكثر من 120,000 بنية، جميعها موحدة ومُدققة باستخدام البيانات التجريبية ومُفهرسة.

يعود تاريخ FlyBase ، وهو المستودع الرئيسي للبيانات الجينية والجزيئية لعائلة الحشرات Drosophilidae ، إلى عام 1992. يقوم FlyBase بشرح جينوم Drosophila melanogaster بالكامل . ^{[ 20 ]}

اتحاد البيانات اللغوية هو مستودع بيانات للبيانات اللغوية، ويعود تاريخه إلى عام 1992. ^{[ 21 ]}

بدأ مشروع مسح سلون الرقمي للسماء مسح سماء الليل في عام 2000. ^{[ 22 ]} وقد دافع عالم الحاسوب جيم غراي ، أثناء عمله على بنية البيانات الخاصة بمشروع مسح سلون الرقمي للسماء، عن فكرة تنظيم البيانات في العلوم. ^{[ 23 ]}

كان برنامج DataNet برنامجًا بحثيًا تابعًا لمكتب البنية التحتية السيبرانية التابع للمؤسسة الوطنية للعلوم في الولايات المتحدة، حيث موّل مشاريع إدارة البيانات في العلوم. ^{[ 24 ]} يُعدّ مشروع DataONE (شبكة رصد البيانات للأرض) أحد المشاريع الممولة من خلال DataNet ، والذي يُساعد مجتمع علوم البيئة على حفظ البيانات ومشاركتها. ^{[ 25 ]} وتتجلى الأهمية التجارية لتنظيم البيانات في وجود براءات اختراع في هذا المجال. فعلى سبيل المثال، تمتلك شركات مثل Tamr Inc. وPraxi Data براءات اختراع متعلقة بتقنيات وعمليات تنظيم البيانات. ^{[ 26 ]}

• بيوكوراتور
• علم آثار البيانات
• تدهور البيانات
• إدارة تنسيقات البيانات
• حفظ البيانات
• إدارة البيانات
• معالجة البيانات
• التنسيق الرقمي – تنسيق الوثائق المنشورة، بدلاً من البيانات الخام ^{[ 7 ]} 
• الحفظ الرقمي
• أخصائي المعلومات – شخص يتمتع بخبرة واسعة في مجال تنظيم البيانات 

• تنسيق البيانات البيئية والإيكولوجية: DataONE
• أدوات وخدمات إدارة البيانات التي تغطي تخصصات علمية متعددة: DataConservancy ( مؤرشفة بتاريخ 28 أكتوبر 2020 على موقع Wayback Machine)