Image restoration by artificial intelligence

Digital photograph restoration and colorization using artificial intelligence

Image restoration is the operation of taking a corrupt/noisy image and estimating the clean, original image. Corruption may come in many forms such as motion blur, noise and camera mis-focus.[1] Image restoration is performed by reversing the process that blurred the image and such is performed by imaging a point source and use the point source image, which is called the Point Spread Function (PSF) to restore the image information lost to the blurring process.

Image restoration is different from image enhancement in that the latter is designed to emphasize features of the image that make the image more pleasing to the observer, but not necessarily to produce realistic data from a scientific point of view. Image enhancement techniques (like contrast stretching or de-blurring by a nearest neighbor procedure) provided by imaging packages use no a priori model of the process that created the image.

With image enhancement noise can effectively be removed by sacrificing some resolution, but this is not acceptable in many applications. In a fluorescence microscope, resolution in the z-direction is bad as it is. More advanced image processing techniques must be applied to recover the object.

Main use cases

The objective of image restoration techniques is to reduce noise and recover resolution loss. Image processing techniques are performed either in the image domain or the frequency domain. The most straightforward and a conventional technique for image restoration is deconvolution, which is performed in the frequency domain and after computing the Fourier transform of both the image and the PSF and undo the resolution loss caused by the blurring factors.[2] Nowadays, photo restoration is done using digital tools and software to fix any type of damage images may have and improve the general quality and definition of the details.[3]

Types of AI corrections

1. Geometric correction

2. Radiometric correction

3. Denoising

Image restoration techniques aim to reverse the effects of degradation and restore the image as closely as possible to its original or desired state. The process involves analysing the image and applying algorithms and filters to remove or reduce the degradations. The ultimate goal is to enhance the visual quality, improve the interpretability, and extract relevant information from the image.[2]

يمكن تصنيف ترميم الصور بشكل عام إلى نوعين رئيسيين: طرق المجال المكاني وطرق المجال الترددي. تعمل تقنيات المجال المكاني مباشرةً على وحدات البكسل في الصورة، بينما تحوّل طرق المجال الترددي الصورة إلى المجال الترددي باستخدام تقنيات مثل تحويل فورييه، حيث تُجرى عمليات الترميم. ولكلتا الطريقتين مزاياها، وهما مناسبتان لأنواع مختلفة من تدهور جودة الصور. [ 2 ]

التقنيات والخوارزميات

أساليب المجال المكاني

تعتمد تقنيات المجال المكاني بشكل أساسي على قيم البكسل في الصورة. ومن بين الطرق الشائعة في هذا المجال ما يلي:

التصفية الوسيطة

تستبدل هذه التقنية قيمة كل بكسل بالقيمة المتوسطة في جواره المحلي، مما يقلل بشكل فعال من ضوضاء النبضات. [ 2 ]

ترشيح وينر

استنادًا إلى النماذج الإحصائية ، تعمل مرشحات وينر على تقليل متوسط ​​مربع الخطأ بين الصورة الأصلية والصورة المُرشَّحة. [ 4 ] وهي مفيدة بشكل خاص في تقليل التشويش وتحسين الصور الضبابية.

التنظيم بالتباين الكلي

تُقلل هذه التقنية من التباين الكلي للصورة مع الحفاظ على تفاصيلها المهمة. [ 2 ] وهي فعالة في إزالة التشويش مع الحفاظ على حواف الصورة.

أساليب مجال التردد

تتضمن تقنيات مجال التردد تحويل الصورة من المجال المكاني إلى مجال التردد، وذلك عادةً باستخدام تحويل فورييه. ومن الطرق الشائعة في هذا المجال ما يلي:

الترشيح العكسي

تهدف هذه التقنية إلى استعادة الصورة الأصلية من خلال تقدير معكوس دالة التدهور. ومع ذلك، فهي حساسة للغاية للضوضاء، وقد تُضخّم الضوضاء أثناء عملية الاستعادة.

ترشيح المربعات الصغرى المقيدة

من خلال دمج القيود على الحل، تقلل هذه الطريقة من التشويش وتستعيد الصورة مع الحفاظ على تفاصيل الصورة المهمة.

الترشيح المتماثل

تُستخدم هذه التقنية لتحسين الصور التي تعاني من التشويش الجمعي والضربي . وتقوم بمعالجة مكونات الصورة ذات التردد المنخفض والتردد العالي بشكل منفصل لتحسين وضوحها.

التطبيقات

تتمتع عملية ترميم الصور بمجموعة واسعة من التطبيقات في مختلف المجالات، بما في ذلك:

التحليل الجنائي

في التحقيقات الجنائية ، يمكن لتقنيات استعادة الصور أن تساعد في تحسين لقطات المراقبة، واستعادة التفاصيل من الصور منخفضة الجودة، وتحسين التعرف على الأشياء أو الأفراد.

التصوير الطبي

يُعدّ ترميم الصور أمراً بالغ الأهمية في التصوير الطبي لتحسين دقة التشخيص . فهو يساعد في تقليل التشويش، وتعزيز التباين، وتحسين دقة الصورة لتقنيات مثل الأشعة السينية، والتصوير بالرنين المغناطيسي، والتصوير المقطعي المحوسب، والموجات فوق الصوتية.

التصوير الفوتوغرافي

تُستخدم تقنيات ترميم الصور بشكل شائع في التصوير الرقمي لتصحيح العيوب الناتجة عن عوامل مثل ضبابية الحركة، وانحرافات العدسة، وتشويش المستشعر. كما يمكن استخدامها لترميم الصور القديمة والتالفة.

حفظ الأرشيف

يلعب ترميم الصور دورًا هامًا في الحفاظ على الوثائق التاريخية والأعمال الفنية والصور الفوتوغرافية. فمن خلال تقليل التشويش، وتحسين التفاصيل الباهتة، وإزالة الشوائب، يمكن الحفاظ على المحتوى البصري القيّم للأجيال القادمة. [ 3 ]

التحديات والاتجاهات المستقبلية

على الرغم من التقدم الكبير في مجال ترميم الصور، لا تزال هناك تحديات عديدة. تشمل بعض التحديات الرئيسية التعامل مع حالات التدهور المعقدة، والتعامل مع المعلومات المحدودة، ومعالجة المفاضلة بين جودة الترميم ووقت الحساب.

من المرجح أن يتأثر مستقبل ترميم الصور بالتطورات في مجال التعلم العميق والذكاء الاصطناعي . وقد أظهرت الشبكات العصبية الالتفافية (CNNs) نتائج واعدة في مهام ترميم الصور المختلفة، بما في ذلك إزالة التشويش، وتحسين الدقة، وإعادة بناء الصور. كما حظي استخدام الشبكات التوليدية التنافسية (GANs) باهتمام متزايد في مجال ترميم الصور الواقعي. [ 5 ]

بالإضافة إلى ذلك، من المتوقع أن توفر التقنيات الناشئة مثل التصوير الحاسوبي والتصوير متعدد المستشعرات طرقًا جديدة لأبحاث وتطبيقات استعادة الصور.

انظر أيضاً

مراجع

  1. ترميم الصور
  2. 1 2 3 4 5 أغراوال، راشمي؛ غوبتا، نيها؛ باترا، مريدولا؛ أرورا، كافيتا (2023). "مراجعة شاملة لتقنيات استعادة الصور وتقليل التشويش". المجلة الدولية للاتجاهات الحديثة والمبتكرة في الحوسبة والاتصالات . 11 (6s): 463-474 .
  3. 1 2 ليو، شينوي؛ بيدرسن، ماريوس؛ وانغ، رينفانغ (يوليو 2022). "دراسة استقصائية لتقنيات تحسين الصور الطبيعية: التصنيف والتقييم والتحديات والآفاق". معالجة الإشارات الرقمية . 127 103547. Bibcode : 2022DSP...12703547L . doi : 10.1016/j.dsp.2022.103547 .
  4. خير الدين، أ.؛ بن محمد، ك.؛ بويش، و. (2007-07-01). "استعادة الصور الرقمية باستخدام مرشح وينر في حالة ثنائية الأبعاد" . التقدم في برمجيات الهندسة . 38 (7): 513-516 . doi : 10.1016/j.advengsoft.2006.10.001 . ISSN 0965-9978 . 
  5. سو، جينغوين؛ شو، بويان؛ ين، هوجون (28-05-2022). "دراسة استقصائية لأساليب التعلم العميق في استعادة الصور" . الحوسبة العصبية . 487 : 46-65 . doi : 10.1016/j.neucom.2022.02.046 . ISSN 0925-2312 .