معالجة اللغات الطبيعية: التحليل الموضوعي لمصادر المعلومات


الزيادة الهــائلة في حجم المعلومات والمعرفة الموجودة على شبكة الانترنت صعبت من عملية السيطرة عليها، وأصبحت مؤسسات المعلومات غير قادرة على القيام بعملية الوصف الموضوعي التي تعتمد على القوائم أو اللغات المقيدة، وكلاهما متبع في أدوات التحليل الموضوعي التقليدية لمصادر المعلومات. وبما أن هذه الطرق ليست كافية في التعامل مع كل ما ينشر على (الإنترنت) في الوقت الحالي، فقد أصبح من الضروري وجود نظام يسمح بمشاركة كل المستفيدين في عملية وصف المعلومات المتوفرة، وذلك سعيا لتنظيمها وتسهيل عمليات الوصول إليها واتاحتها، وسنتناول في التالي التعريف بالتحليل الموضوعي وأهميته والتوجهات الحديثة فيه وأهم أدواته وتقنياته في البيئة الرقمية.

Topic modeling using LDA algorithm | NLP Part-3 | by Rahul Sood | Batteries  Included | Medium
أكمل قراءة المقالة

استخلاص المحتوى على الويب (Web Content Scraping)

ما هي عملية استخلاص المحتوى على الويب (Web Content Scraping)؟

هي تقنية تمكننا من جمع معلومات من صفحات الانترنت، معالجتها ومن ثم تخزينها في قاعدة بيانات أو إرسالها إلى إجرائية أخرى.

فبدلا من القيام بالنسخ و اللصق بشكل يدوي، نقوم بكتابة كود برمجي يقوم بطلب الصفحة ومعالجتها واستخراج المعلومات منها ومن ثم تخزينها .

أكمل قراءة المقالة

هل باتت اللغة قاصرة في زمن وسائل التواصل الاجتماعي؟

في آخر إحصائية لعدد مستخدمي الانترنت بالعالم تم تسجيلها في شهر حزيران لعام 2019 وصل العدد إلى ما يقارب (4,536,248,808) مستخدم من أصل (7,716,223,209) نسمة هو عدد سكان العالم تقريباً وفقاً لنفس الإحصائية.[1]

أكمل قراءة المقالة

سلسلة الترجمة الآلية – أولا: الترجمة الآلية الإحصائية Statistical Machine Translation

ماهي الترجمة الآلية؟

الترجمة الآلية هي بناء برنامج حاسوبي قادر بشكل آلي على ترجمة كلمة او نص من اللغة المصدر source language إلى اللغة الهدف target language. وهي من أشهر المهام التي يتم العمل عليه في معالجة اللغات الطبيعية الحاسوبية Computational Natural Language Processing. 

الترجمة الآلية الإحصائية Statistical Machine Translation
أكمل قراءة المقالة

اﻹكمال التلقائي للنصوص

الإكمال التلقائي للنصوص هي الميزة التي تسمح للتطبيق بالتنبأ بالنص الكامل، وذلك بمجرد كتابة بادئة من النص، من المأكد أنك قمت باستخدامه كثيراً في حياتك اليومية مثل:

  • محركات البحث: محرك البحث جوجل يقترح لك اكمالاً تلقائياً للنص بمجرد كتابة جزء منه في مستطيل البحث، عادة تكون هذه الاقتراحات مرتبة حسب أكثر اﻷمور التي يتم البحث عنها حالياً. 
  • في البريد الالكتروني، بمجرد أن تكتب جزأ من العنوان سوف تظهر لك قائمة من الاقتراحات. 
  • وسائل التواصل الاجتماعي، مثل فيسبوك، لينكيد إين، انستغرام… 
  • في محررات كتابة الأكواد، أنا أستخدم حاليا تطبيق Atom ولقد قمت باستخدام ميزة الإكمال التلقائي على اﻷقل 10 مرات في هذا الجزأ البسيط من المقالة. 
أكمل قراءة المقالة