أسماء منسوخة لا تتطابق: المحارف الخفية في النص العربي والعلاج
باختصار: عندما تُنسخ الأسماء والأرقام من واتساب أو مستند Word أو موقع آخر، تأتي معها أحياناً محارف لا يراها المستخدم: علامات الاتجاه LRM وRLM، ومسافات غير قابلة للكسر، وفاصل عرضه صفر، وحروف تطويل. هذه المحارف تجعل نصين متطابقين بالعين مختلفين للنظام، فيفشل التحقق أو البحث أو كشف التكرار. العلاج أن تكشفها أولاً بعرض رموز النص، ثم تنظفها عند الاستقبال بقاعدة معلنة تحذف ما لا يلزم وتحافظ على ما يلزم، وأن تختبر النتيجة بأمثلة حقيقية من واتساب.
الأعراض الشائعة
قد تعرف أن لديك مشكلة محارف خفية حين تلاحظ ما يلي:
- عميل مسجل مرتين بالاسم نفسه ظاهرياً.
- رقم هاتف يُرفض في النموذج وهو يبدو سليماً.
- كود خصم صحيح لا يُقبل حين يلصقه الزبون، ويُقبل حين يكتبه.
- بحث لا يجد اسماً موجوداً في الجدول.
- نص عربي يفقد ترتيبه فجأة عند وجود رقم أو اسم إنجليزي بجانبه.
وكل هذه الأعراض لها سبب واحد: النص الذي يراه الإنسان ليس هو النص الذي يستقبله البرنامج.
أشهر المحارف الخفية
| المحرف | وصفه | من أين يأتي غالباً |
|---|---|---|
| LRM وRLM | علامتا اتجاه (يسار لليمين، يمين ليسار) | نسخ من واتساب وتطبيقات المحادثة وأدوات تحرير |
| مسافة غير قابلة للكسر | تشبه المسافة لكنها محرف مختلف | Word ومواقع الويب |
| فاصل عرضه صفر (ZWJ وZWNJ وZWSP) | يفصل أو يصل الحروف دون أثر ظاهر | نصوص مولدة أو منسوخة من خطوط معينة |
| الحرف التطويلي (ـ) | يمد الحرف | تنسيق يدوي |
| الحركات | فتحة وضمة وشدة | نصوص دينية وأدبية |
| محارف تحكم عند تقطيع السطر | علامات داخل الملفات | PDF وتصديرات الجداول |
وتفاصيل هذه العلامات واستخداماتها الصحيحة موجودة في مقال W3C المذكور أدناه. بعضها مفيد في مكانه، مثل علامة الاتجاه حين تُستخدم عمداً لضبط عرض نص مختلط، فلا تحذفها كلها دون تمييز.
كيف تكشفها
لا تخمّن. اعرض النص رمزاً رمزاً. في JavaScript يمكنك طباعة شيفرة كل محرف:
[..."أحمد"].map(c => c.codePointAt(0).toString(16))
الناتج يعرض قائمة بالأرقام السداسية العشرية، وإذا ظهر فيها 200f فهذا محرف RLM، وإذا ظهر 200e فهو LRM. والقيمة a0 مسافة غير قابلة للكسر، و200b فاصل عرضه صفر. أما مستخدمو الجداول، فيمكنهم المقارنة بين LEN للنص وعدد الحروف الظاهرة، فإذا زاد الطول عن العدد المتوقع بواحد فالسبب غالباً محرف مخفي.
وهذا الأسلوب بسيط، لكنه يكشف المشكلة في دقيقتين دون أي أداة خاصة.
العلاج عند الاستقبال
أفضل مكان للمعالجة هو لحظة استقبال الحقل، قبل التحقق وقبل الحفظ، لا بعدها. اتبع هذه الخطوات:
- احتفظ بالنص الأصلي في سجل إن لزم، ثم خزّن نسخة نظيفة للاستخدام.
- طبّق قواعد التطبيع. الدالة
normalizeفي JavaScript توحّد الأشكال المكافئة من حيث الترميز، وهي خطوة مفيدة لكنها لا تحذف علامات الاتجاه ولا الفواصل، لذلك تحتاج إلى خطوة صريحة بعدها. - احذف المحارف التي لا تلزم هذا الحقل. اسم العميل لا يحتاج إلى فاصل عرضه صفر، ورقم الهاتف لا يحتاج إلى أي علامة اتجاه.
- حوّل المسافات غير القابلة للكسر إلى مسافات عادية وقلّص المسافات المتتالية.
- أبقِ ما يخدم القراءة مثل علامة الاتجاه في عنوان مختلط، لكن في حقل العرض لا في حقل الاسم الذي تبحث به.
وهذا مثال توضيحي لدالة تنظيف تحذف الفئات الأشهر:
const clean = s => s.normalize("NFC")
.replace(/[---]/g, "")
.replace(/ /g, " ")
.replace(/\s+/g, " ")
.trim();
لا تنسخها كما هي لكل الحقول. مثلاً حقل نص حر لقصيدة أو اقتباس قد يحتاج إلى بعض هذه المحارف، فعامله بشكل مختلف عن حقل الاسم أو الكود.
الأرقام والأكواد والروابط
حقول مثل رقم الطلب وكود الخصم ورقم الهاتف ورقم الفاتورة هي الأكثر تأثراً، لأنها تُلصق من واتساب غالباً. ويمكنك هنا أن تكون صارماً: احذف كل ما ليس رقماً أو حرفاً لاتينياً من الحقل، وحوّل الأرقام الهندية إلى لاتينية، ثم تحقق. وقد تحدثنا في مقال سابق عن خانة الهاتف التي تقبل ما يكتبه الزبون، وهذه الخطوة تكمله.
بعد التنظيف: ماذا تختبر
حضّر خمس عينات من واتساب وWord وصفحة ويب وملف PDF وكتابة مباشرة، كلها لنفس الاسم "عبد الله"، ثم:
- [ ] هل تنتج الخمسة النص نفسه بعد التنظيف؟
- [ ] هل يبقى الاسم كاملاً بمسافة واحدة بين الجزأين؟
- [ ] هل يجد البحث السجل بأي منها؟
- [ ] هل تظهر الصفحة النهائية بالاتجاه الصحيح؟
- [ ] هل يعرض التقرير المصدّر إلى CSV نصاً نظيفاً؟
إن نجحت الخمسة، فقد أغلقت الباب أمام أغلب حالات التكرار الغامضة في بياناتك.
لماذا لا يكفي إخبار الزبون أن يكتب بنفسه
قد يبدو الحل الأسهل أن تطلب من الزبون كتابة الكود بدل لصقه، لكن هذا يُحمّل المستخدم عبء خطأ لا يراه، وقد يترك الطلب فعلاً. الأفضل أن يقوم النموذج بالتنظيف بصمت، وأن يعرض للزبون الناتج النظيف في الحقل بعد اللصق مباشرة، ليتأكد أن القيمة صحيحة. وإذا رُفض الحقل لسبب آخر، فاكتب رسالة خطأ تقول ما المطلوب بالضبط، مثل "الرقم يجب أن يتكون من عشر خانات"، لا "قيمة غير صالحة". وهذه عادة تُحسّن تجربة المستخدم أكثر مما تتوقع حتى لو لم تكن المحارف الخفية هي السبب.
أسئلة شائعة
هل أحذف الحركات من الأسماء دائماً؟
لا. احتفظ بالأصل كما كُتب، واحذفها في النسخة المستخدمة للبحث والمقارنة فقط.
لماذا لا يحذف المتصفح هذه المحارف وحده؟
لأنها محارف مشروعة في معيار يونيكود ولها استخدامات مقصودة. القرار بشأن ما يلزم حقلك أنت من يتخذه.
هل يحدث هذا في الجوال فقط؟
لا، بل في أي نسخ ولصق، لكنه أكثر على الجوال لأن واتساب هو المصدر المعتاد للنصوص المنسوخة في كثير من الأنشطة.
كيف أعالج بيانات قديمة موجودة؟
شغّل سكربت يقارن النص الأصلي بالنظيف ويعرض الفروق لمراجعتك قبل الدمج. لا تدمج السجلات آلياً قبل أن تراها بعينك.
إذا كانت بيانات عملائك تعاني من تكرار غامض أو أكواد لا تُقبل، فـراسلونا لنراجع نماذجك وقواعد الاستقبال ونقترح تنظيفاً آمناً.