حل مشكلة ظهور الحروف الغريبة في ملف CSV في Excel: إصلاح ترميز UTF-8

Equalang

باختصار

تظهر حروف غريبة مثل é أو رموز مشوهة عند فتح ملف CSV بتنسيق UTF-8 في Excel؟ تعرف على كيفية الاستيراد عبر 65001 وإضافة UTF-8 BOM وحفظ الأصفار الأولى.

الكلمات المفتاحية: مشكلة الحروف الغريبة في csv excel; ترميز utf 8 إكسيل; حل مشكلة ترميز csv; استيراد csv في excel; utf-8 bom excel

يؤدي النقر المزدوج على ملف .csv بترميز UTF-8 سليم داخل برنامج Microsoft Excel في كثير من الأحيان إلى تحويل الحروف اللاتينية المشكولة ورموز العملات والنصوص العربية أو الآسيوية إلى حروف ورموز غريبة ومشوهة (Mojibake) مثل Café أو München أو € أو نصوص غير مفهومة. يحدث هذا لأن ملف .csv العادي لا يحتوي على ترويسة بيانات وصفية تعلن عن ترميز الأحرف المعتمد، مما يجعل إصدارات Excel التقليدية تعتمد تلقائياً على صفحة الترميز الإقليمية القديمة لنظام التشغيل الخاص بك (مثل Windows-1256 أو Windows-1252 أو MacRoman) ما لم يبدأ الملف بعلامة ترتيب البايتات UTF-8 BOM المكونة من 3 بايت (EF BB BF). يمكنك إصلاح هذه المشكلة في أقل من دقيقة دون فقدان حدود الأعمدة أو الأصفار البادئة في الأرقام—فقط تجنب الضغط على Ctrl+S أثناء ظهور النص المشوه على الشاشة، وإلا سيقوم Excel بإعادة كتابة الحروف التالفة بشكل دائم فوق ملفك الأصلي السليم.

مقارنة سريعة: 3 طرق لفتح ملفات CSV بتنسيق UTF-8 بشكل سليم

اختر الحل المناسب لمصدر ملف .csv ومن سيقوم بفتحه:

الطريقةالأنسب لـهل يحفظ الأصفار البادئة (00412)؟هل يعمل بالنقر المزدوج في Excel؟
1. خيار Excel بيانات > من نص/CSV (Data > From Text/CSV)فتح ملف CSV موجود دون تعديل الملف المخزن على القرصنعم (عبر تعيين نوع العمود إلى نص في المعاينة)لا (يتطلب الاستيراد من مصنف فارغ)
2. إضافة UTF-8 BOM في البداية (EF BB BF)تصدير ملفات CSV من Python أو قواعد البيانات لمستخدمي Excelلا (لا يزال Excel يحول النصوص الرقمية تلقائياً عند النقر المزدوج)نعم
3. Google Sheets أو LibreOffice Calcمعاينة ملف CSV بترميز UTF-8 أو تحويله مباشرة إلى صيغة .xlsxنعم (عند إلغاء تحديد التحويل التلقائي للأرقام أو التصدير)نعم (بعد الحفظ بصيغة .xlsx)

الحل 1: الاستيراد عبر «بيانات > من نص/CSV» (مع الحفاظ على الأصفار البادئة)

عندما يرسل لك شخص ملف .csv تم تصديره من Shopify أو Stripe أو PostgreSQL أو أداة تعمل على macOS/Linux، فإن النقر المزدوج يتجاوز محدد الترميز في Excel. يتيح لك الاستيراد من علامة التبويب بيانات إجبار Excel على قراءة الملف بترميز 65001: Unicode (UTF-8)، كما يمنحك فرصة تثبيت أعمدة أرقام المنتجات (SKU) أو أرقام الهواتف قبل أن يحذف Excel أصفارها البادئة.

  1. افتح برنامج Microsoft Excel وأنشئ مصنفاً فارغاً (Blank workbook) (لا تنقر نقراً مزدوجاً فوق ملف .csv).
  2. انتقل إلى علامة التبويب بيانات (Data) في الشريط العلوي وانقر فوق من نص/CSV (From Text/CSV) في مجموعة الحصول على البيانات وتحويلها (Get & Transform Data).
  3. حدد ملف .csv الخاص بك وانقر على استيراد (Import).
  4. في نافذة المعاينة التي تظهر، انظر إلى القائمة المنسدلة أصل الملف (File Origin) في الجزء العلوي الأيسر. قم بتغييرها من صفحة الترميز الإقليمية الافتراضية إلى 65001: Unicode (UTF-8).
  5. تحقق من جدول المعاينة—ستلاحظ أن نصوصاً مشوهة مثل Café تعود فوراً إلى شكلها السليم (Café).
  6. اختياري (حماية الأصفار البادئة والأرقام الطويلة): إذا كانت الورقة تحتوي على رموز بريدية أو أرقام هواتف أو رموز منتجات مثل 00412، فانقر على تحويل البيانات (Transform Data) في أسفل اليمين لفتح Power Query. حدد تلك الأعمدة، وغير نوع البيانات (Data Type) من عدد صحيح إلى نص (Text)، ثم انقر على إغلاق وتحميل (Close & Load).
  7. إذا لم تكن بحاجة إلى تعديل نوع الأعمدة، فانقر ببساطة على تحميل (Load).

الحل 2: إضافة UTF-8 BOM (EF BB BF) ليعمل بالنقر المزدوج مباشرة

إذا كنت تنشئ ملفات .csv لزملائك في الفريق أو للعملاء الذين سيقومون حتماً بالنقر المزدوج عليها في مستكشف الملفات أو Finder، فإن مطالبتهم بالدخول دائماً عبر بيانات > من نص/CSV ليست حلاً عملياً مستداماً.

بدلاً من ذلك، أضف علامة ترتيب البايتات (BOM) لـ UTF-8 المكونة من 3 بايت—وهي البايتات السداسية العشرية EF BB BF (\xEF\xBB\xBF)—عند البايت 0 من الملف. عندما يكتشف Excel هذه البايتات الثلاثة في بداية ملف .csv، فإنه يتحول تلقائياً إلى فك ترميز UTF-8 عند النقر المزدوج.

في Python (باستخدام pandas أو مكتبة csv القياسية)

افتراضياً، يقوم تابع pandas.DataFrame.to_csv() بكتابة ملفات UTF-8 القياسية بدون BOM (encoding="utf-8"). قم بتغيير معامل الترميز إلى utf-8-sig لتكتب Python ترويسة BOM المكونة من 3 بايت تلقائياً:

import pandas as pd

df = pd.DataFrame({
    "city": ["München", "São Paulo", "東京"],
    "item": ["Café", "Crème brûlée", "抹茶"],
    "price": ["€4.50", "€6.00", "¥600"]
})

# ترميز UTF-8 القياسي بدون BOM (تتشوه الحروف عند النقر المزدوج في Excel)
# df.to_csv("report_no_bom.csv", index=False, encoding="utf-8")

# ترميز UTF-8 مع BOM (يفتح بسلاسة عند النقر المزدوج في Excel)
df.to_csv("report_excel_ready.csv", index=False, encoding="utf-8-sig")

إذا كنت تستخدم دالتي open() و csv.writer المدمجتين في Python، فمرر encoding="utf-8-sig" إلى دالة open():

import csv

with open("report_excel_ready.csv", "w", newline="", encoding="utf-8-sig") as f:
    writer = csv.writer(f)
    writer.writerow(["city", "item", "price"])
    writer.writerow(["München", "Café", "€4.50"])

في سطر أوامر macOS أو Linux

لإصلاح ملف .csv بتنسيق UTF-8 موجود مسبقاً من سطر الأوامر دون فتح محرر نصوص، يمكنك إلحاق تسلسل البايتات \xEF\xBB\xBF في بداية الملف باستخدام printf و cat:

printf '\xEF\xBB\xBF' | cat - clean.csv > excel_ready.csv

داخل Excel (حفظ باسم - Save As)

إذا قمت بالفعل باستيراد ملف بشكل سليم وتريد حفظ نسخة .csv يمكن للآخرين فتحها بالنقر المزدوج:

  • انتقل إلى ملف > حفظ باسم (File > Save As) واختر CSV UTF-8 (مفصول بفواصل) (*.csv) من القائمة المنسدلة لنوع الملف—ولا تختر الخيارات القديمة مثل CSV (مفصول بفواصل) (*.csv) أو Macintosh Comma Separated (*.csv).

متى يجب تجنب استخدام UTF-8 BOM؟

على الرغم من أن Excel يعتمد على UTF-8 BOM للتعرف التلقائي عند النقر المزدوج، إلا أن مواصفات Unicode تشير إلى أن BOM ليس مطلوباً ولا موصى به لتدفقات UTF-8 في بيئات Unix/Linux العامة. إن أدوات سطر الأوامر الصارمة أو البرمجيات النصية القديمة التي لا تتجاهل \xEF\xBB\xBF ستعتبر هذه البايتات الثلاثة غير المرئية جزءاً من اسم أول عمود لديك (مما يحول "id" إلى "\ufeffid"). اتبع قاعدتين أساسيتين:

  • تسليم ملفات .csv لمستخدمي Excel من البشر: استخدم utf-8-sig (ترميز UTF-8 مع BOM).
  • تغذية ملفات .csv لأدوات Linux CLI الصارمة أو مسارات استيعاب قواعد البيانات: استخدم utf-8 القياسي (بدون BOM).

الحل 3: الفتح عبر Google Sheets أو LibreOffice Calc

إذا كنت لا ترغب في التعامل مع أوامر الطرفية أو إعدادات Power Query في Excel، فافتح الملف في برنامج جداول بيانات يعتمد UTF-8 افتراضياً:

  • Google Sheets: افتح جدول بيانات فارغاً -> ملف > استيراد > تحميل (File > Import > Upload) -> حدد ملف .csv. يتعرف Google Sheets تلقائياً على ترميز UTF-8 القياسي بدون BOM. بعد الاستيراد، انقر على ملف > تنزيل > Microsoft Excel (.xlsx) للحصول على مصنف Excel أصلي لا يكون فيه ترميز الأحرف غامضاً أبداً.
  • LibreOffice Calc: يؤدي فتح أي ملف .csv فوراً إلى ظهور نافذة استيراد تتيح لك التأكد من ضبط مجموعة الأحرف (Character set) على Unicode (UTF-8) وتعيين أعمدة محددة كنص قبل النقر على موافق (OK).

إذا كنت بحاجة أيضاً إلى ترجمة جدول منتجات متعدد اللغات بصيغة .csv أو .xlsx دون كسر فواصل الفواصل أو ترميز UTF-8، فراجع أدلتنا حول كيفية ترجمة ملف CSV وكيفية ترجمة ملف Excel.

لماذا تتحول كلمة Café إلى Café في Excel؟

قد يبدو ظهور é أو € في جدول البيانات كأنه تلف عشوائي للملف، ولكنه في الحقيقة أمر حتمي ومتوقع تقنياً. إليك ما يحدث خلف الكواليس:

  1. ملفات .csv القياسية هي تدفقات بايتات خام: على عكس صيغة .xlsx (وهي حزمة مضغوطة من ملفات XML تصرح صراحة بأنها بترميز UTF-8)، فإن ملف .csv لا يحتوي على بيانات وصفية في ترويسته. تقوم جميع أدوات البيانات الحديثة—مثل مكتبة pandas في Python و PostgreSQL و Shopify و Stripe و Google Sheets وأدوات macOS/Linux—بتصدير ملفات .csv بترميز UTF-8 بدون BOM.
  2. يستخدم UTF-8 من 2 إلى 4 بايتات للأحرف غير الإنجليزية (غير ASCII): تستخدم حروف ASCII الإنجليزية والأرقام الأساسية (A-Z, 0-9) بايتاً واحداً فقط (0x00 إلى 0x7F)، وهو متطابق تماماً بين UTF-8 وصفحات الترميز القديمة. أما أي حرف خارج نطاق ASCII الأساسي فيستخدم عدة بايتات:
    • الحرف é (U+00E9) يتم ترميزه في UTF-8 بواسطة بايتين: C3 A9.
    • الحرف ü (U+00FC) يتم ترميزه في UTF-8 بواسطة بايتين: C3 BC.
    • رمز اليورو € (U+20AC) يتم ترميزه في UTF-8 بواسطة ثلاثة بايتات: E2 82 AC.
  3. يرجع Excel تلقائياً إلى صفحة الترميز الإقليمية القديمة لنظام التشغيل: عندما تنقر نقراً مزدوجاً على ملف .csv يفتقر إلى BOM، يقوم Excel التقليدي بفك ترميز كل بايت باستخدام صفحة ترميز النظام القديمة ذات 8 بتات (مثل Windows-1252 في أنظمة غرب أوروبا، أو Windows-1256 في الأنظمة العربية، أو MacRoman).

عندما تقرأ صفحة ترميز مثل Windows-1252 تسلسلات UTF-8 متعددة البايتات بايت واحد في كل مرة، تحدث المشكلة التراكمية المسماة Mojibake:

النص الأصليبايتات UTF-8 السداسية العشريةتم فك الترميز بصفحة Windows-1252تم فك الترميز بصفحات الأنظمة الأخرى
Café43 61 66 C3 A9Café (حيث C3 = Ã, A9 = ©)Café أو رمز تالف ملحق
München4D C3 BC 6E 63 68 65 6EMünchen (حيث C3 = Ã, BC = ¼)حروف غير مفهومة
€100E2 82 AC 31 30 30€100 (حيث E2 = â, 82 = ‚, AC = ¬)رموز عشوائية + 100
日本語E6 97 A5 E6 9C AC E8 AA 9E日本語 (9 أحرف لاتينية)أحرف غريبة وغير مفهومة

نظراً لأن البايتات الأساسية على القرص لا تزال بترميز UTF-8 سليم تماماً، فإن إغلاق الملف دون حفظ يبقي بياناتك في أمان تام. ولكن في اللحظة التي تضغط فيها على Ctrl+S داخل Excel، سيعيد Excel تشفير أحرف Café المشوهة إلى القرص، مما يستبدل النص الأصلي ببيانات تالفة بصورة دائمة.

الأسئلة الشائعة

لماذا أدى حفظ ملف CSV داخل Excel إلى تدمير الحروف بشكل دائم؟

عندما يفتح Excel ملف .csv بترميز UTF-8 باستخدام صفحة ترميز قديمة مثل Windows-1252، يتم فك ترميز النص المعروض على الشاشة بالفعل إلى حروف خاطئة (مثل Café). يؤدي الضغط على Ctrl+S إلى إعادة كتابة تلك الحروف الخاطئة على القرص، مما يؤدي إلى استبدال تسلسلات بايتات UTF-8 الأصلية. إذا كنت قد حفظت التغييرات بالفعل فوق الملف، فقم بإعادة تصدير ملف .csv من نظام المصدر الخاص بك—أو استعد الإصدار السابق للملف—قبل تطبيق الحل 1 أو الحل 2.

لماذا يفتح Google Sheets ملف CSV نفسه دون ظهور أي حروف غريبة؟

يتجاهل Google Sheets صفحات الترميز الإقليمية القديمة لنظامي Windows أو macOS في جهاز الكمبيوتر لديك، ويفترض افتراضياً أن ملفات .csv المرفوعة إليه تأتي بترميز UTF-8 القياسي. وبما أن جميع تطبيقات الويب وقواعد البيانات تقريباً تصدر بترميز UTF-8 بدون BOM، فإن Google Sheets يعرضها بشكل صحيح ومباشر.

كيف أمنع Excel من حذف الأصفار البادئة (00412) أو تحويل الأرقام الطويلة إلى صيغة 1.23E+15 عند فتح CSV؟

تؤدي إضافة UTF-8 BOM إلى حل مشكلة ترميز الأحرف عند النقر المزدوج، ولكن Excel سيظل يحول النصوص الرقمية تلقائياً إلى أرقام—مما يؤدي إلى حذف الأصفار البادئة من الرموز البريدية أو أرقام المنتجات واقتطاع المعرفات المكونة من 16 رقماً. للحفاظ على الأصفار البادئة، استخدم دائماً خيار بيانات > من نص/CSV (Data > From Text/CSV)، ثم انقر على تحويل البيانات (Transform Data)، واضبط تلك الأعمدة المحددة على نوع البيانات نص (Text) قبل التحميل.

المصادر