حل مشكلة ظهور الحروف الغريبة في ملف CSV في Excel: إصلاح ترميز UTF-8
Equalangباختصار
تظهر حروف غريبة مثل é أو رموز مشوهة عند فتح ملف CSV بتنسيق UTF-8 في Excel؟ تعرف على كيفية الاستيراد عبر 65001 وإضافة UTF-8 BOM وحفظ الأصفار الأولى.
الكلمات المفتاحية: مشكلة الحروف الغريبة في csv excel; ترميز utf 8 إكسيل; حل مشكلة ترميز csv; استيراد csv في excel; utf-8 bom excel
يؤدي النقر المزدوج على ملف .csv بترميز UTF-8 سليم داخل برنامج Microsoft Excel في كثير من الأحيان إلى تحويل الحروف اللاتينية المشكولة ورموز العملات والنصوص العربية أو الآسيوية إلى حروف ورموز غريبة ومشوهة (Mojibake) مثل Café أو München أو € أو نصوص غير مفهومة. يحدث هذا لأن ملف .csv العادي لا يحتوي على ترويسة بيانات وصفية تعلن عن ترميز الأحرف المعتمد، مما يجعل إصدارات Excel التقليدية تعتمد تلقائياً على صفحة الترميز الإقليمية القديمة لنظام التشغيل الخاص بك (مثل Windows-1256 أو Windows-1252 أو MacRoman) ما لم يبدأ الملف بعلامة ترتيب البايتات UTF-8 BOM المكونة من 3 بايت (EF BB BF). يمكنك إصلاح هذه المشكلة في أقل من دقيقة دون فقدان حدود الأعمدة أو الأصفار البادئة في الأرقام—فقط تجنب الضغط على Ctrl+S أثناء ظهور النص المشوه على الشاشة، وإلا سيقوم Excel بإعادة كتابة الحروف التالفة بشكل دائم فوق ملفك الأصلي السليم.
مقارنة سريعة: 3 طرق لفتح ملفات CSV بتنسيق UTF-8 بشكل سليم
اختر الحل المناسب لمصدر ملف .csv ومن سيقوم بفتحه:
الحل 1: الاستيراد عبر «بيانات > من نص/CSV» (مع الحفاظ على الأصفار البادئة)
عندما يرسل لك شخص ملف .csv تم تصديره من Shopify أو Stripe أو PostgreSQL أو أداة تعمل على macOS/Linux، فإن النقر المزدوج يتجاوز محدد الترميز في Excel. يتيح لك الاستيراد من علامة التبويب بيانات إجبار Excel على قراءة الملف بترميز 65001: Unicode (UTF-8)، كما يمنحك فرصة تثبيت أعمدة أرقام المنتجات (SKU) أو أرقام الهواتف قبل أن يحذف Excel أصفارها البادئة.
- افتح برنامج Microsoft Excel وأنشئ مصنفاً فارغاً (Blank workbook) (لا تنقر نقراً مزدوجاً فوق ملف
.csv). - انتقل إلى علامة التبويب بيانات (Data) في الشريط العلوي وانقر فوق من نص/CSV (From Text/CSV) في مجموعة الحصول على البيانات وتحويلها (Get & Transform Data).
- حدد ملف
.csvالخاص بك وانقر على استيراد (Import). - في نافذة المعاينة التي تظهر، انظر إلى القائمة المنسدلة أصل الملف (File Origin) في الجزء العلوي الأيسر. قم بتغييرها من صفحة الترميز الإقليمية الافتراضية إلى
65001: Unicode (UTF-8). - تحقق من جدول المعاينة—ستلاحظ أن نصوصاً مشوهة مثل
Caféتعود فوراً إلى شكلها السليم (Café). - اختياري (حماية الأصفار البادئة والأرقام الطويلة): إذا كانت الورقة تحتوي على رموز بريدية أو أرقام هواتف أو رموز منتجات مثل
00412، فانقر على تحويل البيانات (Transform Data) في أسفل اليمين لفتح Power Query. حدد تلك الأعمدة، وغير نوع البيانات (Data Type) منعدد صحيحإلىنص (Text)، ثم انقر على إغلاق وتحميل (Close & Load). - إذا لم تكن بحاجة إلى تعديل نوع الأعمدة، فانقر ببساطة على تحميل (Load).
الحل 2: إضافة UTF-8 BOM (EF BB BF) ليعمل بالنقر المزدوج مباشرة
إذا كنت تنشئ ملفات .csv لزملائك في الفريق أو للعملاء الذين سيقومون حتماً بالنقر المزدوج عليها في مستكشف الملفات أو Finder، فإن مطالبتهم بالدخول دائماً عبر بيانات > من نص/CSV ليست حلاً عملياً مستداماً.
بدلاً من ذلك، أضف علامة ترتيب البايتات (BOM) لـ UTF-8 المكونة من 3 بايت—وهي البايتات السداسية العشرية EF BB BF (\xEF\xBB\xBF)—عند البايت 0 من الملف. عندما يكتشف Excel هذه البايتات الثلاثة في بداية ملف .csv، فإنه يتحول تلقائياً إلى فك ترميز UTF-8 عند النقر المزدوج.
في Python (باستخدام pandas أو مكتبة csv القياسية)
افتراضياً، يقوم تابع pandas.DataFrame.to_csv() بكتابة ملفات UTF-8 القياسية بدون BOM (encoding="utf-8"). قم بتغيير معامل الترميز إلى utf-8-sig لتكتب Python ترويسة BOM المكونة من 3 بايت تلقائياً:
import pandas as pd
df = pd.DataFrame({
"city": ["München", "São Paulo", "東京"],
"item": ["Café", "Crème brûlée", "抹茶"],
"price": ["€4.50", "€6.00", "¥600"]
})
# ترميز UTF-8 القياسي بدون BOM (تتشوه الحروف عند النقر المزدوج في Excel)
# df.to_csv("report_no_bom.csv", index=False, encoding="utf-8")
# ترميز UTF-8 مع BOM (يفتح بسلاسة عند النقر المزدوج في Excel)
df.to_csv("report_excel_ready.csv", index=False, encoding="utf-8-sig")
إذا كنت تستخدم دالتي open() و csv.writer المدمجتين في Python، فمرر encoding="utf-8-sig" إلى دالة open():
import csv
with open("report_excel_ready.csv", "w", newline="", encoding="utf-8-sig") as f:
writer = csv.writer(f)
writer.writerow(["city", "item", "price"])
writer.writerow(["München", "Café", "€4.50"])
في سطر أوامر macOS أو Linux
لإصلاح ملف .csv بتنسيق UTF-8 موجود مسبقاً من سطر الأوامر دون فتح محرر نصوص، يمكنك إلحاق تسلسل البايتات \xEF\xBB\xBF في بداية الملف باستخدام printf و cat:
printf '\xEF\xBB\xBF' | cat - clean.csv > excel_ready.csv
داخل Excel (حفظ باسم - Save As)
إذا قمت بالفعل باستيراد ملف بشكل سليم وتريد حفظ نسخة .csv يمكن للآخرين فتحها بالنقر المزدوج:
- انتقل إلى ملف > حفظ باسم (File > Save As) واختر
CSV UTF-8 (مفصول بفواصل) (*.csv)من القائمة المنسدلة لنوع الملف—ولا تختر الخيارات القديمة مثلCSV (مفصول بفواصل) (*.csv)أوMacintosh Comma Separated (*.csv).
متى يجب تجنب استخدام UTF-8 BOM؟
على الرغم من أن Excel يعتمد على UTF-8 BOM للتعرف التلقائي عند النقر المزدوج، إلا أن مواصفات Unicode تشير إلى أن BOM ليس مطلوباً ولا موصى به لتدفقات UTF-8 في بيئات Unix/Linux العامة. إن أدوات سطر الأوامر الصارمة أو البرمجيات النصية القديمة التي لا تتجاهل \xEF\xBB\xBF ستعتبر هذه البايتات الثلاثة غير المرئية جزءاً من اسم أول عمود لديك (مما يحول "id" إلى "\ufeffid"). اتبع قاعدتين أساسيتين:
- تسليم ملفات
.csvلمستخدمي Excel من البشر: استخدمutf-8-sig(ترميز UTF-8 مع BOM). - تغذية ملفات
.csvلأدوات Linux CLI الصارمة أو مسارات استيعاب قواعد البيانات: استخدمutf-8القياسي (بدون BOM).
الحل 3: الفتح عبر Google Sheets أو LibreOffice Calc
إذا كنت لا ترغب في التعامل مع أوامر الطرفية أو إعدادات Power Query في Excel، فافتح الملف في برنامج جداول بيانات يعتمد UTF-8 افتراضياً:
- Google Sheets: افتح جدول بيانات فارغاً -> ملف > استيراد > تحميل (File > Import > Upload) -> حدد ملف
.csv. يتعرف Google Sheets تلقائياً على ترميز UTF-8 القياسي بدون BOM. بعد الاستيراد، انقر على ملف > تنزيل > Microsoft Excel (.xlsx) للحصول على مصنف Excel أصلي لا يكون فيه ترميز الأحرف غامضاً أبداً. - LibreOffice Calc: يؤدي فتح أي ملف
.csvفوراً إلى ظهور نافذة استيراد تتيح لك التأكد من ضبط مجموعة الأحرف (Character set) علىUnicode (UTF-8)وتعيين أعمدة محددة كنص قبل النقر على موافق (OK).
إذا كنت بحاجة أيضاً إلى ترجمة جدول منتجات متعدد اللغات بصيغة .csv أو .xlsx دون كسر فواصل الفواصل أو ترميز UTF-8، فراجع أدلتنا حول كيفية ترجمة ملف CSV وكيفية ترجمة ملف Excel.
لماذا تتحول كلمة Café إلى Café في Excel؟
قد يبدو ظهور é أو € في جدول البيانات كأنه تلف عشوائي للملف، ولكنه في الحقيقة أمر حتمي ومتوقع تقنياً. إليك ما يحدث خلف الكواليس:
- ملفات
.csvالقياسية هي تدفقات بايتات خام: على عكس صيغة.xlsx(وهي حزمة مضغوطة من ملفات XML تصرح صراحة بأنها بترميز UTF-8)، فإن ملف.csvلا يحتوي على بيانات وصفية في ترويسته. تقوم جميع أدوات البيانات الحديثة—مثل مكتبةpandasفي Python و PostgreSQL و Shopify و Stripe و Google Sheets وأدوات macOS/Linux—بتصدير ملفات.csvبترميز UTF-8 بدون BOM. - يستخدم UTF-8 من 2 إلى 4 بايتات للأحرف غير الإنجليزية (غير ASCII): تستخدم حروف ASCII الإنجليزية والأرقام الأساسية (
A-Z,0-9) بايتاً واحداً فقط (0x00إلى0x7F)، وهو متطابق تماماً بين UTF-8 وصفحات الترميز القديمة. أما أي حرف خارج نطاق ASCII الأساسي فيستخدم عدة بايتات:- الحرف
é(U+00E9) يتم ترميزه في UTF-8 بواسطة بايتين:C3 A9. - الحرف
ü(U+00FC) يتم ترميزه في UTF-8 بواسطة بايتين:C3 BC. - رمز اليورو
€(U+20AC) يتم ترميزه في UTF-8 بواسطة ثلاثة بايتات:E2 82 AC.
- الحرف
- يرجع Excel تلقائياً إلى صفحة الترميز الإقليمية القديمة لنظام التشغيل: عندما تنقر نقراً مزدوجاً على ملف
.csvيفتقر إلى BOM، يقوم Excel التقليدي بفك ترميز كل بايت باستخدام صفحة ترميز النظام القديمة ذات 8 بتات (مثلWindows-1252في أنظمة غرب أوروبا، أوWindows-1256في الأنظمة العربية، أوMacRoman).
عندما تقرأ صفحة ترميز مثل Windows-1252 تسلسلات UTF-8 متعددة البايتات بايت واحد في كل مرة، تحدث المشكلة التراكمية المسماة Mojibake:
نظراً لأن البايتات الأساسية على القرص لا تزال بترميز UTF-8 سليم تماماً، فإن إغلاق الملف دون حفظ يبقي بياناتك في أمان تام. ولكن في اللحظة التي تضغط فيها على Ctrl+S داخل Excel، سيعيد Excel تشفير أحرف Café المشوهة إلى القرص، مما يستبدل النص الأصلي ببيانات تالفة بصورة دائمة.
الأسئلة الشائعة
لماذا أدى حفظ ملف CSV داخل Excel إلى تدمير الحروف بشكل دائم؟
عندما يفتح Excel ملف .csv بترميز UTF-8 باستخدام صفحة ترميز قديمة مثل Windows-1252، يتم فك ترميز النص المعروض على الشاشة بالفعل إلى حروف خاطئة (مثل Café). يؤدي الضغط على Ctrl+S إلى إعادة كتابة تلك الحروف الخاطئة على القرص، مما يؤدي إلى استبدال تسلسلات بايتات UTF-8 الأصلية. إذا كنت قد حفظت التغييرات بالفعل فوق الملف، فقم بإعادة تصدير ملف .csv من نظام المصدر الخاص بك—أو استعد الإصدار السابق للملف—قبل تطبيق الحل 1 أو الحل 2.
لماذا يفتح Google Sheets ملف CSV نفسه دون ظهور أي حروف غريبة؟
يتجاهل Google Sheets صفحات الترميز الإقليمية القديمة لنظامي Windows أو macOS في جهاز الكمبيوتر لديك، ويفترض افتراضياً أن ملفات .csv المرفوعة إليه تأتي بترميز UTF-8 القياسي. وبما أن جميع تطبيقات الويب وقواعد البيانات تقريباً تصدر بترميز UTF-8 بدون BOM، فإن Google Sheets يعرضها بشكل صحيح ومباشر.
كيف أمنع Excel من حذف الأصفار البادئة (00412) أو تحويل الأرقام الطويلة إلى صيغة 1.23E+15 عند فتح CSV؟
تؤدي إضافة UTF-8 BOM إلى حل مشكلة ترميز الأحرف عند النقر المزدوج، ولكن Excel سيظل يحول النصوص الرقمية تلقائياً إلى أرقام—مما يؤدي إلى حذف الأصفار البادئة من الرموز البريدية أو أرقام المنتجات واقتطاع المعرفات المكونة من 16 رقماً. للحفاظ على الأصفار البادئة، استخدم دائماً خيار بيانات > من نص/CSV (Data > From Text/CSV)، ثم انقر على تحويل البيانات (Transform Data)، واضبط تلك الأعمدة المحددة على نوع البيانات نص (Text) قبل التحميل.