แก้การเข้ารหัสข้อความและ CSV

ทำไมตัวอักษรถึงกลายเป็นอักขระมั่ว

ถ้าไฟล์แสดงสัญลักษณ์แปลก ๆ สองสามตัวในตำแหน่งที่ควรเป็นตัวอักษรที่มีเครื่องหมายกำกับ อะพอสทรอฟี สัญลักษณ์สกุลเงิน หรือภาษาไทย แปลว่าไฟล์ถูกอ่านด้วยการเข้ารหัสตัวอักษรที่ผิด ข้อความถูกเก็บเป็นไบต์ และการเข้ารหัสคือกฎสำหรับแปลงไบต์เป็นตัวอักษร ระบบสมัยใหม่ใช้ UTF-8 ส่วนโปรแกรมรุ่นเก่าบน Windows โดยเฉพาะ Excel มักบันทึกและเปิดข้อความด้วยการเข้ารหัสตามภูมิภาค เช่น Windows-1252 เมื่อไฟล์ที่เขียนแบบหนึ่งถูกอ่านด้วยอีกแบบหนึ่ง ทุกตัวอักษรที่อยู่นอก ASCII ธรรมดาจะออกมาผิด ข้อมูลไม่ได้หายไปไหน แค่ถูกถอดรหัสด้วยกฎที่ผิด

ปัญหาสองแบบ วิธีแก้สองแบบ

ไฟล์ใช้การเข้ารหัสแบบเก่า CSV ที่ส่งออกจากเครื่องมือเก่าบน Windows ถูกเก็บเป็น Windows-1252 หรือ ISO-8859-1 เครื่องมือที่คาดหวัง UTF-8 จะแสดงเครื่องหมายคำถามหรืออักขระแทนที่ วิธีแก้: บอกเครื่องมือนี้ว่าไฟล์ต้นทางใช้การเข้ารหัสอะไร แล้วเครื่องมือจะบันทึกไฟล์ใหม่เป็น UTF-8 ซึ่งทุกโปรแกรมอ่านได้ถูกต้อง

ไฟล์ถูกเข้ารหัสซ้อนสองชั้น หรือ "mojibake" มีคนอ่านไฟล์ UTF-8 เป็น Windows-1252 แล้วบันทึกอีกครั้ง ไบต์ที่ถูกต้องจึงถูกเข้ารหัสใหม่เป็นตัวอักษรผิดสองหรือสามตัวต่อหนึ่งตัวอักษร นี่คือที่มาของตัว A ตัวใหญ่ที่มีเครื่องหมายตัวหนอนนำหน้าตัวอักษรที่มีเครื่องหมายกำกับทุกตัว วิธีแก้: ตัวเลือกซ่อมแซมจะย้อนความผิดพลาดนี้ โดยเข้ารหัสอักขระเหล่านั้นกลับเป็นไบต์แล้วถอดรหัสใหม่ให้ถูกต้องเป็น UTF-8

การตรวจหาอัตโนมัติ

เมื่อตั้งต้นทางเป็นอัตโนมัติ เครื่องมือจะลองอ่านไฟล์เป็น UTF-8 แบบเข้มงวดก่อน ถ้าไม่สำเร็จจะเปลี่ยนไปใช้ Windows-1252 ถ้าอ่านได้แต่ข้อความมีรูปแบบที่บ่งบอกว่าถูกเข้ารหัสซ้อน ก็จะซ่อมแซมให้ ส่วนใหญ่แค่นี้ก็พอ ให้ตั้งการเข้ารหัสเองเฉพาะเมื่อผลลัพธ์อัตโนมัติยังดูผิดอยู่

ตัวเลือก BOM

Excel บน Windows ยังคงเดาว่าเป็นการเข้ารหัสตามภูมิภาคเมื่อเปิด CSV เว้นแต่ไฟล์จะขึ้นต้นด้วย byte order mark ให้เปิด BOM เมื่อไฟล์จะกลับไปใช้ใน Excel และปิดไว้สำหรับฐานข้อมูล เครื่องมือเขียนโปรแกรม และการนำเข้าบนเว็บส่วนใหญ่ ซึ่งบางตัวจะถือว่าเครื่องหมายนี้เป็นส่วนหนึ่งของชื่อคอลัมน์แรก

สิ่งที่จะได้

ผลลัพธ์คือไฟล์ข้อความ UTF-8 ที่มีชื่อและเนื้อหาเหมือนเดิม เพียงแต่เข้ารหัสอย่างถูกต้อง ใช้ได้กับ CSV, TXT และไฟล์ข้อความธรรมดาอื่น ๆ ทุกชนิด ไม่มีการอัปโหลดใด ๆ การซ่อมแซมทำงานในเบราว์เซอร์ของคุณ อ่านรายละเอียดเพิ่มเติมได้ที่ ตัวอักษรเพี้ยนเมื่อเปิด CSV ใน Excel