স্বয়ংক্রিয়ভাবে ৪০টি ভাষা: আমাদের এআই অনুবাদ কীভাবে বিশেষায়িত পরিভাষা পরিচালনা করে

মেশিন অনুবাদ এখন এতটাই উন্নত যে, অনেক ক্ষেত্রেই এটিকে মানব অনুবাদের থেকে পৃথক করা অসম্ভব। অনুবাদ সেবাগুলো সাবলীল, প্রবাদপ্রতিম অনুবাদ তৈরি করে, যার রেজিস্টারের প্রতি তীক্ষ্ণ অনুভূতি থাকে। তারপর আপনি একটি DPP ডেটা সেট অনুবাদ করেন - এবং হঠাৎ ‘rear lock fibre closure’ হয়ে যায় ‘Hinterschloss-Faserverschluss’।

সমস্যাটি বিশেষজ্ঞ পরিভাষায় নিহিত। এখানে আমরা ব্যাখ্যা করছি কেন পণ্য ডেটা উপন্যাসের মতো বিবেচনা করা উচিত নয়, এবং Transpareo কোন সরঞ্জামগুলি প্রদান করে যাতে আপনার ৪০টি ভাষার সংস্করণ বোঝার উপযোগী থাকে।

মৌলিক সমস্যা: একটি শব্দ, একাধিক অর্থ

আউটডোর জ্যাকেটের DPP-তে ‘Seal ‘: জলরোধী করা। ল্যাবরেটরিতে ‘Seal’: প্রসঙ্গ অনুযায়ী সামুদ্রিক স্তন্যপায়ী (seal) বা একটি গ্যাসকেট। রক্ষণাবেক্ষণ লগে ‘Seal’: সম্ভবত একটি স্ট্যাম্প।

একটি সাধারণ অনুবাদ মডেল পরিসংখ্যানগত প্রেক্ষাপটের ভিত্তিতে একটি পছন্দ করে। এটি ধারাবাহিক লেখার জন্য কাজ করে - একটি উপন্যাস প্রচুর প্রেক্ষাপট প্রদান করে। কিন্তু primary_closure: seal এর মতো একটি ডেটা ফিল্ডের জন্য, প্রায় কোনো প্রেক্ষাপটই থাকে না। মডেলটি একটি অনুমান করে।

একটি ডেটা ফিল্ড কোনো প্রেক্ষাপট প্রদান করে না, এবং প্রেক্ষাপট ছাড়া, মডেলটি একটি অনুমান করে।

ফলস্বরূপ সূক্ষ্ম ত্রুটি দেখা দেয়। ‘Hinterschloss-Faserverschluss’ এর মতো নাটকীয় না হলেও এর সুদূরপ্রসারী পরিণতি রয়েছে: জার্মান ভাষায় ‘Dichtung’ নামে পরিচিত একটি উপাদান হঠাৎ করেই ইতালীয় DPP-তে ‘guarnizione’ এর পরিবর্তে ‘sigillo’ নামে ডাকা হয় । একজন ক্রেতা আর স্পেয়ার পার্টটি খুঁজে পাচ্ছেন না।

Transpareo আজ যা করে

আমাদের অনুবাদ সিস্টেম স্বয়ংক্রিয়ভাবে সমস্ত নতুন বিষয়বস্তুকে সমস্ত সক্রিয় ভাষায় অনুবাদ করে। এটি চারটি বৈশিষ্ট্যে চিহ্নিত:

• মার্কডাউন এবং ভেরিয়েবল সংরক্ষণ: <a href="/bn/nibandhan-karun">Pro-Membership</a>-এর মতো প্লেসহোল্ডার এবং মার্কডাউন কাঠামো অনুবাদের আগে বের করে নেওয়া হয়; প্লেন টেক্সট অনুবাদ করা হয়, এবং কাঠামোগুলো অপরিবর্তিত অবস্থায় পুনরায় সন্নিবেশিত করা হয়। এটি নিশ্চিত করে যে লিঙ্ক, ফর্ম এবং লেআউট সব ভাষায়ই সামঞ্জস্যপূর্ণ থাকে।
• কেন্দ্রীভূত অনুবাদ এন্ট্রি: অনুবাদগুলি ডেটা রেকর্ডের মধ্যে সংরক্ষণ করা হয় না, বরং একটি ভাগ করা স্তরে সংরক্ষণ করা হয়। একই মূল পাঠ্য সহ একাধিক ডেটা রেকর্ড একটি একক অনুবাদ শেয়ার করে। এতে অনুবাদের খরচ বাঁচে এবং ডেটা মডেলের জুড়ে পরিভাষা স্বয়ংক্রিয়ভাবে মানসম্মত হয়।
• পরিবর্তন হলে স্বয়ংক্রিয় পুনরায় অনুবাদ: যদি মূল পাঠ্য সংশোধন করা হয়, তাহলে সমস্ত ভাষার অনুবাদ পুনরায় তৈরি করা হয়। জার্মান ভাষায় একটি সংশোধন স্বয়ংক্রিয়ভাবে অন্যান্য ৩৯টি ভাষার সংস্করণ আপডেট করে।
• প্রতি ডেটা রেকর্ডে মার্কিং: স্বয়ংক্রিয় প্রক্রিয়া থেকে বিষয়বস্তু বাদ দেওয়া যেতে পারে, অথবা বিদ্যমান অনুবাদ লক করা যেতে পারে - উদাহরণস্বরূপ, আন্তর্জাতিক পণ্যের নাম বা ম্যানুয়াল সংশোধনের জন্য।

যেখানে গ্রাহক প্রক্রিয়াকরণ সম্পূরক করে

স্বয়ংক্রিয় অনুবাদ বর্ণনামূলক টেক্সট, মার্কেটিং কপি এবং যত্নের নির্দেশনার জন্য সাধারণত সঠিক ফলাফল প্রদান করে। তবে, ‘seal’/’guarnizione’ এর মতো গুরুত্বপূর্ণ প্রযুক্তিগত পরিভাষায় কিছু ত্রুটি থেকে যায়, যা গ্রাহকের প্রশাসককে সংশোধন করতে হবে।

এখানে, অ্যাডমিনের তিনটি বিকল্প রয়েছে:

১. ভাষা এবং কী অনুযায়ী ম্যানুয়াল ওভাররাইড: প্রতিটি অনুবাদ এন্ট্রি অ্যাপ্লিকেশন ম্যানেজারে খুলে প্রতিটি ভাষার জন্য সামঞ্জস্য করা যেতে পারে। ‘লক’ অপশন নির্বাচন করলে, পরবর্তী স্বয়ংক্রিয় রানে এই ম্যানুয়াল অনুবাদটি সংরক্ষিত থাকবে। ২. গ্লসারি আমদানি: অনুবাদ টুল বা PDF গ্লসারির বিদ্যমান পরিভাষা CSV ফাইল হিসেবে আমদানি করে সরাসরি অনুবাদ এন্ট্রি তৈরি করতে ব্যবহার করা যেতে পারে। ৩. সিস্টেম চলমান অবস্থায় প্রতি-ভাষা সংশোধন: একটি ইতালীয় বিক্রয় দল একটি ত্রুটি খুঁজে পেলে, এটি অ্যাপ্লিকেশন ম্যানেজারে সংশোধন করে - সংশোধনটি তৎক্ষণাৎ কার্যকর হয়, অন্য অনুবাদগুলো অপরিবর্তিত থাকে।

অ্যাপ্লিকেশন ম্যানেজার সব ৪০টি ভাষাই সমর্থন করে

শুধুমাত্র পণ্য ডেটা শীটগুলোই বহুভাষিক নয় - যে ইন্টারফেসটিতে আপনি সেগুলো রক্ষণাবেক্ষণ করেন, সেটিও বহুভাষিক। অ্যাপ্লিকেশন ম্যানেজারটি সব ৪০টি ভাষায় অনূদিত হয়েছে, এবং আপনি এই ভাষাগুলোর যেকোনো একটিতে বিষয়বস্তু প্রবেশ করাতে পারেন। সিস্টেম স্বয়ংক্রিয়ভাবে সেটি অন্যান্য সব ভাষায় অনুবাদ করে।

বহু-ভাষিক দলগুলোর জন্য, এটি সহযোগিতায় একটি লক্ষণীয় পার্থক্য তৈরি করে: মিলানের পণ্য ব্যবস্থাপনা দল ইতালীয় ভাষায় যত্ন নির্দেশিকা লেখে, ওয়ার্সোর ক্রয় দল পোলিশ ভাষায় উপকরণ সংক্রান্ত তথ্য যোগ করে, এবং হামবুর্গের গুণগত নিশ্চয়তা দল জার্মান ভাষায় বিবরণগুলি পরীক্ষা করে।

সবাই তাদের নিজস্ব ভাষায় কাজ করে, সবাই একই ডেটাসেট দেখে, এবং কেউ যখন কোনো তথ্য সংশোধন করে, তখন তা একই সময়ে সমস্ত ভাষার সংস্করণের জন্য সংশোধন করা হয়।

উপরের সতর্কবার্তা এখানেও প্রযোজ্য: যখন গুরুত্বপূর্ণ প্রযুক্তিগত পরিভাষার কথা আসে, তখন মেশিন যা বেছে নিয়েছে তা শেষ পর্যন্ত একজন মানুষকে যাচাই করা উচিত।

ইইউ ভাষাগুলোর বাস্তবতা

২৪টি সরকারি ইইউ ভাষা শুনতে অনেক মনে হতে পারে। বাস্তবে, এর তিনটি স্তর রয়েছে:

• মূল বাজার: DE, EN, FR, IT, ES, NL - এখানে, প্রতিটি ভোক্তা নিখুঁততা আশা করে
• গুরুত্বপূর্ণ বাজার: PT, PL, SV, DA, FI - এখানে মান ভালো, যদিও মাঝে মাঝে যন্ত্রের হস্তক্ষেপ স্পষ্ট হয়ে ওঠে
• বিরল ভাষা: MT, GA, ET, LV, LT - কখনও কখনও মাল্টায় একটিও চূড়ান্ত ভোক্তা না থাকা সত্ত্বেও মাল্টিজ ভাষায় একটি DPP স্ক্যান করা হয়। তবুও, এটি বাধ্যতামূলক।

এই শর্তটি ঐচ্ছিক নয়। ESPR নির্দেশ করে যে DPP বিষয়বস্তু সেই সদস্য রাষ্ট্রের ভাষায় প্রদান করতে হবে যেখানে পণ্যটি বিক্রি হয়। অতএব, ২৭টি দেশে সেবা প্রদানকারীকে ২৪টি ভাষার মোকাবিলা করতে হয় (কিছু দেশ ভাষা ভাগাভাগি করে)।

মাল্টিজ থেকে বাংলা

ট্রান্সপ্যারেও ৪০টি ভাষায় অনুবাদ করে - সমস্ত ২৪টি EU-এর সরকারি ভাষা এবং বৈশ্বিক বিস্তারের জন্য আরও ১৬টি ভাষা:

• ইউরোপ: বুলগেরিয়ান, ডেনিশ, জার্মান, ইংরেজি, এস্তোনিয়ান, ফিনিশ, ফরাসি, গ্রীক, আয়ারিশ, ইতালিয়ান, ক্রোয়েশিয়ান, লাটভিয়ান, লিথুয়ানিয়ান, মল্টেসি, ডাচ, পোলিশ, পর্তুগিজ, রোমানিয়ান, সুইডিশ, স্লোভাক, স্লোভেনিয়ান, স্প্যানিশ, চেক এবং হাঙ্গেরিয়ান - প্লাস আলবেনিয়ান, বসনীয়, আইসল্যান্ডিক, ম্যাসেডোনিয়ান, নরওয়েজিয়ান, রাশিয়ান, সার্বিয়ান, তুর্কি এবং ইউক্রেনীয়।
• বিশ্বব্যাপী: বাংলা, চীনা, হিন্দি, ইন্দোনেশীয়, জাপানি, কোরিয়ান এবং ভিয়েতনামী।

আসন্ন টেক্সটাইল DPP-এর জন্য, বাংলা এবং ভিয়েতনামী প্রধান উৎপাদনকারী দেশগুলোকে অন্তর্ভুক্ত করে - ঢাকায় একজন সরবরাহকারী প্যারিসে একজন ক্রেতার মতো একই পণ্য পাসপোর্ট পড়েন।

কেন একটি কেন্দ্রীভূত স্থানীয়করণ স্তর

অধিকাংশ প্ল্যাটফর্ম অনুবাদগুলিকে ডেটা রেকর্ডের অতিরিক্ত ফিল্ড হিসেবে সংরক্ষণ করে: description_de, description_en, … প্রতিটি অনুবাদযোগ্য বৈশিষ্ট্যের জন্য ৪০টি ফিল্ড। এটি শুনতে সহজ মনে হলেও, এর তিনটি অসুবিধা রয়েছে:

• ডুপ্লিকেট টেক্সট। একই উপাদান বিবরণ সহ দুটি পণ্য মাত্র ৪০টির পরিবর্তে ৪০+৪০টি অনুবাদ তৈরি করে
• স্কেল করা কঠিন। ৪১তম ভাষা যোগ করার অর্থ হল সমস্ত অনুবাদযোগ্য মডেলের জন্য স্কিমা মাইগ্রেশন
• সংশোধনগুলো বিশ্বব্যাপী প্রয়োগ করা কঠিন। যদি ‘guarnizione’ সর্বত্র সংশোধন করা হয়, তাহলে সমস্ত ডেটা রেকর্ড আলাদাভাবে সম্পাদনা করতে হবে

বিভক্ত অনুবাদ স্তর এটি সমাধান করে: একটি এন্ট্রি, অনেক রেফারেন্স। একটি সংশোধন, সমস্ত ডেটা রেকর্ড উপকৃত হয়।

যা আমাদের এখনও নেই

স্বয়ংক্রিয় প্রস্তাবনা স্বীকৃতি সহ একটি কাস্টমাইজড পরিভাষা ডাটাবেস উন্নয়ন প্রক্রিয়ায় রয়েছে, তবে বর্তমানে এটি উপলব্ধ নয়। আজ যারা শুরু করছেন তারা বিদ্যমান সরঞ্জামগুলি দিয়ে অনেকদূর এগিয়ে যেতে পারে: ম্যানুয়াল ওভাররাইড, গ্লossary আমদানি এবং ‘keep’ ফ্ল্যাগ সবচেয়ে সাধারণ ব্যবহারের ক্ষেত্রে কাজ করে।

আমরা বিশ্বাস করি যে যন্ত্রকে কাজের বড় অংশটি করতে হবে এবং মানুষ শুধুমাত্র তখনই হস্তক্ষেপ করবে যখন তা সত্যিই প্রয়োজন। স্বয়ংক্রিয় পরিভাষা স্বীকৃতি উপলব্ধ না হওয়া পর্যন্ত, ম্যানুয়াল প্রক্রিয়াটি স্বচ্ছ - এবং তা এমন একটি প্রতিশ্রুতির চেয়ে বেশি সৎ যা রাখা যায় না।