Friskriptionบล็อกLive Caption

Live Caption ของ Chrome เทียบกับซับไตเติลแปล

Live Caption เป็นฟีเจอร์ช่วยการเข้าถึงที่ดีจริง ๆ และหลายคนเอามาใช้เป็นเครื่องมือแปล จึงควรรู้ให้ชัดว่ามันหยุดทำงานตรงไหน เพราะเส้นแบ่งคมกว่าที่เห็น

คำตอบสั้น ๆ

  • ใช้ Live Caption เมื่อเสียงเป็นภาษาที่มันรองรับ คุณต้องการแค่ใจความ และอยากให้ไม่มีอะไรออกจากเครื่องคุณเลย มันฟรี ทำงานบนเครื่อง และติดตั้งไว้ให้อยู่แล้ว
  • ใช้โอเวอร์เลย์ที่แปลให้ เมื่อภาษาที่พูดอยู่นอกชุดของ Live Caption เมื่อชื่อและศัพท์ต้องคงเส้นคงวา หรือเมื่อคุณอยากได้ซับบนตัววิดีโอมากกว่าในกล่องลอย
  • ความต่างที่ชี้ขาดคือบริบท Live Caption แปลด้วยการแปลด้วยเครื่องแบบทั่วไป ทีละบรรทัด ส่วนโอเวอร์เลย์ที่สร้างบนโมเดลภาษาจะอ่านแต่ละบรรทัดเทียบกับบรรทัดก่อนหน้า
  • ความต่างที่ชี้ขาดอีกข้อคือความเป็นส่วนตัว และข้อนี้เอียงไปอีกทาง: Live Caption ประมวลผลทุกอย่างในเครื่องและไม่ส่งอะไรไปที่ไหนเลย
  • ทั้งสองอย่างไม่ได้ขัดกัน ลอง Live Caption ก่อนก็ไม่เสียอะไร

Live Caption คืออะไรกันแน่

Live Caption เป็นฟีเจอร์ช่วยการเข้าถึง Chrome จะดาวน์โหลดโมเดลรู้จำเสียงพูดลงเครื่องคุณ จากนั้นเสียงใด ๆ ที่เล่นในเบราว์เซอร์จะถูกถอดเป็นข้อความในกล่องคำบรรยายลอยเล็ก ๆ มันทำงานแบบออฟไลน์ ทำงานกับทุกอย่างที่มีเสียง และไม่มีอะไรถูกส่งไปเซิร์ฟเวอร์ สำหรับคนหูหนวกหรือได้ยินไม่ชัด บนเนื้อหาภาษาที่เขาอ่านออก นี่คือของดีและฟรี

ส่วนการแปลมาทีหลัง และเป็นฟีเจอร์เล็ก ๆ ที่ติดเพิ่มเข้ากับฟีเจอร์ทำคำบรรยาย เกือบทุกอย่างที่พูดถึงต่อจากนี้มีรากอยู่ตรงนั้น จุดที่คนไปสะดุดคือจุดที่ออกแบบมาเพื่อการเข้าถึง ไม่ใช่เพื่ออ่านสตรีมภาษาต่างประเทศ

สองอย่างนี้ต่างกันตรงไหน

Live Caption ของ Chrome โอเวอร์เลย์ที่แปลให้
ทำงานที่ไหน บนเครื่องคุณ แบบออฟไลน์ ถอดเสียงและแปลบนเซิร์ฟเวอร์ หรือด้วยคีย์ API ของคุณเอง
ภาษาต้นทาง ชุดที่จำกัด ตรวจจับอัตโนมัติ ครอบคลุมกว้างกว่ามาก
การแปล การแปลด้วยเครื่องแบบทั่วไป โมเดลภาษาที่อ่านแต่ละบรรทัดในบริบท
ข้อความไปโผล่ตรงไหน กล่องลอยตำแหน่งตายตัว โอเวอร์เลย์บนวิดีโอ — ลาก ปรับขนาด เปลี่ยนสไตล์ได้
ชื่อคงเส้นคงวา ไม่มีกลไกรองรับ อภิธานศัพท์ตรึงการสะกดไว้ตลอดเซสชัน
ภาษาต้นฉบับควบคู่ ไม่มี บรรทัดที่สองใต้แต่ละประโยค เลือกเปิดได้
ป้ายชื่อผู้พูด ไม่มี ได้ถึงห้าเสียง
เก็บข้อความไว้ ส่งออกไม่ได้ ส่งออกบทถอดเสียง และ SRT กับ VTT จากไฟล์ของคุณเอง
ค่าใช้จ่าย ฟรี ไม่จำกัด ฟรี 30 นาทีต่อสัปดาห์ จากนั้นเป็นแพ็กจ่ายครั้งเดียวเริ่มที่ $1.99

ทำไมบริบทถึงเป็นเรื่องที่สำคัญที่สุด

การแปลด้วยเครื่องทีละบรรทัดมองทุกคำบรรยายเป็นข้อความอิสระ ซึ่งใช้ได้ดีกับย่อหน้าที่เขียนไว้แล้ว เพราะประโยคมาครบทั้งประโยค แต่คำพูดสด ๆ ไม่ได้มาครบ ประโยคเดียวถูกตัดเป็นสองคำบรรยาย สรรพนามในบรรทัดหลังอ้างถึงคำนามในบรรทัดก่อน และภาษาที่ละประธาน — ญี่ปุ่นกับเกาหลีทำแบบนี้ตลอดเวลา — ทิ้งข้อมูลสำคัญไว้ในคำบรรยายที่เลื่อนหายไปแล้ว

ตัวแปลที่อ่านแต่ละบรรทัดเทียบกับบรรทัดก่อนหน้าคลี่คลายเรื่องนี้ได้ ทั้งยังกันไม่ให้ชื่อเดียวกันถูกถอดเป็นสามแบบในห้านาที ซึ่งเป็นข้อเสียที่บั่นทอนที่สุดของการแปลทีละบรรทัดบนสตรีมที่เต็มไปด้วยชื่อเฉพาะ

และยังมีตัวแปรที่วัดได้อยู่ต้นทางด้วย บทถอดเสียงเป็นเพดานของทุกอย่างที่ตามมา ไม่มีตัวแปลไหนกู้คำที่ฟังผิดกลับมาได้ Friskription ถอดเสียงด้วย ElevenLabs Scribe v2 ซึ่งประกาศอัตราความผิดพลาดของคำที่ 3.3% บนชุดทดสอบภาษาอังกฤษ — เทียบกับ 5.3% ของ Deepgram Nova-3 และ 7.7% ของ Whisper large-v3 ทุกเอนจินทำคะแนนบนสตรีมสดที่มีเสียงรบกวนได้แย่กว่าบนคลิปทดสอบ แต่ลำดับยังคงเดิม

จุดที่ Live Caption ชนะขาด

ความเป็นส่วนตัว โดยไม่ต้องมีข้อแม้ Live Caption ทำงานบนเครื่องคุณ ไม่มีเสียงออกไปไหน ไม่มีเซิร์ฟเวอร์เข้ามาเกี่ยว และใช้งานได้แม้ไม่มีเครือข่ายเลย ถ้าคุณกำลังทำคำบรรยายให้กับอะไรที่เป็นความลับ นั่นไม่ใช่สิ่งที่ควรยอมแลกง่าย ๆ และตรงนั้นมันคือตัวเลือกที่ดีกว่าจริง

สิ่งที่ใกล้เคียงที่สุดในอีกฝั่งคือการเชื่อมคีย์ API ของคุณเองจาก OpenAI, Anthropic หรือ ElevenLabs เมื่อนั้นเสียงจะไปจากเบราว์เซอร์ของคุณตรงไปยังผู้ให้บริการที่คุณมีสัญญาด้วยอยู่แล้ว และไม่เคยไปถึงเซิร์ฟเวอร์ของ Friskription นั่นเป็นคำมั่นที่ต่างจากการประมวลผลบนเครื่องอย่างมีนัยสำคัญ และควรพูดให้ชัดมากกว่าจะทำให้พร่าเลือน

Live Caption ยังฟรีและไม่นับเวลาด้วย สามสิบนาทีฟรีต่อสัปดาห์เป็นโควตาที่ใช้ได้จริง แต่ก็ไม่ใช่ไม่จำกัด สำหรับการฟังเพลิน ๆ หลายชั่วโมงในภาษาที่ Live Caption รองรับ มันคือเครื่องมือที่สมเหตุสมผล

ควรหยิบอันไหนมาใช้

Live Caption เมื่อ…

โอเวอร์เลย์ที่แปลให้ เมื่อ…

คำถาม

Live Caption ของ Chrome ดีพอสำหรับแปลสตรีมไหม

ถ้าเอาแค่ใจความของสตรีมในภาษาที่มันรองรับ ก็มักจะพอ มันไปติดขัดตรงจุดที่การแปลสดยากที่สุด คือภาษาต้นทางนอกชุดของมัน ประโยคที่ถูกตัดข้ามคำบรรยาย ประธานที่ถูกละ และชื่อเฉพาะที่ต้องคงเส้นคงวา มันคือฟีเจอร์ช่วยการเข้าถึงที่เพิ่มการแปลเข้ามา ไม่ใช่เครื่องมือแปล

Live Caption ใช้กับสตรีมญี่ปุ่นหรือเกาหลีได้ไหม

ได้ต่อเมื่อภาษาที่พูดอยู่ในชุดที่ Chrome รองรับสำหรับทำคำบรรยาย ซึ่งแคบกว่าที่คนส่วนใหญ่คาดไว้ และนั่นคือเหตุผลปกติที่คนไปหาอย่างอื่นมาใช้กับสตรีม VTuber และสตรีมเกาหลี มันฟรี ดังนั้นลองกับสตรีมที่คุณสนใจดูก็ไม่เสียอะไร

Live Caption ฟรีไหม

ฟรี ทั้งหมด ไม่มีขีดจำกัดและไม่ต้องมีบัญชี มันเป็นส่วนหนึ่งของ Chrome และทำงานบนเครื่องคุณ

อันไหนเป็นส่วนตัวมากกว่า

Live Caption ชัดเจน — มันประมวลผลทุกอย่างบนเครื่องและไม่ส่งอะไรไปที่ไหน ทางเลือกที่ใกล้เคียงที่สุดคือการเชื่อมคีย์ API ของคุณเอง ซึ่งเก็บเสียงไว้ระหว่างเบราว์เซอร์ของคุณกับผู้ให้บริการที่คุณมีสัญญาด้วยอยู่แล้ว แต่นั่นก็ไม่เท่ากับการไม่ออกจากเครื่องเลย

ใช้ทั้งสองอย่างได้ไหม

ได้ ลอง Live Caption ก่อนเพราะฟรีและใช้ได้ทันที แล้วค่อยหันไปหาโอเวอร์เลย์ที่แปลให้ เมื่อภาษานั้นไม่ได้รับการรองรับ เมื่อชื่อเปลี่ยนไปเปลี่ยนมา หรือเมื่อคุณอยากได้ซับบนตัววิดีโอแทนที่จะอยู่ในกล่องมุมจอ

ทำไม Live Caption ถึงเอาข้อความไปไว้ในกล่องแยก

เพราะมันถูกสร้างเป็นฟีเจอร์ช่วยการเข้าถึงระดับทั้งระบบ ที่ทำคำบรรยายให้เสียงทุกอย่างในเบราว์เซอร์ รวมถึงเสียงที่ไม่มีวิดีโอติดมาด้วย ส่วนโอเวอร์เลย์ที่วาดทับบนวิดีโอนั้นเป็นไปได้เฉพาะกับเครื่องมือที่รู้ว่ากำลังมองตัวเล่นวิดีโออยู่

ทั้งสองอย่างต้องอาศัยให้สตรีมมีคำบรรยายอยู่แล้วไหม

ไม่ต้อง — นี่คือสิ่งที่ทั้งคู่มีเหมือนกัน และเป็นเหตุผลที่ทั้งคู่ใช้ได้บน Twitch ต่างฝ่ายต่างถอดเสียงเองแทนที่จะอ่านแทร็กคำบรรยาย จึงไม่มีฝ่ายไหนต้องพึ่งอะไรจากแพลตฟอร์มหรือจากคนสตรีม

ลองอีกครึ่งหนึ่งของการเปรียบเทียบ

ฟรีสามสิบนาทีทุกสัปดาห์ ไม่ต้องใช้บัตร ไม่ต้องมีบัญชี AI

เพิ่มลงใน Chrome