Vì sao bản tóm tắt của nó bỏ sót phần quan trọng?
Bản tóm tắt bỏ sót ý chính: chatbot không biết điều gì quan trọng với bạn, nên nó dựng bản tóm tắt từ những gì trông giống một bản tóm tắt, tức phần mở đầu và phần kết; chi tiết ở giữa bị rơi mất, văn bản dài bị gộp thành những nhận định rộng và mơ hồ hơn, và có nhận định hoàn toàn không có trong bản gốc; hãy nói bản tóm tắt dùng để làm gì và cái gì phải giữ lại (con số, ngày tháng, tên), tóm tắt từng phần một, và xin câu gốc đứng sau mỗi ý · Cơ bản · 5 phút · context, llm · học sau Bảng PDF bị làm hỏng: PDF lưu một bảng thành các mẩu chữ đặt ở từng chỗ trên trang, cộng thêm các đường kẻ, không có gì cho biết một mẩu thuộc hàng hay cột nào; khi rút ra thành chữ, các mẩu đến theo thứ tự file đã ghi, ô trống không để lại dấu vết, ô gộp và bảng kéo sang trang sau làm lệch phần còn lại, và chatbot phải đoán lại lưới; hãy gửi ảnh chụp màn hình của bảng cho mô hình đọc được ảnh, dán bản xuất CSV hoặc Excel, và kiểm vài ô của bảng nó trả lại
Bản tóm tắt của chatbot bỏ sót phần quan trọng vì nó không biết điều gì quan trọng với bạn. Nó dựa vào phần đầu và phần cuối, bỏ rơi chi tiết ở giữa và nói rộng ra. Hãy nói bạn cần gì; xin trích câu gốc.
1 Đoán trước
2 Xem
A summary, and what it left out
1 / 6The email
- 1. Hi all, a quick update on the building works.
- 2. The roof repairs finished a week early.
- 3. The lift will be serviced on Monday morning.
- 4. Parking permits must be renewed by 14 March, or they lapse. ← the line you need
- 5. The garden group is looking for volunteers.
- 6. Bin collection moves to Tuesdays from April.
- 7. Thanks for your patience, and enjoy the spring!
illustrative: an email and summary we wrote, not a recorded model answer
A seven-line email to the residents of a building. You drive to work: the one line you need is the parking deadline, in the middle.
Bản tóm tắt được dựng từ các dòng mở đầu và dòng kết. Hạn chót ở giữa không bao giờ lọt vào, và các nghiên cứu cho thấy đó là kiểu thường gặp, không phải do xui.
“Summarise this” (Tóm tắt cái này) không nói ai đọc và đọc để làm gì. Mô hình viết bản tóm tắt dễ xảy ra nhất: phần mở đầu, phần kết luận, không khí chung. Nó không thể biết dòng duy nhất bạn cần là hạn gia hạn thẻ gửi xe ở dòng 4, nên dòng đó phải tranh chỗ với mọi thứ khác, từ một vị trí yếu ở giữa.
4 Bạn là model
Bạn là chatbot, tóm tắt email của tòa nhà cho một người đọc. Ba lần, hãy chọn ý bạn sẽ giữ.
Round 1 of 3. The building email from the picture, for one resident.
“Summarise this in one point.”
illustrative: the email and the answers are ours
You are the chatbot. Pick the point to keep.5 Kiểm tra
Văn bản dài làm mọi thứ tệ hơn. Trong FABLES (2024), những người đã đọc 26 cuốn tiểu thuyết mới kiểm tra các bản tóm tắt của AI: họ đánh dấu thiếu phần quan trọng ở 52,0% đến 84,6% số bản, và 2,1% đến 11,5% số nhận định không có trong sách. Bản tóm tắt còn nói rộng ra: ChatGPT-4o nêu kết quả rộng hơn bản gốc ở 65 trên 100 bản tóm lược y khoa.
Ba thói quen giúp ích. Nói bản tóm tắt dùng để làm gì và cái gì phải giữ lại: con số, ngày tháng, tên. Với văn bản dài, tóm tắt từng phần một rồi ghép lại. Xin câu gốc đứng sau mỗi ý, và kiểm vài câu. Viết “do not introduce any inaccuracies” (đừng thêm điều gì sai) là không đủ: trong nghiên cứu đó, nó còn làm việc nói rộng ra tệ hơn.
8 Nói lại bằng lời bạn
9 Nhiệm vụ · 5 phút
Trong ChatGPT Free, dán một văn bản dài bạn biết rõ (một email dài, biên bản họp, một bài báo) và hỏi “Summarize this.” (Tóm tắt cái này.) Ghi lại một chi tiết bạn cần. Rồi trong một cuộc trò chuyện mới, dán lại và hỏi: “I need to [your purpose]. Summarize this section by section. Keep every number, date and name. After each point, quote the sentence it comes from.” (Tôi cần [mục đích của bạn]. Tóm tắt từng phần một. Giữ mọi con số, ngày tháng và tên. Sau mỗi ý, trích câu mà nó lấy từ đó.) Bản tóm tắt nào giữ được chi tiết của bạn?
Ba câu nhanh
Rút ngẫu nhiên từ bộ câu hỏi của bài; lần sau sẽ khác.
Xong chưa?
Nhận email khi có bài mới
Bài mới nằm trong bản tin hằng tuần, chỉ gửi vào tuần có bài. Bạn xác nhận qua email trước; hủy đăng ký chỉ với một lần bấm.
Đọc thêm
Nguồn
- The building email, its one-line summary and the role’s requests and answers are illustrative, written for this lesson on 2026-10-24, not recorded model output
- Ravaut et al., “On Context Utilization in Summarization with Large Language Models” (ACL 2024; arXiv:2310.10570 v6, 2024-11-14, https://arxiv.org/abs/2310.10570, checked 2026-10-24): Table 3, Multi-XScience (7 documents), mean relative performance across all metrics vs all 7 documents when the 5 middle documents are replaced by random ones (“First + 5 random + last”): GPT-3.5 95.63, Llama-2-13B 98.07, Llama-2-7B 92.40, Mistral-7B 90.59, Xgen-7B 88.93; the paper concludes LLMs “can focus on the beginning and/or the end of their input, but largely ignore the middle”
- Kim et al., “FABLES: Evaluating faithfulness and content selection in book-length summarization” (arXiv:2404.01261 v2, https://arxiv.org/abs/2404.01261, checked 2026-10-24): 26 books published in 2023 or 2024, 3,158 claims, annotators who had read each book. Table 6, share of summaries whose comments flag omissions: Claude-3-Opus 52.0, GPT-4-Turbo 80.8, GPT-4 65.4, GPT-3.5-Turbo 84.6, Mixtral 65.4. Table 2, claims rated unfaithful: Claude-3-Opus 2.1, GPT-4 4.55, GPT-4-Turbo 7.64, GPT-3.5-Turbo 11.26, Mixtral 11.47 (%); Claude-3-Opus figures from 24 of 26 books. §5: at least 20% of Claude-3-Opus summaries over-emphasise the book’s ending, 7.7% for GPT-4-Turbo
- Peters and Chin-Yee, “Generalization Bias in Large Language Model Summarization of Scientific Research” (arXiv:2504.00025 v1, 2025-03-28, https://arxiv.org/abs/2504.00025, checked 2026-10-24): Table 2, 100 medical abstracts, texts with generalized conclusions: original abstracts 20 (20%); ChatGPT-4o (UI) simple prompt 65 (65%), accuracy prompt 80 (80%); Claude 3.5 Sonnet (UI) simple prompt 31 (31%); the accuracy prompt said ‘do not introduce any inaccuracies when summarizing’. Table 3 example (26): original “Among patients undergoing hip or knee arthroplasty for osteoarthritis, aspirin compared with enoxaparin resulted in a significantly higher rate of symptomatic VTE within 90 days, defined as below- or above-knee DVT or pulmonary embolism.”; LLaMA 3.3 70B (API) “Overall, the study suggests that enoxaparin is more effective than aspirin in preventing symptomatic VTE after THA or TKA.”
- aifree.dev catalog, chatgpt-free (verified 2026-10-12, live check 2026-10-24): ChatGPT Free Plan
Đăng Oct 24, 2026 · cập nhật Oct 24, 2026