Việc tìm kiếm thông tin từ các tệp PDF (hoặc trang web, tài liệu có structure (cấu trúc), tài liệu có nhiều trang) tưởng chừng đơn giản nhưng khó khăn cho các LLM hơn nhiều so với văn bản thông thường. Do đó, các nhà nghiên cứu tại Adobe Research đã phát triển một mô hình có thể xem xét văn bản và cả cấu trúc của tài liệu.
Mô hình ngôn ngữ lớn (LLM) gặp vấn đề với việc trả lời câu hỏi tài liệu (QA) trong trường hợp tài liệu không thể vừa với độ dài ngữ cảnh nhỏ của LLM. Để khắc phục vấn đề này, hầu hết các công việc hiện có đều tập trung vào việc truy xuất ngữ cảnh có liên quan từ tài liệu, thể hiện chúng dưới dạng văn bản thuần túy. Tuy nhiên, các tài liệu như PDF, trang web và bản trình bày có cấu trúc khác, bao gồm các trang, bảng, các thành phần khác nhau, v.v.. Việc thể hiện các tài liệu có cấu trúc như vậy dưới dạng văn bản thuần túy là không phù hợp với mô hình.
Khi một hệ thống phải truy vấn tài liệu để tìm ngữ cảnh, sự không nhất quán này sẽ xuất hiện và các câu hỏi tưởng chừng như tầm thường có thể gây khó khăn cho hệ thống QA. Để có thể xử lý các tài liệu có cấu trúc, Adobe Research đề xuất một phương pháp tiếp cận được gọi là PDFTriage cho phép các mô hình truy xuất ngữ cảnh dựa trên cấu trúc hoặc nội dung . phát hành tập dữ liệu điểm chuẩn bao gồm hơn 900 câu hỏi do con người tạo ra trên 80 tài liệu có cấu trúc từ 10 danh mục loại câu hỏi khác nhau dành cho QA tài liệu.
- Đọc thêm kiến thức về NLP, AI, Machine Learning
- Nếu bạn cần Dịch vụ marketing AI, liên hệ Click Digital ngay.
- Hoặc đầu tư vào trí tuệ nhân tạo bằng cách mua token Saigon (ký hiệu: SGN) thông qua sàn giao dịch Pancakeswap: https://t.co/KJbk71cFe8 (đừng lo lắng về low liquidity, hãy trở thành nhà đầu tư sớm) (cách mua: tìm hiểu trên Google về thao tác giao dịch trên sàn phi tập trung Pancakeswap, cực kỳ an toàn).
- Được hỗ trợ bởi Công ty Click Digital
- Nâng cao kiến thức về AI + Machine Learning
- Địa chỉ token trên mạng BSC: 0xa29c5da6673fd66e96065f44da94e351a3e2af65
- Twitter: https://twitter.com/SaigonSGN135/
- Staking SGN: http://135web.net/
- Invest in Artificial Intelligence by BUYING Saigon token (symbol: SGN) through the Pancakeswap exchange: https://t.co/KJbk71cFe8 (do not worry about low liquidity, be an early investor) (how to buy: search on Google for instructions on trading on the decentralized Pancakeswap exchange, it’s secure).
- Backed by Click Digital Company
- Enhancing AI + Machine Learning knowledge
- BSC address: 0xa29c5da6673fd66e96065f44da94e351a3e2af65
- Twitter: https://twitter.com/SaigonSGN135/
- Staking SGN: http://135web.net/
Digital Marketing Specialist
Related posts:
In-Context Learning (ICL) trong LLM: Học trong ngữ cảnh cho Mô hình ngôn ngữ lớn
NVIDIA thông báo ra mắt Blackwell GPU để trao quyền cho máy tính thế hệ tiếp theo chạy AI trên các mô hình LLM
Phân biệt NLP & LLM. Khi nào nên dùng thuật ngữ Xử lý ngôn ngữ tự nhiên (Natural Language Processing), khi nào dùng Mô hình ngôn ngữ lớn (Large Language Model)
LLM (mô hình ngôn ngữ lớn) cách mạng hóa lĩnh vực tài chính trong 2 năm tới như thế nào?
Chip C-Transformer của Hàn Quốc hiệu quả hơn gấp hàng trăm lần Nvidia A100 Tensor Core GPU giúp xử lý LLM
DBRX: Mã nguồn mở LLM của Databricks mạnh gần bằng GPT-3.5
File hình ảnh không hiển thị trên web node.js thay vào đó là ký tự lạ
File chunk.js trên 1 trang web mỗi lần ra 1 tên file khác, họ dùng cách mã hóa gì?
Không mở được file khi nhập link trên web browser / ô search dẫn tới 1 file trên nodejs hosting
Sửa code trong file app.js trên hosting thì bao lâu mới thay đổi trên web?
GPT-4V: Chat GPT-4 tích hợp Vision, hỏi bằng hình ảnh
GPT-4V: Phiên bản ChatGPT tích hợp Vision, hỏi bằng hình ảnh, xử lý image bằng AI
6 bước để bắt đầu tạo mô hình NLP, xây dựng natural language processing model
Các mô hình AI và NLP đã có thể tự học, tự dạy cho nhau mà không cần đào tạo
NASA hợp tác IBM xây mô hình ngôn ngữ IBM-NASA giúp kiến thức khoa học dễ tiếp cận hơn, dựa trên Transfomer
Spectral Labs ra mắt Syntax, một LLM (mô hình ngôn ngữ lớn) AI tự viết code Solidity bằng ngôn ngữ tự nhiên cho người thường non-coder
Dịch vụ quét mã độc website
Tin vĩ mô ảnh hưởng xấu đến Crypto qua bài phát biểu Thống đốc FED Michael W. Bozman
Thống đốc bang Wyoming ký luật quan trọng về DAO, hỗ trợ bởi a16z
Bộ Khoa học, Công nghệ Thông tin và Truyền thông (MSIT) của Hàn Quốc tìm Giám đốc Đầu tư cho Quỹ Metaverse trị giá $34.78M
Chương trình airdrop độc quyền cho người dùng BNB Chain & opBNB
Game Uni Apt hệ Blast có tick vàng trên X gài virus mã độc hack tài sản
Natural Language Inference: Xác định 2 câu hợp lý hay vô lý, Suy luận Ngôn ngữ Tự nhiên, NLI / NLP Inference
Blockchain + Natural Language Processing (NLP): Sự kết hợp thú vị của 2 thế giới công nghệ
OpenAI CEO Sam Altman: Tương lai của AI và ChatGPT, trao đổi tại WSJ Tech
OpenAI xây dựng team kiểm tra rủi ro AI, ChatGPT
Dùng Xử lý ngôn ngữ tự nhiên (NLP) để phát hiện bệnh tâm thần, case study tại Mỹ
3 ứng dụng của Xử lý ngôn ngữ tự nhiên (NLP), AI trong ngành quản lý nhân sự (HR)
Các trường hợp ứng dụng NLP trong Marketing, Analytics
Ứng dụng NLP trong việc lọc thư rác, spam email – Xử lý ngôn ngữ tự nhiên