Согласно новости ME, 15 апреля (UTC+8), по данным 1M AI News, инструмент для извлечения данных с веб-сайтов Firecrawl выпустил Fire-PDF — PDF-движок для анализа, переписанный на Rust, который ускоряет преобразование PDF в структурированный Markdown в 3,5–5,7 раза по сравнению с предыдущей версией, со средним временем обработки менее 400 миллисекунд на страницу. Основной причиной ускорения является снижение ненужных вызовов GPU. Firecrawl одновременно открыл исходный код библиотеки Rust pdf-inspector, позволяющей классифицировать каждую страницу PDF за миллисекунды: чисто текстовые страницы извлекаются напрямую без использования GPU; только страницы с отсканированными документами или высокой плотностью изображений направляются в нейросетевую модель макета и визуальную языковую модель GLM-OCR. Например, в отчете объемом 150 страниц текста и 60 страниц сканов большинство страниц не требуют GPU. В плане точности Fire-PDF использует отдельные параметры для разных типов контента: таблицы получают более высокий лимит токенов и до 25 секунд на генерацию, формулы сохраняются в формате LaTeX, а многостолбцовые макеты анализируются с помощью нейросети для предсказания порядка чтения. Fire-PDF уже автоматически активирован для всех пользователей Firecrawl без необходимости настройки. (Источник: BlockBeats)
Firecrawl переписала парсер PDF на Rust, скорость увеличилась до 5,7 раз
KuCoinFlashПоделиться
Сводка
15 апреля (UTC+8) Firecrawl запустил Fire-PDF — PDF-парсер на Rust, который увеличивает скорость в 3,5–5,7 раза. Двигатель конвертирует PDF в Markdown менее чем за 400 мс на страницу, исключая вызовы GPU. Firecrawl также открыл исходный код pdf-inspector — библиотеки на Rust, которая классифицирует страницы и направляет их в соответствующий метод обработки. Альткоины, за которыми стоит следить, могут извлечь выгоду из более быстрой извлечения данных в цепочке, так как Fire-PDF автоматически применяется ко всем пользователям.
Источник:Показать оригинал
Отказ от ответственности: Информация на этой странице может быть получена от третьих лиц и не обязательно отражает взгляды или мнения KuCoin. Данный контент предоставляется исключительно в общих информационных целях, без каких-либо заверений или гарантий, а также не может быть истолкован как финансовый или инвестиционный совет. KuCoin не несет ответственности за ошибки или упущения, а также за любые результаты, полученные в результате использования этой информации.
Инвестиции в цифровые активы могут быть рискованными. Пожалуйста, тщательно оценивайте риски, связанные с продуктом, и свою устойчивость к риску, исходя из собственных финансовых обстоятельств. Для получения более подробной информации, пожалуйста, ознакомьтесь с нашими Условиями использования и Уведомлением о риске.