Публикации по теме 'nlp'
Создание системы машинного перевода с помощью Forte
Forte позволяет пользователям разбивать сложные проблемы на составные конвейеры и обеспечивает взаимодействие между задачами посредством унифицированного формата данных. С Forte легко составить любой конвейер NLP, независимо от разнородности данных и процессов, в виде модульной и легко редактируемой системы. Цель Forte, иногда называемая «Lego Learning», состоит в том, чтобы исключить все усилия, связанные с созданием связующего кода, при этом упростив процессы и облегчив совместную..
Две минуты НЛП — Шпаргалка SpaCy
Маркировка POS, анализ зависимостей, NER и сходство предложений
SpaCy — это бесплатная библиотека с открытым исходным кодом для расширенной обработки естественного языка в Python. Он разработан специально для производственного использования и помогает создавать приложения, которые обрабатывают и понимают большие объемы текста. Его можно использовать для множества вариантов использования, таких как извлечение информации , системы понимания естественного языка или для..
Очистка HTML-данных в Python для NLP
Как тщательно очистить набор данных, состоящий из очищенных веб-сайтов HTML
Самым важным шагом в любом проекте, основанном на данных, является получение качественных данных. Без этих шагов предварительной обработки результаты проекта могут быть легко искажены или полностью неправильно поняты. Здесь мы сосредоточимся на очистке данных, состоящих из очищенных веб-страниц.
Получение данных
Есть много инструментов для очистки Интернета. Если вы ищете что-то быстрое и простое, модуль..
Пять крутых библиотек Python для науки о данных
Наука о данных , Python
Пять крутых библиотек Python для науки о данных
Удобные библиотеки Python для науки о данных
Python - лучший друг для большинства специалистов по анализу данных. Библиотеки упрощают их жизнь. Во время работы над проектом НЛП я наткнулся на пять классных библиотек Python. Это мне очень помогло, и я хотел бы поделиться тем же в этой статье.
1. Numerizer
Удивительная библиотека для преобразования текстовых чисел в int и float. Полезная библиотека для..
Токенизация — Полное руководство
Обработка естественного языка | Предварительная обработка текста
Обновленная версия этой статьи перемещена на мой сайт .
В сегодняшнем выпуске 📺:
Так что же такое токенизация? А что такое токен? Почему мы токенизируем? Типы токенизации Несколько слов о лингвистике! Как токенизировать? Текстовый корпус Токенизация с помощью функции `split()` Токенизация с помощью NLTK Токенизация с помощью spaCy Как токенизация происходит под капотом в spaCy В заключение
🤖 TLDR:..
Многоязычные классификационные модели Zero-shot
Применяется для обнаружения языка вражды
С ростом использования социальных сетей в последнее время стали очень популярными модели классификации многоязычных текстов. С одной стороны, эти модели выгодны из-за сильно многоязычной природы онлайн-контента - не только на крупных платформах социальных сетей, которые охватывают мировую аудиторию, но и в меньших масштабах в многоязычных странах, таких как Швейцария. С другой стороны, многоязычные модели классификации полезны, потому что они..
Новые материалы
Конфигурация Gulp для WordPress - Часть II
Здесь мы переходим ко второй части руководства по настройке Gulp для оптимальной разработки WordPress. Если вы пропустили первую часть, где мы установили все модули, необходимые для задач,..
LACTF — сеть/метавселенная
В lactf я смог решить задачу веб/метавселенной.
Ниже приведен исходный код, предоставленный здесь
Из исходного кода видно, что флаг — это отображаемое имя администратора...
GraphQL — Язык запросов — Часть 1
Первое, что нужно знать: GraphQL — это спецификация (как она должна работать и выглядеть), а не реализация. GraphQL не нужно устанавливать, вы реализуете его с помощью серверной библиотеки,..
Будущее машинного обучения в Индии
Будучи связанным с интенсивно развивающимся языком, непрерывные технологические достижения наверняка поразят сектор машинного обучения, который вот-вот сформирует долгосрочную перспективу машинного..
Сравнение Clojure IDE — Emacs/Cider и IDEA/Cursive
Введение
Недавно я редактировал сообщение в блоге, в котором брал интервью у жителей Метосинии относительно их любимых редакторов Clojure . Было довольно интересно увидеть, что используется..
Строки, регулярные выражения и шаблонные литералы — Часть 1 | Понимание ES6
Строки, несомненно, являются одним из самых важных типов данных в любом языке программирования.
Строки есть практически в каждом языке программирования, и научиться их эффективному..
7 признаков того, что вы все еще начинающий веб-разработчик
В этой статье я расскажу о 7 признаках того, что вы все еще начинающий веб-разработчик. Это вещи, в которые время от времени могут впадать даже опытные разработчики, поэтому не беспокойтесь,..