Вопросы по теме 'ner'

Обучение Stanford-NER-CRF, контроль количества итераций и параметров регуляризации (L1,L2)
Я просматривал документацию/FAQ StanfordNER, но не могу найти ничего, связанного с указанием максимального количества итераций в обучении, а также значением параметров регуляризации L1 и L2. Я видел ответ, на который предлагается установить,...
404 просмотров

NER (распознавание именованных сущностей) Сходство между предложениями в документах
Я использовал spacy, чтобы найти NER предложений. Моя проблема в том, что мне нужно вычислить сходство NER между предложениями двух разных документов. Есть ли в питоне какая-либо формула или пакет для того же? TIA
611 просмотров
schedule 25.05.2023

Извлечение переобученного объекта RASA NLU
Версия Rasa: 0.1.1 Версия Python: 3.7 Операционная система: osx Проблема: Я делаю приложение, которое может выбирать объекты из списка покупок. Для первой версии я пробую только пару продуктов / брендов. Мои данные для обучения...
300 просмотров
schedule 08.03.2023

Как объединить многословные теги NER?
В настоящее время я использую allennlp для маркировки NER. Код: from allennlp.predictors.predictor import Predictor predictor = Predictor.from_path("...path to model...") sentence = "Top Gun was inspired by a newspaper article." result =...
313 просмотров

Spacy NER не идентифицирует строчные буквы
Я столкнулся с проблемой обнаружения именованных сущностей, которые начинаются со строчной буквы. Я пробовал решение, предоставленное по ссылке https://github.com/explosion/spaCy/issues/701 . Кажется, у меня не работает. ===== Информация о spaCy...
1478 просмотров
schedule 04.07.2022

Почему большие результаты очень непредсказуемы?
Я пробовал использовать spacy для ner, но результаты очень непредсказуемы. Иногда spacy не распознает конкретную страну. Кто-нибудь может объяснить, почему это происходит? Я пробовал несколько случайных предложений. ДЕЛО 1: nlp =...
327 просмотров
schedule 25.02.2024

Заменить объект на его метку в SpaCy
Может ли SpaCy каким-либо образом заменить объект, обнаруженный SpaCy NER, его меткой? Например: Я ем яблоко, играя со своим Apple Macbook. Я обучил модель NER с помощью SpaCy для обнаружения сущности «ФРУКТЫ», и модель успешно определяет первое...
2744 просмотров
schedule 07.03.2022

Как использовать слой CRF в Tensorflow 2 (используя tfa.text)?
model= Sequential() model.add(keras.layers.Embedding(vocab_size,output_dim=100,input_length=input_len,weights=[embedding_matrix],trainable=False)) model.add(keras.layers.Bidirectional(keras.layers.LSTM(512,...
1379 просмотров
schedule 10.04.2022

Как получить вероятность предсказания для каждой сущности из модели Spacy NER?
Я использовал этот официальный пример кода для обучения NER моделировать с нуля на собственных обучающих образцах. Когда я предсказываю, используя эту модель для нового текста, я хочу получить вероятность предсказания каждой сущности....
2063 просмотров
schedule 23.03.2023

NER на основе правил в Spacy: удаление шаблонов
Я добавляю правила в свою пользовательскую модель распознавания именованных сущностей Spacy, используя новый EntityRuler ( https://spacy.io/usage/rule-based-matching#entityruler ). Я добавил 1 миллион названий белков, на выполнение которых ушли...
560 просмотров
schedule 19.04.2023

spaCy пустая модель NER не соответствует требованиям даже при обучении на большом наборе данных
Я пытаюсь создать собственную модель NER для идентификации объектов, связанных с кибербезопасностью (27 из них). Я решил использовать пустую модель, потому что думаю, что у меня достаточно большой (не уверен в этом) набор обучающих данных (~ 11 тысяч...
751 просмотров
schedule 16.06.2022

Распознавание контекстных имен и сущностей с помощью простора - как?
Для нового проекта мне нужно извлекать информацию с веб-страниц, точнее печатать информацию. Я использую brat для маркировки документов и начал первые эксперименты с spacy и NER. По этому поводу есть много видео и руководств, но все же остаются...
98 просмотров
schedule 16.06.2022

Распознавание именованных сущностей с использованием Python spaCy
Я хочу закодировать систему распознавания именованных сущностей с использованием пакета Python spaCy . Однако мне не удалось установить локальный язык внутри пакета spaCy . Есть ли кто-нибудь, кто может сказать мне, как установить или иным образом...
643 просмотров
schedule 28.08.2022

Создание пользовательского распознавания именованных сущностей с помощью Spacy, используя случайный текст в качестве образца
Мой вопрос на самом деле длиннее этого. Однако я разделяю вопрос на две части, так как он очень длинный. Я пытаюсь создать пользовательское распознавание именованных сущностей (NER) с помощью Spacy для продуктов. Я составил список слов, связанных...
167 просмотров
schedule 31.07.2023

Используйте конфигурацию инструмента аннотаций / службу автоматической аннотации от brat
Я хочу использовать личный API для распознавания именованных объектов (NER) и использовать brat для визуализации. Похоже, что brat предлагает инструмент для автоматического добавления аннотаций , но документация по его настройке скудна. . Есть...
74 просмотров
schedule 10.12.2022

ValueError в функции потерь `categorical_crossentropy`: проблема с формой
Я пытаюсь разработать модель распознавания имен (мультиклассов) с биотегированием. У меня есть 9 классов, и я преобразовал их в горячее кодирование. Во время обучения я получил следующую ошибку: ValueError: Целевой массив формы (2014, 120, 9) был...
53 просмотров
schedule 15.02.2023

Должны ли функции быть числами с плавающей запятой для мультиклассовой классификации по дереву решений?
X_train ------------------------------------------------------------------------------------------ | bias | word.lower | word[-3:] | word.isupper | word.isdigit | POS | BOS | EOS |...
111 просмотров

Как я могу найти связь между двумя сущностями или словами, используя НЛП?
Я довольно новичок в НЛП. Мне трудно найти связь между двумя словами. Например, Сара тратит 10 долларов. Макс тратит 100 долларов. Все они потратили некоторую сумму. В общей сложности они потратили 500 долларов США. Теперь несколько человек...
58 просмотров
schedule 17.05.2023

Поиск индексов начального и конечного символов в Spacy
Я тренирую пользовательскую модель в Spacy для извлечения пользовательских объектов, но, хотя мне нужно предоставить входные данные поезда, которые состоят из моих объектов вместе с местоположениями индекса, я хотел понять, есть ли более быстрый...
38 просмотров
schedule 28.02.2024

как извлечь объект с именем PERSON после определенного слова с пространством?
У меня есть этот текст (текст 2 в коде), в нем 3 слова, я хочу использовать Spacy для извлечения имени человека (полное имя, даже если это 3 слова, некоторые расы используют длинные имена, в данном случае 2) . Код ниже, мой шаблон показывает ошибку....
164 просмотров
schedule 19.12.2023