Неполиткорректный виртуал (pascendi) wrote,
Неполиткорректный виртуал
pascendi

Categories:

Тут люди не понимают, что такое "автоматическая классификация текстов", хорошо это или плохо

Поясню на примере.
Одна из задач автоматической классификации текстов заключается, например, в отнесении текста к той или иной категории на основании отношения автора текста к каким-либо объектам.

Например:
"Байден не любит Трампа, он сенильный дебил".

Примитивный алгоритм отнесет этот текст к антитрамповским, потому что (судя по расстоянию между словом "Трамп" и словом "дебил") слово "дебил" будет отнесено к Трампу.

Корректный алгоритм учтёт синтаксис и семантику и сообразит, что текст-то как раз протрамповский, а "сенильным дебилом" обозвали Байдена.

Человеку это ясно с первого прочтения -- но машина-то не человек, и для фильтрации и сортировки текстов она должна учитывать вот такие фигни.

А это на самом деле очень нехилая математика, точнее, математическая лингвистика. И, между прочим, во многих случаях -- самообучающиеся нейросети. Перенесено из Dreamwidth.
Subscribe

  • Пустяки

    User-friendly. А юзер -- френд ли? Что тебе -- шницель, крейсер Аврора? Тыкову дали в тыблоко. Posted via LiveJournal.app.

  • О либерастах

    Мне кажется, я понял, почему либерасты так остро реагируют на любое, даже оправданное нарушение свободы слова. Болтовня -- это все, на что они…

  • Газпром объявил, что Украина переводится на предоплату

    А хто не москаль, той нехай поскаче. Может, зимой так согреется.

  • Post a new comment

    Error

    Anonymous comments are disabled in this journal

    default userpic

    Your reply will be screened

    Your IP address will be recorded 

  • 18 comments

  • Пустяки

    User-friendly. А юзер -- френд ли? Что тебе -- шницель, крейсер Аврора? Тыкову дали в тыблоко. Posted via LiveJournal.app.

  • О либерастах

    Мне кажется, я понял, почему либерасты так остро реагируют на любое, даже оправданное нарушение свободы слова. Болтовня -- это все, на что они…

  • Газпром объявил, что Украина переводится на предоплату

    А хто не москаль, той нехай поскаче. Может, зимой так согреется.