н-но это можно упростить до наведения мыши на слово в 90+% случаев...

ок, пасиб

Но так ты будешь сразу видеть и не будешь учиться.

10 раз мышу наведешь, на 11й запомнится

речь же о ситуации когда ты даже базовых слов толком не знаешь

Базовые слова часто лучше смотреть в ALC, а не месиве синонимов edict, который под твоим мышом обычно и будет попапиться.

огонь, поищу, спасибо

ну, от слова зависит

Может, я просто оверпротектив, ок.

ну я не спорю что на какой-нибудь ある (каной) там будет простыня. Но обычно всё не так плохо

(из опыта)

Ребят, а я могу попросить вас кое-что проверить?
я тут хочу разбивать японское предложение на отдельные слова, и нужно проверить на одном примере два алгоритма

давай проверим

Вот оригинал
過去ログを見たところ、森岡さんメイン、塚本さんサポート、という話だったので、谷浦さんはグループから外しました。

Вот алгоритм номер 1
'', '過去', 'ログ', 'を', '見', 'た', 'ところ', '、', '森岡', 'さん', 'メイン', '、', '塚本', 'さん', 'サポート', '、', 'という', '話', 'だっ', 'た', 'ので', '、', '谷', '浦', 'さん', 'は', 'グループ', 'から', '外し', 'まし', 'た', '。', '']

Вот алгоритм номер 2
'▁', '過去', 'ログ', 'を見た', 'ところ', '、', '森', '岡', 'さん', 'メイン', '、', '塚', '本', 'さん', 'サポート', '、', 'という話', 'だったので', '、', '谷', '浦', 'さん', 'は', 'グループ', 'から', '外', 'しま', 'した', '。'

Ни один не прав на 100%

Да я понимаю, а можете указать на ошибки. И какой ближе

Плюс второй алгоритм косячит с именами, но если там используется словарь, то без имён в нем обойтись будет сложно

Там не совсем словарь, там использовались японские тексты с википедии

проблема еще отчасти в том что нет единственно верного способа разбивать текст на слова. Ниже дан разбитый лично мной вариант с тем, что падежные частицы и именные суффиксы считаются разными словами со своим “носителем”
過去　ログ　を　見た　ところ、　森岡　さん　メイン、　塚本　さん　サポート、と　いう　話　だった　の　で、　谷浦　さん　は　グループ　から　外しました。

и то спорно, считать ので вместе или нет ¯\_(ツ)_/¯