返信先:@yayoi_mizuhaこれはまだ形態素解析→カウント→並べて描画に3日かかったというリハビリの図です トピックモデルの実装が進めばトピックごとに色分けされて役に立つはず

「リセット」されたかは知らないけど、ニューラルネットへの入力の前処理としてはサブワード分割が主流になったのは確か ただ、検索とかIMEあたりの形態素解析が必要なタスクはまだまだある

返信先:@funasaxそうなんだ NLP，情報保障のアレコレに使えそうだなーっておもった 修正とかね BlowWordsとか，形態素解析して名詞だけ取り出してるし，なんかデモで見せたら面白そう blowwords.replit.app

wikipediaを形態素解析して57577抽出する偶然短歌、まだbotあった〜。これはいいbotです。

形態素解析して要素一つ一つに付けてみたいと思ったことはある

LLM使っていろいろやったけど、今のところは形態素解析エンジン+辞書で対応してます note.com/foodison/n/n1d…

返信先:@duelpira形態素解析してマルコフ連鎖で文章生成しても同じ文章ばかりできあがりそうです

Result - 小説形態素解析CGI - E.N.Nach ennach.sakura.ne.jp/Morph/result.h… #小説形態素解析CGI

きょうだいがしりとりぼっとで遊びながら、「『竜宮城』が『リュウミヤギ』になったよ」と報告してくれた… 形態素解析難しい🤖🐉✨

形態素解析、コーパスは京大のイメージあるわ

UniDic の matrix.def が大きすぎる問題、ふつう MeCab とかで形態素解析するときはちゃんとしたパソコンやサーバーサイドでやるからあまり問題にならないのかな

記事を投稿しました！ kuromoji.js + SudachiDict で形態素解析（辞書のビルド、IPADic・UniDic との比較） [JavaScript] on #Qiita qiita.com/piijey/items/2…

形態素解析辞書が @meilisearch のバイナリサイズの殆どを占めていたので、かなり小さくなるのではないかと思います。

最近の形態素解析器おすすめは？ (python環境で構築しやすい、早い、使いやすいもの。辞書拡張は今のところ考えてない。)

今日のクソデカ文庫は - 長い小説のチャプター分け実験 - 全文要約機能 - 登場人物抽出実験 - 形態素解析込みでOGP生成 - 新しい文体変換サービスとの相互リンクの仕組みづくり - リテイクと変換後のリビジョン機能 - 審査が降りないので、GoogleがやりがちなUIに使いづらく変更 です

返信先:@mikiito22コミュニティ検索機能には英語の形態素解析しか導入していないということなんですかねえ……

返信先:@Anthem0127他1人形態素解析優秀すぎだろ あなが囲まれてるわけですね

返信先:@zikilluuアルゴリズムが気になります🧐形態素解析だけでできちゃうんですね。しかも10年以上前だなんて同僚さんすごい！

産経ニュースの有名人の名前を使った詐欺に関する記事、ちょっと面白いのは「メタの広告ライブラリ」を使ってMeCab(日本語形態素解析システム)を使って解析していることと、Metaが似たようなことAIでできないってことはないよね？と指摘していること。

返信先:@yayoi_mizuha歌詞分析の前処理で形態素解析してカウントしただけでヘトヘトみたいな

手元のドキュメントを形態素解析かけて未知語なんかを自動で抽出して用語集を自動生成できないかなって思ってた時期もあったなぁ(遠い目)

返信先:@cyber_penguin_gガバガバ形態素解析で元ツイの一個目の「も」が助詞判定された説を押すぜェ......

やばい！もうこんな時間だ。 二日酔いで活動が夕方からになったけど、 StreamlitでAppを作り、 Dataikuで形態素解析したデータを、Chat GPT先生に聞きながらPythonレシピも入れ込んで出力、TableauでVizにする途中までできた。 今日はローコーダーRikaの日にできた。Chat…

今日は川崎と立川とを車で往復。。 戻る途中、尻手駅付近で我が頭脳の形態素解析機能が振り切れた。道路標識に「木月天王森」。なんじゃこれ？ 木/月/天/王/森？ 木/月天王/森/? 木/月/天王森/? 横の店には「尻手黒川木月店」とある。山川草木の世界に迷い込んだかな。

「日本民族の優秀性を確認！」とかそういうのではなくって、でも、私は日本で生まれ育って国というか風土が好きなのでもっと知りたい。 日本語というものにも興味があって文法論とかは学んだし、講義で一人で異色に混じって膨大な文章を形態素解析にかけてレポートを出したりしてた。

井川氏の改行ポスト考 形態素解析みたいな意図だとご自身は仰っていた。まあそんな気もする。一見読みにくいので注意深く読む副次性もある。誤読回避の模索ならアプローチとしては興味深い。

自然言語処理の形態素解析と構文解析に対応してそう、とおもったらやっぱりそうだった #phpcon_odawara #kama

tokenizer の概要を知った後だと、形態素解析ってすげえなって思う #phpcon_odawara #kama

確率的に単語分割するの、高速でいいんだけど精度は低いのでちゃんと形態素解析しよっかな

今日初めて会った他人だけど「形態素解析」「neologd」というキーワードが通じる友達ができて良かった😇 pic.twitter.com/LapUMo4Lhw

日本語って形態素解析必要だから大変だよなぁと思った

同僚から教えてもらった『文体診断ロゴーン』というサービスが面白かったです。 文章を入力すると、形態素解析をもとに「自分が誰に似た文体なのか」を教えてくれるらしい。阿川弘之に似てるってほんとうかよ。 信頼できるかは微妙ですが、遊び半分にどうぞ🦀 pic.twitter.com/hN90Sb3su8

さすがにMeCab(今時はなんだろ)入れて形態素解析してくれは無理だろうから、なんらか別の指標で測ってくれないかな。 翻訳の世界だと日本語の文字数の50-60%ぐらいが英語の語数の見積になるみたいなので、ざっくり日本語の場合は文字数の半分=語数が妥当かなあ。日本語だと判定できるのなら。

Project-gc で log length という項目があるのだが、これは英語等だと語数(word count)を数えていて、日本語には対応してないのでいくら書いてもその部分はノーカウントになる。 とても納得がいかないのだが、日本語のようなわかち書きをしない言語で語数ってどう数えるんだろうか。 形態素解析する？

返信先:@minase_shiaなんかやたら形態素解析が下手だなってなる時ありますよねTwitter…

返信先:@7MPra形態素解析！？

色んな意見頂きました。以下が忙しい人向けサマリです。 - 外部マスターデータの購入で信頼性の高いデータを利用。 - ルールエンジンや正規表現でルールベースの解消。 - 形態素解析とLLMを組み合わせたMLやNLPの活用。

"水瀬しあ" or "水瀬し" 👆この一行まとめて検索してみて下さい、検索漏れが緩和されると思います 【しくみ】 Xの検索は「書いてある日本語をバラす処理（形態素解析）をして、意味が近いものを出す」というちょっと複雑な仕組みになっているみたいです。そうすると ユーザー「水瀬しあの動画」…

形態素解析が好きなエンジニアさんを探してます〜 piitaでもDMでも、どちらでもご連絡お待ちしてます！ pitta.me/matches/SREPqT…