技術 JuliaでYahoo!ニュースをスクレイピング
はじめに 前回の記事「Juliaでジップの法則（Zipf's law）を確認」で、青空文庫の小説を使ってジップの法則を確認しました。結果は、かなりのずれが見られたわけですが、ほかのコーパス、例えばニュース記事などではどうなのかも確認したいと...
2022-06
技術 
技術 Juliaでジップの法則（Zipf’s law）を確認：小説の場合
はじめに 前回の記事で、青空文庫からテキストを取得して、操作できる形式に変換することができました。 せっかく、自然言語のテキストが大量に扱えるようになったので、自然言語処理関連でのいろいろを考えていきたいと思います。 今回は、自然言語の経験...
技術 Juliaで複雑ネットワークを可視化(2) 共起情報の可視化
はじめに ここでは、Julia上で、日本語テキストから形態素間の共起関係を抽出し、それをグラフ表現で表示する方法を紹介します。グラフの表示に関しては、前回の記事に準じます 使用するのは次のパッケージです。HTTP.jlhttpアクセスZip...
技術 Juliaで複雑ネットワークを可視化(1)
はじめに ここでは、Julia上で、複雑ネットワークをグラフ表現で表示する方法を紹介します。 使用するのは次のパッケージです。Graphs.jlネットワーク構造の表現GraphPlot.jlネットワーク可視化Compose.jlグラフの保存...