redbrick@HyZERO3強制解約済み on Nostr: ...
一行一レコードなら行数で区切って別々に圧縮ファイルにするとか、何行目から何行目まで切り出して別ファイルにするとかして、並列でMeCabにぶち込んで後でマージが必要なところでcatしてからプロセスに突っ込めばいいのでは?
Published at
2023-10-07 09:45:30Event JSON
{
"id": "07ad7ef03a01c402f83e6df5b07194873ebdbfde13b7cb99f559e4d3d91b6eb7",
"pubkey": "258db3a98354a4d91cfbb7a7a10dd21cdd2180ce4c121e17f96cf27709ef9d94",
"created_at": 1696671930,
"kind": 1,
"tags": [
[
"proxy",
"https://social.mikutter.hachune.net/users/redbrick/statuses/111193091668566741",
"activitypub"
]
],
"content": "一行一レコードなら行数で区切って別々に圧縮ファイルにするとか、何行目から何行目まで切り出して別ファイルにするとかして、並列でMeCabにぶち込んで後でマージが必要なところでcatしてからプロセスに突っ込めばいいのでは?",
"sig": "eac1665750ae0e5e2a28d4ee40d4733e76fd27fc216648279ad4717dcb2c27b8dce99ede5ba102b6293511045323dfb22f6edcb280a978dd43b021b79987ec17"
}