2012-01-01から1年間の記事一覧

mecabの辞書に顔文字を追加してみた. エスケープ文字がどう処理されているのかよくわからないが, ( 0,0,無品詞,顔文字,*,*,*,*,"がんがれ,*,*,顔文字, ミ 0,0,0,無品詞,顔文字,*,*,*,*,"ちびふさ,*,*,顔文字, が,たくさん出力される.なぜだろうか...…

蛇足2. ツイートの文字数が全角でも半角でも140文字が上限というのは,SMSから来ている. SMSは160文字が上限だが,ヘッダー情報とか20文字分を入れると140文字本文にあてたとか. Twitterの140文字制限の理由について調べてみたら意外と奥深く感じた件 ん…

東大地震研助教の大木さんのブログを読む. 彼女は正確には地震学者でも地震そのものではなく,防災教育が専門らしい.そちらへ転身したと記述あり. だから,いつも「私と話をした人は死なせない!」と強い思いをもっている. リスク研究学会大会発表論文賞…

タブ区切り,1カラム目の数字昇順,重複は避けてソートする. sort -t \t -k1n -u File.txtセパレータにダブルコーテーションの指定など不要. 参考

バラバシの名前入力が面倒だ.Albert-László Barabási.Macは Option + e + a = aのアクセント, Option + e + o = oのアクセント,TeXバージョン Albert-L\'aszl\'o Barab\'asi mecabの辞書を更新する.sano2という前のディレクトリに存在していて,ユーザ…

pythonプログラム中で,直接 x== "名詞"みたいにしようとすると,プログラム内で ユニコード変換とか必要で面倒.そこで引数で日本語を指定すると,簡単に通る. word = sys.argv[1] phase = sys.argv[2] print 'Word: %s' % word, (中略) while n1: if (n1.…

なんだかセパレーターがうまく動かない時は,改行コードが デフォルトかどうか確認すべし.RSで指定している. awk 'BEGIN{FS="\x01";RS="\n"}{print $1}' 1.csv

Acrobat ProはPDFファイルを編集できて便利なのだけれど,いまいち使いこなせない. ちょっと,オブジェクトの位置を変えたい場合は,ツール > オブジェクトの編集,を押して対象を選択. 矢印キーかドラックで移動.選択しすぎた場合,追加選択する場合はシ…

群れはなぜ同じ方向を目指すのか?/レン・フィッシャーありの群れ,魚の群れ,人の群れの話. 複雑ネットワークの話や,人間の意思決定の話などもありネタは盛りだくさんな本. 2章,「群れと自己組織化」p.53 つまり私たちは集団内に別の目標が存在しないか…

R R

Rで自己相関関数を出力. namesで確認して,必要な値~$acfのみをファイルに出力する. FN <- paste("Acf_",commandArgs()[5],sep="") ax <- acf(x[,2],lag.max=60) write.table(ax$acf,FN,append=F,quote=F,col.names=F,row.names=F)

bibtexで日本語の文献の場合,出力がうまくいかない. 記事はNGで,本ならギリギリOKの様子. 多分,英語フォーマットで出力しようとしているからだと思う. 仕方ないので,直接bblファイルを修正して解決.

RとかIgorの非線形フィット,具体的にはロジスティック式の フィッティングがうまく行かない. 評価関数に無限大やNaNがあったとかのたまうメッセージ. 初期値の問題かもしれない. 初期値をかなり近い値に持ってくると,収束する場合もある. その場合も,…

震災データのレコード数.毎日ほぼ2500万ツイートある. 26100368 2011-03-11.txt 27316110 2011-03-12.txt 23065989 2011-03-13.txt 25405084 2011-03-14.txt 25339259 2011-03-15.txt 24369068 2011-03-16.txt 22466126 2011-03-17.txt 5224293 2011-03-18…

バースト! 人間行動を支配するパターン アルバート=ラズロ・バラバシ (著)新ネットワーク思考に続く,バラバシによる一般啓蒙書2冊目. 結論は,決してラダムではなく,案外人間の行動は予測可能だ,といったころか. 全体としてはこんな例もありまっせー,…

複雑な世界、単純な法則 ネットワーク科学の最前線 /マーク・ブキャナン 作者は雑誌Natureの編集者.内容は主に,ワッツとストロガッツの提唱したSmall-world networkについて. バラバシのScale-free networkの話もある.特に成長と優先的成長という点を評…

2カラム目の全角文字数の長さのみを出力する. awk -F"," '{gsub(/[ -~]/,"",$2);print(length($2))}' test.txt

公開データなど. 地震の加速度データ 日本語コーパス Googleの網羅するPublic data

欠損値NAの扱い

R

zにNAが複数含まれているので,普通にmean(z)としても平均が算出できない. そこで,na.omit(z)を使って単純にNAを取り除く. ただし,summaryだと,meanを計算してくれる模様. z1 <- na.omit(z) summary(z1) Min. 1st Qu. Median Mean 3rd Qu. Max. -1.630…

Twitterデータ.デマ関連っぽいもののレコード件数. 443502 水.txt 233929 シーベルト.txt 164811 コスモ石油.txt 87335 ガソリン.txt 74030 爆発.txt 58640 買い占め.txt 56393 コンビニ.txt 38226 セシウム.txt 30787 韓国.txt 30358 中国.txt 22452 送電…

震災データ入手.10月28日(Sun)までの短期決戦型. 申請すれば,期日の後,3ヶ月後までデータは使えるらしい. ただし,申請は個別に行う.https://sites.google.com/site/prj311/まず,朝日新聞とJCCとTwitterのデータを申請してDL開始. JCCは,TVで放送…

参考文献の見出しを変更したい場合. デフォルトだと,jarticleでは「参考文献」articleでは「References」となる. これを,ヘッダーに \renewcommand{\refname}{参考文献 - References} と変更すれば,「参考文献 - References」みたいなトリッキーが見出…

Lüなどの上付きの特殊文字の入力. 英字キーボードでは,Option+u uという順序で,Option押しながらuをいれて,この時点では何も入力がないが, もう一度だめ押しでuを押すと,üという特殊文字が入る.参考

各章ごとに,章の先頭に概要をつける. \begin{abstract}とすると,いちいち「概要」と入って中央寄せになってしまうので, 左右に適度に余白をつけて書き込むには引用形式が便利. \begin{quotation} ...\end{quotation}で結べばよい. 参考

Statistical laws in urban mobility from microscopic GPS data in the area of Florence Armando Bazzani, Bruno Giorgini, Sandro Rambaldi, Riccardo Gallotti and Luca Giovannini J. Stat. Mech. (Journal of Statistical Mechanics: Theory and Exper…

Reinforced random walk Gady Kozma arXiv:1208.0364 いったん通ったパスは,もう一度通る確率が高くなる,というのが (edge) reinforced random walkである. いったん通ったパスへの重みの付け方は,1+aで線形につける場合と,1+a^2などで非線形につける場…

ECCS12メモ主に1日目.走り書きそのまま.9:05 Community Detection In Networks, Santo Fortunato 疎行列からまとめて、コミュニティを探す。 スコアQ(P)で評価 = モジュラリティPRE69, 026113(2004) 大きい方が良いが、NP困難。さらにResolution limit PNA…

まだときどき,ふと思い出して落ち着かなくなるので,文章にすることにした. 9月1日の夕刻に母方の祖父が亡くなった.8月19日に92才の誕生日を迎えてすぐだった. ちょうど私は9月2日から欧州出張だったので,帰国した9月9日午前に母のメイルでそれを知った…

A paradoxical property of the monkey book Sebastian Bernhardsson, Seung Ki Baek and Petter Minnhagen J. Stat. Mech. (2011) P07013 ECCSで,韓国人の研究者から紹介してもらった論文. Monkey bookというのは,猿にタイプライターを打たせて,アルフ…

メモ Zipf and Heaps 関連 Monkey book (Edge) Reinforced random walk

ECCSで聞いたこと思ったことなどメモ. 短期間に論文を作成するには,方向(story)を決め,その上にfigureをおいて行くのがベスト. いろいろやってると,まとまらなくなる. 東大増田さん,Umeaのペッターさんがこのやり方. 他人の発表にコメントしながら,…