Qiitaのあれこれをひたすら分析してランキング

# **はじめに**

![eto_tori_kakizome.png](https://qiita-image-store.s3.amazonaws.com/0/45253/ff8a4daa-702d-2f85-d48a-be38e54acdf6.png)

2017年もあっという間に終わりが近づいてきました。
昨年もこの時期に

- **[Qiitaレジェンド達の偉大さをシェル芸で眺めて2016年を振り返る](https://qiita.com/t_nakayama0714/items/776724410b2a119af088)**

なんて記事を書いていたのですが、個人的に面白かったので今年も似たようなことを色々やってみます。
なお、この記事で用いている各種データは **2017年12月12日あたり** のデータであり、リアルタイムなものでないことにご留意ください。

# **やること**

![kaisya_snack_man.png](https://qiita-image-store.s3.amazonaws.com/0/45253/6f2238c2-806f-46a8-5651-c102ffc26fc6.png)

昨年は **[Qiita User Ranking](https://qiita-user-ranking.herokuapp.com/)** というサイトでContributionの上位を確認することができたのですが、2017年3月頃から更新が止まってしまいましたので、今回は自前でデータを集めました。

- ユーザ別Contributionランキング
- ユーザ別記事数ランキング
- ユーザ別フォロワーランキング
- 記事別いいねランキング
- その他分析いろいろ

それでは、いってみます。

# **前準備**

![hakui_nimotsu_hakobu_man.png](https://qiita-image-store.s3.amazonaws.com/0/45253/654650df-8443-0936-bbc5-b4bdf7f42ad1.png)

分析をするにあたり、当然データを集めなければなりません。
まとまっているものではないため、シェル芸を駆使してちまちま集めました。
ちょうど **[Software Design(2018年1月号)](http://gihyo.jp/magazine/SD/archive/2018/201801)** の特集「使えるシェルスクリプトの書き方」の5章で「シェルスクリプトでWebスクレイピング」がありましたが、やっているイメージは同じです。
特集でも同様に触れていますが、一気に集めるとQiita側に迷惑がかかるので適宜sleepさせつつ5日間くらいかけてゆるーっと集めています。
興味本位であっても複数人がやるとさらに負荷がかかってしまうので、一旦現時点でスクリプトの公開は控えておきます。

収集のしやすさと分析することを念頭に、ユーザごとに情報が1行にまとまるようにしつつ、

```
[ユーザ名],[記事数],[コントリビューション数],[フォロワー数],[ストック数1位記事:いいね数],[ストック数2位記事:いいね数],...,[ストック数5位記事:いいね数]
```

を集めています。内容的には **[ユーザページ](https://qiita.com/t_nakayama0714)** で取れるものですね。
例えば以下のような感じになります。

```qiita_data.csv
$ grep t_nakayama0714 qiita_data.csv
t_nakayama0714,33,6721,167,[エンジニアなら知っておきたい、絵で見てわかるセキュア通信の基本](https://qiita.com/t_nakayama0714/items/83ac0b12ced9e7083927):2585,[不思議の国のSE用語](https://qiita.com/t_nakayama0714/items/478a8ed3a9ae143ad854):1507,[Ansibleをはじめる人に。](https://qiita.com/t_nakayama0714/items/fe55ee56d6446f67113c):606,[NoSQLについて 勉強する。](https://qiita.com/t_nakayama0714/items/0ff7644666f0122cfba1):448,[無料で整える趣味チームの開発環境](https://qiita.com/t_nakayama0714/items/c0eb5e298524c127bccd):294
```

総量はどれくらいになったかというと、

```bash:ユーザ総数のカウント
$ wc -l qiita_data.csv
200902 qiita_data.csv
```

ということで、現在Qiitaユーザは登録数ベースで **20万** を超えているようです...！

# **ユーザ別分析**

![pop_kojinno_kansoudesu.png](https://qiita-image-store.s3.amazonaws.com/0/45253/cb552b13-77d4-5982-b696-814212cda7da.png)

まずはユーザ別に分析をしてみます。

## **ユーザ別Contributionランキング**

昨年もやったようなものです。
ユーザごとのランキングの他、記事数や平均いいね数、Contributionに占めるいいね1位記事の割合を出してみたいと思います。
今回は元データがまとまっているので去年ほどここでは苦労しません。

```bash:ユーザ別Contributionランキング
$ cat qiita_data.csv | sort -k 3nr,3 -t , | awk -F"," 'BEGIN{OFS="|"}{TOP=substr($5,index($5,"):")+2) ; TOP_ITEM=substr($5,0,index($5,"):")) ; print "|"NR"|@"$1,$3,$2,$3/$2,TOP,TOP/$3*100"%",TOP_ITEM"|"}' | head -n 10
```

2017年12月12日付近のTOP100は以下のようになりました。
せっかく昨年のデータがあるので、そことの差分も出してみました。つい最近1位の座が @jnchito さんに渡っていますね...！

|ランク|前年比|ユーザ名|総Contribution|前年比|記事数|平均いいね|Top数|Top占有率|Top記事|
|:---:|:---:|:---:|:---:|:---:|:---:|:---:|:---:|:---:|:---:|
|1|+1|@jnchito|33833|+6880|179|189.011|2704|7.9922%|[モデルやメソッドに名前を付けるときは英語の品詞に気をつけよう](https://qiita.com/jnchito/items/459d58ba652bf4763820)|
|2|-1|@hirokidaichi|33183|+2193|33|1005.55|5041|15.1915%|[ペアプログラミングして気がついた新人プログラマの成長を阻害 する悪習](https://qiita.com/hirokidaichi/items/27c757d92b6915e8ecf7)|
|3|+1|@icoxfog417|27896|+8969|147|189.769|2891|10.3635%|[Pythonを書き始める前に見るべきTips](https://qiita.com/icoxfog417/items/e8f97a6acad07903b5b0)|
|4|-1|@suin|22531|+2411|697|32.3257|4328|19.2091%|[【まとめ】これ知らないプログラマって損してんなって思う汎用的なツール 100超](https://qiita.com/suin/items/f570f057a0ff927b47dc)|
|5|0|@shu223|19843|+2752|176|112.744|1361|6.8588%|[ディープラーニングの有名ライブラリ5種を最短距離で試す半日コース（TensorFlow, Chainer, Caffe, DeepDream, 画風変換）](https://qiita.com/shu223/items/a4fc17eb3356a6068553)|
|6|0|@KeithYokoma|18243|+1506|142|128.472|4707|25.8017%|[うまくメソッド名を付けるための参考情報](https://qiita.com/KeithYokoma/items/2193cf79ba76563e3db6)|
|7|+3|@mizchi|17591|+2490|201|87.5174|1881|10.693%|[春からはじめるモダンJavaScript / ES2015](https://qiita.com/mizchi/items/3bbb3f466a3b5011b509)|
|8|-1|@yuku_t|17160|+1026|195|88|1465|8.5373%|[中規模Web開発のためのMVC分割とレイヤアーキテクチャ](https://qiita.com/yuku_t/items/961194a5443b618a4cac)|
|9|+4|@mpyw|17052|+3092|257|66.3502|2055|12.0514%|[PHPでデータベースに接続するときのまとめ](https://qiita.com/mpyw/items/b00b72c5c95aac573b71)|
|10|-2|@kenju|16864|+1421|120|140.533|2381|14.1188%|[中上級者になるためのJavaScript【知識編】](https://qiita.com/kenju/items/c7fad62a12cc2809b507)|
|11|+1|@opengl-8080|16789|+2628|238|70.542|1228|7.31431%|[AngularJS使い方メモ](https://qiita.com/opengl-8080/items/2fe0a20c314b1c824cc5)|
|12|-1|@awakia|15827|+1185|152|104.125|1598|10.0967%|[開発フロー研修 @ Wantedly](https://qiita.com/awakia/items/c571e93e96a1ec28044f)|
|13|+1|@mono0926|14837|+1548|94|157.84|1372|9.24715%|[ローディング時のズルい進捗表示](https://qiita.com/mono0926/items/ead7c576170277a5e83d)|
|14|+3|@b4b4r07|13127|+1475|57|230.298|1575|11.9982%|[さいつよのターミナル環境を構築しよう](https://qiita.com/b4b4r07/items/09815eda8ef72e0b472e)|
|15|0|@muran001|13078|+766|34|384.647|4542|34.7301%|[Gitでやらかした時に使える19個の奥義](https://qiita.com/muran001/items/dea2bbbaea1260098051)|
|16|+4|@cognitom|13045|+1556|95|137.316|1841|14.1127%|[そろそろ真面目に、HTMLで帳票を描く話をしようか](https://qiita.com/cognitom/items/d39d5f19054c8c8fd592)|
|17|-1|@haminiku|13013|+869|71|183.282|2951|22.6773%|[2016年 独りで新規WEBサービスを開発・運用した際の知見](https://qiita.com/haminiku/items/711cbdb894d1d6839e3e)|
|18|+1|@edo_m18|12634|+1084|372|33.9624|1145|9.06285%|[WebのUIテスト自動化 - Seleniumを使ってみる](https://qiita.com/edo_m18/items/ba7d8a95818e9c0552d9)|
|19|+12|@koher|12002|+3462|63|190.508|1422|11.848%|[null安全でない言語は、もはやレガシー言語だ](https://qiita.com/koher/items/e4835bd429b88809ab33)|
|20|-2|@appwatcher|11830|+247|60|197.167|2070|17.4979%|[iOSでこんなアプリ,こんな機能を作りたかったらこれを見ろ！作り たいアプリに対応するクラス、フレームワーク、ライブラリのまとめ！](https://qiita.com/appwatcher/items/b02255026a3ee6d95142)|
|21|+1|@kazunori279|11636|+1374|41|283.805|1312|11.2754%|[Cloud Vision APIの凄さを伝えるべくRasPi botとビデオを作った話](https://qiita.com/kazunori279/items/768c7fdf96cdf45a9d16)|
|22|-1|@susieyy|11544|+697|50|230.88|1941|16.8139%|[Swiftで作られたイケてるUIライブラリたち](https://qiita.com/susieyy/items/1f28531a1c58d9158896)|
|23|+2|@zaru|11498|+2105|109|105.486|1598|13.8981%|[Webフロントエンド表示速度、最速化手法まとめ](https://qiita.com/zaru/items/51ee8a5be22b75a42927)|
|24|-1|@yimajo|11055|+808|143|77.3077|737|6.66667%|[iOS実機のSSL通信をプロキシによって傍受したり改ざんする方法](https://qiita.com/yimajo/items/c67cb711851f747c35e5)|
|25|+12|@kawasima|10196|+2489|78|130.718|1026|10.0628%|[GitHub English Challenge Cheat Sheet](https://qiita.com/kawasima/items/feac49a299213e2c8ba6)|
|26|+9|@hshimo|10021|+1946|307|32.6417|2578|25.726%|[プログラマが独立・起業する時によくするミスと対策 まとめ](https://qiita.com/hshimo/items/776e3ca62be51c3bdc89)|
|27|+6|@kenmatsu4|9990|+1475|65|153.692|1653|16.5465%|[【機械学習】ディープラーニング フレームワークChainerを試しながら解説し てみる。](https://qiita.com/kenmatsu4/items/7b8d24d4c5144a686412)|
|28|0|@ynakayama|9889|+952|189|52.3228|713|7.21003%|[scikit-learn から学ぶ機械学習の手法の概要](https://qiita.com/ynakayama/items/9c5867b6947aa41e9229)|
|29|-5|@hkusu|9771|+528|208|46.976|964|9.86593%|[[WEB開発] 私的な最近のおすすめサービス/ツール 14選 ～2014年版～](https://qiita.com/hkusu/items/6d0f8ca873a867aafce9)|
|30|+4|@takeharu|9697|+1395|18|538.722|1481|15.2728%|[JavaScriptの「this」は「4種類」？？](https://qiita.com/takeharu/items/9935ce476a17d6258e27)|
|31|-5|@uasi|9671|+671|117|82.6581|2102|21.7351%|[英語のコメントや issue で頻出する略語の意味 (FYI, AFAIK, ...)](https://qiita.com/uasi/items/86c3a09d17792ab62dfe)|
|32|-5|@kidach1|9602|+612|84|114.31|1314|13.6846%|[Nginx導入時やること](https://qiita.com/kidach1/items/985efebba639713c562e)|
|33|-3|@joker1007|9539|+773|105|90.8476|1089|11.4163%|[てめえらのRailsはオブジェクト指向じゃねえ！まずはCallbackクラ ス、Validatorクラスを活用しろ！](https://qiita.com/joker1007/items/2a03500017766bdb0234)|
|34|-2|@tukiyo3|9301|+774|1555|5.98135|432|4.64466%|[たくさんあるオープンソースライセンスのそれぞれの特徴のまとめ](https://qiita.com/tukiyo3/items/58b8b3f51e9dc8e96886)|
|35|+1|@tadsan|9191|+1396|167|55.0359|1965|21.3796%|[ライセンスの選択を恐れる必要はありません](https://qiita.com/tadsan/items/99d816e78ca429093b75)|
|36|+2|@usagimaru|8581|+1003|173|49.6012|1036|12.0732%|[iOS ヒューマンインターフェースの原則](https://qiita.com/usagimaru/items/9b55daa4d88b0bb98f38)|
|37|+2|@kawaz|8243|+680|146|56.4589|2032|24.6512%|[最強のSSH踏み台設定](https://qiita.com/kawaz/items/a0151d3aa2b6f9c4b3b8)|
|38|+4|@okappy|8098|+880|28|289.214|5637|69.6098%|[非デザイナーエンジニアが一人でWebサービスを作るときに便利なツール32選](https://qiita.com/okappy/items/119e31cae9aa9bd9da6d)|
|39|+17|@tonkotsuboy_com|8027|+2239|113|71.0354|895|11.1499%|[2016年新機能! GitHubのmasterブランチをWebページとして公開する手順](https://qiita.com/tonkotsuboy_com/items/f98667b89228b98bc096)|
|40|+3|@gaogao_9|7985|+901|13|614.231|4169|52.2104%|[旧石器時代のJavaScriptを書いてる各位に告ぐ、現代的なJavaScript超入門 Section1 ～すぐにでも現代っぽく出来るワンポイントまとめ～](https://qiita.com/gaogao_9/items/ec2b867d6941173fd0b1)|
|41|+3|@zembutsu|7923|+1053|87|91.069|1299|16.3953%|[Docker 入門ハンズオン資料](https://qiita.com/zembutsu/items/891c7ffd2c36097400b1)|
|42|+9|@Quramy|7772|+1421|85|91.4353|1978|25.4503%|[Electronでアプリケーションを作ってみよう](https://qiita.com/Quramy/items/a4be32769366cfe55778)|
|43|-3|@sion_cojp|7730|+387|41|188.537|3568|46.1578%|[インフラエンジニアとしてよく使うコマンド集](https://qiita.com/sion_cojp/items/04a2aa76a1021fe77079)|
|44|+3|@vvakame|7634|+986|48|159.042|1296|16.9767%|[Gradle入門](https://qiita.com/vvakame/items/83366fbfa47562fafbf4)|
|45|-4|@syui|7535|+217|212|35.5425|1364|18.1022%|[MacBookAirで使っている便利ツール](https://qiita.com/syui/items/73a822970742b317aede)|
|46|新|@rana_kualu|7484|新|192|38.9792|1880|25.1203%|[2017年のフロントエンドエンジニアならこの程度は知ってて当然だよ な？](https://qiita.com/rana_kualu/items/cad8dbbe5f5a1f1b3ba1)|
|47|-1|@Qiita|7385|+642|4|1846.25|5937|80.3927%|[Markdown記法 チートシート](https://qiita.com/Qiita/items/c686397e4a0f4f11683d)|
|48|+17|@y_hokkey|7290|+2282|60|121.5|1584|21.7284%|[Dockerで即実行できる、社内・自宅向けオープンソースWebアプリ](https://qiita.com/y_hokkey/items/406b5a8c4bc15354d069)|
|49|+49|@Hironsan|7286|+3278|46|158.391|996|13.6701%|[機械学習を使って作る対話システム](https://qiita.com/Hironsan/items/6425787ccbee75dfae36)|
|50|-1|@tbpgr|7240|+854|728|9.94505|937|12.942%|[Markdown記法 サンプル集](https://qiita.com/tbpgr/items/989c6badefff69377da7)|
|51|-6|@kaiinui|7191|+382|47|153|2466|34.2929%|[最近の行儀のよい JavaScript の書き方](https://qiita.com/kaiinui/items/22a75d2adc56a40da7b7)|
|52|-4|@Jxck_|6992|+412|62|112.774|1137|16.2614%|[DELETE_FLAG を付ける前に確認したいこと。](https://qiita.com/Jxck_/items/156d0a231c6968f2a474)|
|53|+5|@tatesuke|6873|+1602|40|171.825|2179|31.7038%|[You Don&#39;t Need jQuery](https://qiita.com/tatesuke/items/b9548dd484b01b139b74)|
|54|-2|@yuya_presto|6811|+487|38|179.237|783|11.4961%|[Gitコンフリクト解消ガイド（git mergetoolの使い方）](https://qiita.com/yuya_presto/items/5d99499cf96c0ebb09f8)|
|55|新|@t_nakayama0714|6721|新|33|203.667|2585|38.4615%|[エンジニアなら知っておきたい、絵で見てわかるセキュア通信の基本](https://qiita.com/t_nakayama0714/items/83ac0b12ced9e7083927)|
|56|+4|@tag1216|6711|+1441|90|74.5667|2781|41.4394%|[インフラエンジニアじゃなくても押さえておきたいSSHの基礎知識](https://qiita.com/tag1216/items/5d06bad7468f731f590e)|
|57|-2|@n0bisuke|6583|+781|266|24.7481|710|10.7854%|[3行のソースコードを入れるだけで機械学習できると噂のindicoをNode.jsで使って機械学習入門してみる](https://qiita.com/n0bisuke/items/868b43411078bc2018fb)|
|58|-5|@gogotanaka|6571|+442|57|115.281|3368|51.2555%|[ネイティブと働いて分かった英語コミットメッセージの頻出動詞10つ](https://qiita.com/gogotanaka/items/b65e1b081fa976e5d754)|
|59|-9|@armorik83|6527|+161|110|59.3364|1340|20.5301%|[AngularJSモダンプラクティス](https://qiita.com/armorik83/items/5542daed0c408cb9f605)|
|60|+2|@amay077|6452|+1365|254|25.4016|464|7.19157%|[Xamarin(ザマリン) とはなんぞや](https://qiita.com/amay077/items/38ee79b3e3e88cf751b9)|
|61|+6|@shibukawa|6259|+1332|100|62.59|871|13.916%|[オブジェクト指向と20年戦ってわかったこと](https://qiita.com/shibukawa/items/2698b980933367ad93b4)|
|62|-3|@jacksuzuki|6118|+850|5|1223.6|6106|99.8039%|[ロシアの天才ハッカーによる【新人エンジニアサバイバルガイド】](https://qiita.com/jacksuzuki/items/b2fa6b44962e73a53d08)|
|63|-9|@yaotti|6110|+215|151|40.4636|1268|20.7529%|[gitでありがちな問題の解決方法まとめ](https://qiita.com/yaotti/items/0d5364eae36ad1bb8e01)|
|64|+20|@howdy39|5979|+1603|43|139.047|1238|20.7058%|[フロントエンドにテストを導入](https://qiita.com/howdy39/items/cdd5b252096f5a2fa438)|
|65|+14|@kazukichi|5939|+1455|34|174.676|2284|38.4577%|[エンジニアで稼ぐために大切な１９のコト](https://qiita.com/kazukichi/items/7379b75fba2f90d3cf45)|
|66|-9|@r7kamura|5859|+278|56|104.625|690|11.7768%|[RailsでAPIをつくるときのエラー処理](https://qiita.com/r7kamura/items/2e88adbdd1782277b2e7)|
|67|+1|@magicant|5708|+837|36|158.556|2128|37.281%|[クラスの命名のアンチパターン](https://qiita.com/magicant/items/8134edf969f9629fa66e)|
|68|-4|@daxanya1|5618|+576|30|187.267|4514|80.3489%|[数学を避けてきた社会人プログラマが機械学習の勉強を始める際の最短経路](https://qiita.com/daxanya1/items/218f2e3b922142550ef9)|
|69|-3|@koba04|5516|+546|38|145.158|770|13.9594%|[私のJavaScript情報の集め方](https://qiita.com/koba04/items/ba2381776d394633de72)|
|70|+4|@mochizukikotaro|5454|+873|240|22.725|1044|19.1419%|[初心者がAWSでミスって不正利用されて$6,000請求、泣きそうになったお話。](https://qiita.com/mochizukikotaro/items/a0e98ff0063a77e7b694)|
|71|+1|@nekoneko-wanwan|5452|+768|56|97.3571|1477|27.091%|[はじめてajaxを使うときに知りたかったこと](https://qiita.com/nekoneko-wanwan/items/bedc0e826c0842ca0b11)|
|72|-11|@voluntas|5451|+351|107|50.9439|1053|19.3176%|[docker コマンド チートシート](https://qiita.com/voluntas/items/68c1fd04dd3d507d4083)|
|73|-4|@koogawa|5447|+589|63|86.4603|1217|22.3426%|[iPhoneアプリ申請やAppleの審査に関するメモ](https://qiita.com/koogawa/items/5e2ff5a0312cb1f657f8)|
|74|+6|@disc99|5416|+945|24|225.667|1939|35.8013%|[Javaを使うなら知っておきたい技術、フレームワーク、ライブラリ、ツールまとめ](https://qiita.com/disc99/items/727b51dbe737602a5c91)|
|75|-4|@hidekuro|5402|+671|81|66.6914|2158|39.9482%|[VagrantとDockerについて名前しか知らなかったので試した](https://qiita.com/hidekuro/items/fc12344d36d996198e96)|
|76|-13|@hnakamur|5368|+315|187|28.7059|530|9.87332%|[ちょっとしたHTMLはGitHub Gistに置いてbl.ocks.orgで表示するのが お手軽です](https://qiita.com/hnakamur/items/ad1346bc9cfb0288ff60)|
|77|+13|@tenntenn|5353|+1123|71|75.3944|1968|36.7644%|[Go言語の初心者が見ると幸せになれる場所　#golang](https://qiita.com/tenntenn/items/0e33a4959250d1a55045)|
|78|+9|@hik0107|5322|+1017|22|241.909|859|16.1405%|[Pythonでデータ分析するのに必要なツールのまとめ](https://qiita.com/hik0107/items/19dd2f6a4ab61ec21905)|
|79|+7|@ukiuni@github|5267|+981|60|87.7833|1969|37.3837%|[JavaScriptを読んでて「なにこれ！？」と思うけれど調べられな い記法8選。](https://qiita.com/ukiuni@github/items/5f3d8620187905aea3d4)|
|80|-5|@chuck0523|5178|+611|44|117.682|1540|29.7412%|[フロントエンドエンジニアが暇なときにやると良いかもしれないこと](https://qiita.com/chuck0523/items/ff26ee3779214c3b0764)|
|81|+7|@pugiemonn|5144|+910|265|19.4113|937|18.2154%|[こんなHTMLとCSSのコーディング規約で書きたい](https://qiita.com/pugiemonn/items/964203782e1fcb3d02c3)|
|82|新|@shizuma|5126|新|102|50.2549|657|12.817%|[ターミナル 作業効率化 tips集](https://qiita.com/shizuma/items/86470203ac8ea6b4d53f)|
|83|新|@colorrabbit|5064|新|253|20.0158|624|12.3223%|[覚えておきたい Vim コマンド 備忘録](https://qiita.com/colorrabbit/items/755cfbb0e97d48280775)|
|84|新|@TakahikoKawasaki|4974|新|20|248.7|1287|25.8745%|[一番分かりやすい OAuth の説明](https://qiita.com/TakahikoKawasaki/items/e37caf50776e00e733be)|
|85|新|@inuscript|4971|新|111|44.7838|419|8.42889%|[【古い記事】Babelにおける import / export ](https://qiita.com/inuscript/items/41168a50904242005271)|
|86|-13|@okmttdhr|4971|+307|70|71.0143|1932|38.8654%|[ここ数年前から2015/5までのモダンフロントエンドを総まとめしてみ た](https://qiita.com/okmttdhr/items/1caff5a36c8468779a64)|
|87|+2|@ryounagaoka|4959|+729|47|105.511|1968|39.6854%|[もう逃げない。HTMLのviewportをちゃんと理解する](https://qiita.com/ryounagaoka/items/045b2808a5ed43f96607)|
|88|-18|@puriketu99|4928|+137|183|26.929|875|17.7557%|[機械学習クソ素人の俺がプロダクトをリリースするまでの2ヶ月で覚 えたこと](https://qiita.com/puriketu99/items/c519a95c0b16ea63c1ac)|
|89|-6|@Hiraku|4872|+502|125|38.976|1240|25.4516%|[WebAPIリクエスト仕様書としてcurlコマンドのご提案](https://qiita.com/Hiraku/items/dfda2f8a5353b0742271)|
|90|-5|@mima_ita|4822|+483|99|48.7071|610|12.6504%|[あなたのおっしゃるレビューってどのことかしら？](https://qiita.com/mima_ita/items/c3490ad1ccc12ad853f1)|
|91|-13|@kuni-nakaji|4821|+337|17|283.588|2278|47.2516%|[httpsだからというだけで安全？調べたら怖くなってきたSSLの話! ？](https://qiita.com/kuni-nakaji/items/5118b23bf2ea44fed96e)|
|92|+5|@k0kubun|4816|+801|59|81.6271|1035|21.4909%|[ActiveRecordのjoinsとpreloadとincludesとeager_loadの違い](https://qiita.com/k0kubun/items/80c5a5494f53bb88dc58)|
|93|新|@nonbiri15|4812|新|233|20.6524|980|20.3658%|[優秀な技術者を追い出してしまう方法](https://qiita.com/nonbiri15/items/961543c6460432289a02)|
|94|新|@zaburo|4737|新|221|21.4344|375|7.9164%|[gitでシンプルなデプロイ環境を作る](https://qiita.com/zaburo/items/8886be1a733aaf581045)|
|95|新|@shuntaro_tamura|4717|新|63|74.873|654|13.8647%|[フロントエンド、サーバサイド、インフラの具体例](https://qiita.com/shuntaro_tamura/items/e1a20e33c57c71679688)|
|96|-19|@m-yamashita|4703|+195|13|361.769|3491|74.2292%|[初心者向け、「上手い」シェルスクリプトの書き方メモ](https://qiita.com/m-yamashita/items/889c116b92dc0bf4ea7d)|
|97|-16|@hachi8833|4688|+251|45|104.178|2704|57.6792%|[Vim幼稚園からVim小学校へ](https://qiita.com/hachi8833/items/7beeee825c11f7437f54)|
|98|新|@takahirom|4622|新|72|64.1944|383|8.28646%|[AndroidStudioのPostfix Completionで爆速コーディング](https://qiita.com/takahirom/items/ac1d1b08351610dfcc43)|
|99|-6|@konifar|4564|+511|98|46.5714|255|5.5872%|[Android Studioのgradleビルドを高速化する](https://qiita.com/konifar/items/d0392b6428a47262ab0b)|
|100|新|@hashrock|4557|新|26|175.269|1040|22.822%|[脱Bootstrapガイド ～フルスクラッチCSS～](https://qiita.com/hashrock/items/5c18bf5086f52e4122e5)|

僕も **55位** にランクイン。やったッ...！やったッ...！

### **TOP100順位の上下**

昨年データと比較した、順位の上下についてみてみます。

|上昇|下降|維持|新規|
|:---:|:---:|:---:|:---:|
|43|42|4|11|

全体の1割が入れ替わり、それ以外の9割は概ね上がったり下がったりが拮抗しているようです。

また、100位以内で最も上昇幅が大きかったのが @Hironsan でした。
2017年のContributionは+3278ですが、新規記事の中では最もいいねの多い **[自然言語処理における前処理の種類とその威力](https://qiita.com/Hironsan/items/2466fe0f344115aff177)** ですが、集計時点で839いいねであるので、増分の約1/4程度です。
そのため、増加分の多くは既存の記事で伸ばしたことになりますが、 **機械学習系の記事** を多く書かれているようなので、このあたりが今年大きく伸びたものと思われます。トレンドを感じますね。

### **Contributionの分布**

Qiitaアカウントがトータル20万ある中で、全体はどのようなContribution分布をしているのでしょうか。
シェル芸を駆使して値の範囲ごとに数を出してみます。sedオタクみたいになってしまいました。

```bash:Contribution範囲ごとの人数分布
$ cat qiita_data.csv | cut -d , -f 3 | sed -e 's/^$/=/' -e 's/^0$/_/' -e 's/[0-9]/*/g' | sort | uniq -c | sed -e 's/ \*/ 1/g' -e 's/\*/0/g' -e 's/=/none/' -e 's/_/0/' | sed -E 's/([0-9]+) (1[0]*)/\1 \2-/g' | awk '{OFS="\t"}{print $2,$1}'
none    2247
0       169576
1-      10701
10-     11985
100-    5516
1000-   851
10000-  26
```

noneとなっているのはデータが取れなかったアカウントです。いわゆる凍結アカウントですね。
次にこのデータをもとにグラフを作ります。シェル芸人はExcelなどに頼らず **[gnuplot](http://www.gnuplot.info/)** を使います。

```bash:gnuplotのインストール
$ sudo apt-get install gnuplot
```

楽チンです。
グラフの描画をスクリプトで多少指定しつつ、先ほどの結果を投入した `contribution_stat.dat` を食わせます。

```bash:Contributions×Usersグラフの生成
$ cat contribution_stat.plt
# png形式で出力
set terminal pngcairo
# 出力パス&ファイル名を指定
set output "contribution_graph.png"
# インプットのデリミタを指定(デフォルトはスペース)
set datafile separator "\t"
# 境界線のスタイルを指定
set style fill solid border lc rgb "#00FA9A"

# ラベルとフォントを指定
set xlabel 'Contributions'
set ylabel 'Users'
set font "DejaVuSansMono,14"

# 指定ファイルのデータを元にグラフをプロット
plot "contribution_stat.dat" using 0:2:xtic(1) with boxes lw 2 lc rgb "#00FA9A" notitle

$ gnuplot -c contribution_stat.plt
```

できました。

![out.png](https://qiita-image-store.s3.amazonaws.com/0/45253/d403a6d7-5696-49c1-3308-96628dd969cf.png)

ううむ...。
なにはともあれ具体的な数値にすると以下となります。

|Contribution数|ユーザ数|比率|
|:---:|:---:|:---:|
|なし|2247|1.11846%|
|0|169576|84.4073%|
|1-|10701|5.32648%|
|10-|11985|5.9656%|
|100-|5516|2.74562%|
|1000-|851|0.42359%|
|10000-|26|0.0129416%|

このように、全体の1%が凍結アカウント、 **84%がContribution数0** のようでした。
なのでQiitaのContributionが1以上ある人は「 **俺、Qiitaの上位15%なんだよね...(遠い目)** 」って言う権利があります！

ちなみに凍結アカウントを除いた全アカウントにおいては、

|有効アカウント数|総Contribution|平均Contribution|
|:---:|:---:|:---:|
|198,655|4,560,820|22.9585|

であり、さらにContribution数が1以上のアカウントをアクティブアカウントとして区別すると、

|アクティブアカウント数|総Contribution|平均Contribution|
|:---:|:---:|:---:|
|29,079|4,560,820|156.8424|

という結果となります。

## **ユーザ別記事数ランキング**

ここからはおまけです。20位くらいまで出してみましょう。

```bash:ユーザ別記事数ランキング
$ cat qiita_data.csv | sort -k 2nr,2 -t , | awk -F"," 'BEGIN{OFS="|"}{TOP_ITEM=substr($5,0,index($5,"):")) ; print "|"NR,"@"$1,$2,$3,TOP_ITEM"|"}' | head -n 20
```

|ランク|ユーザ名|記事数|Contribution数|Top記事|
|:---:|:---:|:---:|:---:|:---:|:---:|
|1|@7of9|5035|3906|[Qiita &gt; 「いいね」機能についての要望](https://qiita.com/7of9/items/33dad67c522ebf1ff0a5)|
|2|@tukiyo3|1555|9301|[たくさんあるオープンソースライセンスのそれぞれの特徴のまとめ](https://qiita.com/tukiyo3/items/58b8b3f51e9dc8e96886)|
|3|@tbpgr|728|7240|[Markdown記法 サンプル集](https://qiita.com/tbpgr/items/989c6badefff69377da7)|
|4|@suin|697|22531|[【まとめ】これ知らないプログラマって損してんなって思う汎用的なツール 100超](https://qiita.com/suin/items/f570f057a0ff927b47dc)|
|5|@ohisama@github|508|399|[ウィルスと闘ってみた。](https://qiita.com/ohisama@github/items/7ebabaacdc80f789c45f)|
|6|@chen7897499|457|64|[rails devise](https://qiita.com/chen7897499/items/ff5b4589641d8f75ebae)|
|7|@tcsh|383|1231|[[JAWS-UG CLI] ハンズオン一覧](https://qiita.com/tcsh/items/b55eee599ae2c8806e4f)|
|8|@snaka|375|3096|[rails console の tips ](https://qiita.com/snaka/items/eeb5dee96e44fca54a2e)|
|9|@edo_m18|372|12634|[WebのUIテスト自動化 - Seleniumを使ってみる](https://qiita.com/edo_m18/items/ba7d8a95818e9c0552d9)|
|10|@hshimo|307|10021|[プログラマが独立・起業する時によくするミスと対策 まとめ](https://qiita.com/hshimo/items/776e3ca62be51c3bdc89)|
|11|@ironsand|292|2357|[`git push -u` オプションの意味](https://qiita.com/ironsand/items/6c301fef730d53f35bc3)|
|12|@masato|273|2455|[React入門 - Part2: Browserify/Reactify/Gulpを使う](https://qiita.com/masato/items/35b0900e3a7282b33bf8)|
|13|@cielavenir|272|591|[El Capitan移行メモ](https://qiita.com/cielavenir/items/ff4f3712c7790227d030)|
|14|@n0bisuke|266|6583|[3行のソースコードを入れるだけで機械学習できると噂のindicoをNode.jsで使って機械学習入門してみ る](https://qiita.com/n0bisuke/items/868b43411078bc2018fb)|
|15|@pugiemonn|265|5144|[こんなHTMLとCSSのコーディング規約で書きたい](https://qiita.com/pugiemonn/items/964203782e1fcb3d02c3)|
|16|@jkr_2255|263|2921|[セッション管理の要注意点](https://qiita.com/jkr_2255/items/075d1d518ae7a98141b3)|
|17|@Nabetani|263|953|[C++ の、スマートだと思う人がいるかもしれないコードの書き方12選のつもりが6個ぐらいで断念](https://qiita.com/Nabetani/items/9d0fa9e750310d1be24e)|
|18|@ngyuki|258|4003|[AngularJS でログインのフローを作る](https://qiita.com/ngyuki/items/ed224d6b1f65ec4e0055)|
|19|@YumaInaura|258|1004|[拝啓 本当は Qiita を書きたいのに、まだ迷っているあなたへ。](https://qiita.com/YumaInaura/items/4d2c602d59c62daa9344)|
|20|@mpyw|257|17052|[PHPでデータベースに接続するときのまとめ](https://qiita.com/mpyw/items/b00b72c5c95aac573b71)|

なんか、すごいですね。
@7of9 さんが異次元すぎる。およそ上位10人を足しても1人分な感じ。

## **ユーザ別フォロワー数ランキング**

さっきのシェル芸で指定していたカラムを1種類ずらすだけ。

```bash:ユーザ別フォロワー数ランキング
$ cat qiita_data.csv | sort -k 4nr,4 -t , | awk -F"," 'BEGIN{OFS="|"}{TOP_ITEM=substr($5,0,index($5,"):")) ; print "|"NR,"@"$1,$4,$3,TOP_ITEM"|"}' | head -n 20
```

|ランク|ユーザ名|フォロワー数|Contribution数|Top記事|
|:---:|:---:|:---:|:---:|:---:|:---:|
|1|@hirokidaichi|2148|33183|[ペアプログラミングして気がついた新人プログラマの成長を阻害する悪習](https://qiita.com/hirokidaichi/items/27c757d92b6915e8ecf7)|
|2|@jnchito|1973|33833|[モデルやメソッドに名前を付けるときは英語の品詞に気をつけよう](https://qiita.com/jnchito/items/459d58ba652bf4763820)|
|3|@taguchi|1885|0||
|4|@dankogai|1828|2891|[Swiftで面倒なJSONの取り扱いをさらに10倍便利にするclass JSON ](https://qiita.com/dankogai/items/e3d9882f4d25bc44cc03)|
|5|@mizchi|1777|17591|[春からはじめるモダンJavaScript / ES2015](https://qiita.com/mizchi/items/3bbb3f466a3b5011b509)|
|6|@yukihiro_matz|1604|104|[２４時間一人mrubyハッカソン](https://qiita.com/yukihiro_matz/items/c4f65288f96340a0808b)|
|7|@supermomonga|1594|812|[PHPとしても実行できるRubyの書きかた](https://qiita.com/supermomonga/items/79d599b4ed8b385870b0)|
|8|@icoxfog417|1434|27896|[Pythonを書き始める前に見るべきTips](https://qiita.com/icoxfog417/items/e8f97a6acad07903b5b0)|
|9|@mpyw|1362|17052|[PHPでデータベースに接続するときのまとめ](https://qiita.com/mpyw/items/b00b72c5c95aac573b71)|
|10|@shu223|1322|19843|[ディープラーニングの有名ライブラリ5種を最短距離で試す半日コース（TensorFlow, Chainer, Caffe, DeepDream, 画風変換）](https://qiita.com/shu223/items/a4fc17eb3356a6068553)|
|11|@kenmatsu4|1133|9990|[【機械学習】ディープラーニング フレームワークChainerを試しながら解説してみる。](https://qiita.com/kenmatsu4/items/7b8d24d4c5144a686412)|
|12|@hyuki|1109|157|[Vimで、文字列を別のところに「持って行って置換する」効率的な方法は？](https://qiita.com/hyuki/items/00c6aa71f299e9ce17e6)|
|13|@mattn|1109|2318|[本物の golang を... 本物の Gopher を、お見せしますよ。](https://qiita.com/mattn/items/b7889e3c036b408ae8bd)|
|14|@naoya@github|1090|3127|[React Native ファーストインプレッション](https://qiita.com/naoya@github/items/ecda4d3089902dcbea53)|
|15|@kensuu|1033|0||
|16|@joker1007|1013|9539|[てめえらのRailsはオブジェクト指向じゃねえ！まずはCallbackクラス、Validatorクラスを活用しろ ！](https://qiita.com/joker1007/items/2a03500017766bdb0234)|
|17|@masuidrive|985|3230|[OSXでDockerを超高速化するdinghy](https://qiita.com/masuidrive/items/d71ee1881fffb6ad098f)|
|18|@kazunori279|981|11636|[Cloud Vision APIの凄さを伝えるべくRasPi botとビデオを作った話](https://qiita.com/kazunori279/items/768c7fdf96cdf45a9d16)|
|19|@vvakame|945|7634|[Gradle入門](https://qiita.com/vvakame/items/83366fbfa47562fafbf4)|
|20|@Qiita|929|7385|[Markdown記法 チートシート](https://qiita.com/Qiita/items/c686397e4a0f4f11683d)|

概ねContributionの数に連動するフォロワー数になるのかなと思っていたらずいぶん違いますね。
普通にミスったかと思いましたが、 **Contributionが0でもフォロワー1000以上の人がいる** なんて想像もしませんでした。すごい。

ちょっと面白かったので、 **Contribution数とフォロワー数で可視化** してみます。

```bash:Contributionとフォロワー数のデータ
$ cat qiita_data.csv | sort -k 4nr,4 -t , | cut -d , -f 3,4 | head -n 100 | tr "," "\t"
33183   2148
33833   1973
0       1885
2891    1828
17591   1777
104     1604
812     1594
27896   1434
17052   1362
19843   1322
(略)
```

フォロワー数上位100アカウントをこういう形式で `follower_stat.dat` に取って、

```bash:Contributions×Followersグラフの生成
$ cat follower_stat.plt
# png形式で出力
set terminal pngcairo
# 出力パス&ファイル名を指定
set output "/follower_stat.png"
# インプットのデリミタを指定(デフォルトはスペース)
set datafile separator "\t"

# ラベルとフォントを指定
set xlabel 'Contributions'
set ylabel 'Followers'
set font "DejaVuSansMono,14"

# 指定データに対する近似直線を計算
fit a*x+b "follower_stat.dat" via a,b
# 指定データを用いてグラフ(データ点と近似直線)をプロット
plot "follower_stat.dat" ps 1 pt 7 lc rgb "#00FA9A" notitle, a*x+b lw 2 lc rgb "#6495ED" title sprintf("%0.2fx+%0.2f",a,b)

$ gnuplot -c follower_stat.plt
```

として完成です。地味に近似曲線を入れています。

![follower_stat.png](https://qiita-image-store.s3.amazonaws.com/0/45253/2047b268-7e83-307a-d846-b4a374ce4c15.png)

上位100アカウントで取っているため左下が空いていますが、大局的な見え方は上位100アカウントで十分そうでした。
(これ以上増やしても左下に点が集まるばかりで散らばりの印象はほぼ変わりません)

グラフ上にも書いてありますが、上位100アカウントに対する近似直線は **0.02x + 517.68** となるようです。gnuplotの万能さがやばい。
近似直線と比べてみると、上側で突出している特異な点がよりわかりやすくなりますね。

散らばりのイメージ自体は上の通りですが、近似直線の切片が大きく出ているように、やはり下位を評価対象から外すのはよくありません。
改めてContribution数が1以上のアクティブアカウントにおけるグラフを生成してみましょう。

![follower_stat.png](https://qiita-image-store.s3.amazonaws.com/0/45253/95eb3a50-9d9d-80ef-94c0-3f4b478f3f5f.png)

やはり左下に点が集中します。
が、近似直線のもっともらしさは上がったのではないでしょうか。

僕自身は現在 6767 Contributionに対して、フォロワー数が171ですので、近似直線の下側に位置するようです。
近似直線の真上にくる場合、フォロワー数およそ342となるContributionですので、ちょうど半分くらいのフォロワーしかいない計算です。
近似直線を境として、その上下でどういう性質に差があるのかは考えてみたいですね。

# **記事別分析**

![family_shinbun.png](https://qiita-image-store.s3.amazonaws.com/0/45253/cc63e77a-37d7-236b-f903-ee84dd214f3c.png)

それでは最後に記事別にみてみましょう。

## **総記事数**

Qiitaユーザ20万に対して記事は一体どれくらいあるのでしょうか。
1人で1000記事書いている人もいるくらいですからもしかすると...。

```bash
$ cat qiita_data.csv | awk -F"," 'BEGIN{SUM=0}{SUM+=$2}END{print SUM}'
260428
```
おやおやといった感じですね。1アカウントあたり **1.29** です。
しかしこちらも0記事のアカウントが多くあると推測されるため、分布をみてみましょう。
gnuplotのスクリプトはContribution分布のときとほぼ変わらないので折りたたんでおきます。

<details><summary>item_stat.plt</summary><div>

```bash
# png形式で出力
set terminal pngcairo
# 出力パス&ファイル名を指定
set output "item_stat.png"
# インプットのデリミタを指定(デフォルトはスペース)
set datafile separator "\t"
# 境界線のスタイルを指定
set style fill solid border lc rgb "#00FA9A"

# ラベルとフォントを指定
set xlabel 'Items'
set ylabel 'Users'
set font "DejaVuSansMono,14"

# 指定ファイルのデータを元にグラフをプロット
plot "item_stat.dat" using 0:2:xtic(1) with boxes lw 2 lc rgb "#00FA9A" notitle
```
</div></details>

![item_stat.png](https://qiita-image-store.s3.amazonaws.com/0/45253/eab99b24-8847-3c10-0cbc-3d9aab44fe1e.png)

|記事数|ユーザ数|比率|
|:---:|:---:|:---:|
|なし|2247|1.11846%|
|0|168427|83.8354%|
|1-|23553|11.7236%|
|10-|6496|3.23342%|
|100-|177|0.0881027%|
|1000-|2|0.00099551%|

こちらもContribution同様、約85%の方が記事数0のようです。
1つ以上記事を書いている人(30,228)に絞れば、 **平均記事数8.6155** となりました。

## **記事別いいねランキング**

意外となかった記事のランキング。
でも確かに上位のものは大体見たことありますね。

|ランク|いいね数|記事|
|:---:|:---:|:---:|
|1|6106|[ロシアの天才ハッカーによる【新人エンジニアサバイバルガイド】](https://qiita.com/jacksuzuki/items/b2fa6b44962e73a53d08)|
|2|5937|[Markdown記法 チートシート](https://qiita.com/Qiita/items/c686397e4a0f4f11683d)|
|3|5637|[非デザイナーエンジニアが一人でWebサービスを作るときに便利なツール32選](https://qiita.com/okappy/items/119e31cae9aa9bd9da6d)|
|4|5041|[ペアプログラミングして気がついた新人プログラマの成長を阻害する悪習](https://qiita.com/hirokidaichi/items/27c757d92b6915e8ecf7)|
|5|4707|[うまくメソッド名を付けるための参考情報](https://qiita.com/KeithYokoma/items/2193cf79ba76563e3db6)|
|6|4542|[Gitでやらかした時に使える19個の奥義](https://qiita.com/muran001/items/dea2bbbaea1260098051)|
|7|4514|[数学を避けてきた社会人プログラマが機械学習の勉強を始める際の最短経路](https://qiita.com/daxanya1/items/218f2e3b922142550ef9)|
|8|4328|[【まとめ】これ知らないプログラマって損してんなって思う汎用的なツール 100超](https://qiita.com/suin/items/f570f057a0ff927b47dc)|
|9|4169|[旧石器時代のJavaScriptを書いてる各位に告ぐ、現代的なJavaScript超入門 Section1 ～すぐにでも現代っぽく出来るワンポイントまとめ～](https://qiita.com/gaogao_9/items/ec2b867d6941173fd0b1)|
|10|4073|[もう保守されない画面遷移図は嫌なので、UI Flow図を簡単にマークダウンぽく書くエディタ作った](https://qiita.com/hirokidaichi/items/ff54a968bdd7bcc50d42)|
|11|3688|[新人プログラマに知っておいてもらいたい人類がオブジェクト指向を手に入れるまでの軌跡](https://qiita.com/hirokidaichi/items/591ad96ab12938878fe1)|
|12|3568|[インフラエンジニアとしてよく使うコマンド集](https://qiita.com/sion_cojp/items/04a2aa76a1021fe77079)|
|13|3491|[初心者向け、「上手い」シェルスクリプトの書き方メモ](https://qiita.com/m-yamashita/items/889c116b92dc0bf4ea7d)|
|14|3368|[ネイティブと働いて分かった英語コミットメッセージの頻出動詞10つ](https://qiita.com/gogotanaka/items/b65e1b081fa976e5d754)|
|15|3141|[特にプログラマーでもデータサイエンティストで ないけど、Tensorflowを1ヶ月触ったので超分かりやすく解説](https://qiita.com/tawago/items/c977c79b76c5979874e8)|
|16|3098|[コードを書く際の指針として見返すサイトまとめ](https://qiita.com/kenichi_cc/items/c3ecca7b7d5fc5c6bf2e)|
|17|3054|[そこそこセキュアなlinuxサーバーを作る](https://qiita.com/cocuh/items/e7c305ccffb6841d109c)|
|18|3018|[何かのときにすっと出したい、プログラミングに関する法則・原則一覧](https://qiita.com/hirokidaichi/items/d6c473d8011bd9330e63)|
|19|2986|[翻訳: WebAPI 設計のベストプラクティス](https://qiita.com/mserizawa/items/b833e407d89abd21ee72)|
|20|2951|[2016年 独りで新規WEBサービスを開発・運用した際の知見](https://qiita.com/haminiku/items/711cbdb894d1d6839e3e)|
|21|2891|[Pythonを書き始める前に見るべきTips](https://qiita.com/icoxfog417/items/e8f97a6acad07903b5b0)|
|22|2828|[プログラミングでよく使う英単語のまとめ【随時更新】](https://qiita.com/Ted-HM/items/7dde25dcffae4cdc7923)|
|23|2781|[インフラエンジニアじゃなくても押さえておきたいSSHの基礎知識](https://qiita.com/tag1216/items/5d06bad7468f731f590e)|
|24|2748|[Reactを使うとなぜjQueryが要らなくなるのか](https://qiita.com/naruto/items/fdb61bc743395f8d8faf)|
|25|2704|[モデルやメソッドに名前を付けるときは英語の品詞に気をつけよう](https://qiita.com/jnchito/items/459d58ba652bf4763820)|
|26|2704|[Vim幼稚園からVim小学校へ](https://qiita.com/hachi8833/items/7beeee825c11f7437f54)|
|27|2696|[オブジェクト指向と10年戦ってわかったこと](https://qiita.com/tutinoco/items/6952b01e5fc38914ec4e)|
|28|2669|[Gitのコミットメッセージの書き方](https://qiita.com/itosho/items/9565c6ad2ffc24c09364)|
|29|2585|[エンジニアなら知っておきたい、絵で見てわかるセキュア通信の基本](https://qiita.com/t_nakayama0714/items/83ac0b12ced9e7083927)|
|30|2581|[誰も教えてくれなかったMySQLの障害解析方法](https://qiita.com/muran001/items/14f19959d4723ffc29cc)|
|31|2578|[プログラマが独立・起業する時によくするミスと対策 まとめ](https://qiita.com/hshimo/items/776e3ca62be51c3bdc89)|
|32|2571|[英語コミットコメントに使えるオシャレフレーズ集](https://qiita.com/ken_c_lo/items/4cb49f0fb74e8778804d)|
|33|2554|[Linux開発環境の基礎知識](https://qiita.com/0xfffffff7/items/028ff8c920a6a8c67dc5)|
|34|2492|[画像処理の数式を見て石になった時のための、金の針](https://qiita.com/icoxfog417/items/adbbf445d357c924b8fc)|
|35|2466|[最近の行儀のよい JavaScript の書き方](https://qiita.com/kaiinui/items/22a75d2adc56a40da7b7)|
|36|2425|[GitHubで使われている実用英語コメント集](https://qiita.com/shikichee/items/a5f922a3ef3aa58a1839)|
|37|2411|[不安とストレスから解放される見積りとスケジュール方法](https://qiita.com/hirokidaichi/items/5a204a57a200569f755d)|
|38|2381|[中上級者になるためのJavaScript【知識編】](https://qiita.com/kenju/items/c7fad62a12cc2809b507)|
|39|2339|[[初心者向け] RubyやRailsでリファクタリングに使えそうなイディオムとか便利メソッドとか](https://qiita.com/jnchito/items/dedb3b889ab226933ccf)|
|40|2289|[日本の行政機関等が公開しているAPIについてのまとめ（2016年8月17日暫定版。随時更新）](https://qiita.com/kimuraya/items/3cc6c84bf6eac30851f1)|
|41|2284|[エンジニアで稼ぐために大切な１９のコト](https://qiita.com/kazukichi/items/7379b75fba2f90d3cf45)|
|42|2282|[脱初心者を目指すなら知っておきたい便利なVimコマンド25選 (Vimmerレベル診断付き)](https://qiita.com/jnchito/items/57ffda5712636a9a1e62)|
|43|2278|[httpsだからというだけで安全？調べたら怖くなってきたSSLの話!？](https://qiita.com/kuni-nakaji/items/5118b23bf2ea44fed96e)|
|44|2261|[30分で出来る、JavaScript (Electron) でデスクトップアプリを作って配布するまで](https://qiita.com/nyanchu/items/15d514d9b9f87e5c0a29)|
|45|2247|[質問は恥ではないし役に立つ](https://qiita.com/seki_uk/items/4001423b3cd3db0dada7)|
|46|2179|[You Don&#39;t Need jQuery](https://qiita.com/tatesuke/items/b9548dd484b01b139b74)|
|47|2178|[WebAPIでエラーをどう表現すべき？15のサービスを調査してみた](https://qiita.com/suin/items/f7ac4de914e9f3f35884)|
|48|2158|[VagrantとDockerについて名前しか知らなかったので試した](https://qiita.com/hidekuro/items/fc12344d36d996198e96)|
|49|2128|[クラスの命名のアンチパターン](https://qiita.com/magicant/items/8134edf969f9629fa66e)|
|50|2117|[npm とか bower とか一体何なんだよ！Javascript 界隈の文脈を理解しよう](https://qiita.com/megane42/items/2ab6ffd866c3f2fda066)|
|51|2102|[英語のコメントや issue で頻出する略語の意味 (FYI, AFAIK, ...)](https://qiita.com/uasi/items/86c3a09d17792ab62dfe)|
|52|2098|[あなたのサーバは本当に安全ですか？今もっともイケてる脆弱性検知ツールVulsを使ってみた](https://qiita.com/sadayuki-matsuno/items/0bb8bb1689425bb9a21c)|
|53|2070|[iOSでこんなアプリ,こんな機能を作りたかったらこれを見ろ！作りたいアプリに対応するクラス、フレームワーク、ラ イブラリのまとめ！](https://qiita.com/appwatcher/items/b02255026a3ee6d95142)|
|54|2068|[AWSアカウントを取得したら速攻でやっておくべき初期設定まとめ](https://qiita.com/tmknom/items/303db2d1d928db720888)|
|55|2055|[PHPでデータベースに接続するときのまとめ](https://qiita.com/mpyw/items/b00b72c5c95aac573b71)|
|56|2055|[ゼロからDeepまで学ぶ強化学習](https://qiita.com/icoxfog417/items/242439ecd1a477ece312)|
|57|2037|[データサイエンティストを目指す人のpython環境構築 2016](https://qiita.com/y__sama/items/5b62d31cb7e6ed50f02c)|
|58|2032|[最強のSSH踏み台設定](https://qiita.com/kawaz/items/a0151d3aa2b6f9c4b3b8)|
|59|1993|[「AWS is 何」を3行でまとめてみるよ](https://qiita.com/kohashi/items/1bb952313fb695f12577)|
|60|1989|[究極のIT系最新技術情報収集用Slackチーム公開 - モヒカンSlack -](https://qiita.com/kotakanbe@github/items/32cf4eb3de1741af26fb)|
|61|1978|[Electronでアプリケーションを作ってみよう](https://qiita.com/Quramy/items/a4be32769366cfe55778)|
|62|1969|[JavaScriptを読んでて「なにこれ！？」と思うけれど調べられない記法8選。](https://qiita.com/ukiuni@github/items/5f3d8620187905aea3d4)|
|63|1968|[もう逃げない。HTMLのviewportをちゃんと理解する](https://qiita.com/ryounagaoka/items/045b2808a5ed43f96607)|
|64|1968|[Go言語の初心者が見ると幸せになれる場所　#golang](https://qiita.com/tenntenn/items/0e33a4959250d1a55045)|
|65|1965|[ライセンスの選択を恐れる必要はありません](https://qiita.com/tadsan/items/99d816e78ca429093b75)|
|66|1956|[使えるRSpec入門・その1「RSpecの基本的な構文や便利な機能を理解する」](https://qiita.com/jnchito/items/42193d066bd61c740612)|
|67|1946|[Markdownテキストでシーケンス図とフローチャートを描く](https://qiita.com/ka215/items/a709665cb34c505ccf1f)|
|68|1941|[Swiftで作られたイケてるUIライブラリたち](https://qiita.com/susieyy/items/1f28531a1c58d9158896)|
|69|1939|[Javaを使うなら知っておきたい技術、フレームワーク、ライブラリ、ツールまとめ](https://qiita.com/disc99/items/727b51dbe737602a5c91)|
|70|1932|[ここ数年前から2015/5までのモダンフロントエンドを総まとめしてみた](https://qiita.com/okmttdhr/items/1caff5a36c8468779a64)|
|71|1884|[エンジニアとして成長するべく私が実践している学習方法](https://qiita.com/hachinobu/items/aedac203f42b215e6df4)|
|72|1881|[春からはじめるモダンJavaScript / ES2015](https://qiita.com/mizchi/items/3bbb3f466a3b5011b509)|
|73|1880|[2017年のフロントエンドエンジニアならこの程度は知ってて当然だよな？](https://qiita.com/rana_kualu/items/cad8dbbe5f5a1f1b3ba1)|
|74|1871|[Git・GitHubに隠された便利な機能  GitHub Cheat Sheet（日本語訳）](https://qiita.com/unbabel/items/1cf05f2a2be3d6fb3388)|
|75|1870|[プレゼンテーションに使う画像の探し方](https://qiita.com/TAKAKING22/items/20c006206d2ce23a5608)|
|76|1858|[読んで良かった基礎知識の入門書](https://qiita.com/seizans/items/3412bdaa4a70673445de)|
|77|1855|[Android開発を受注したからKotlinをガッツリ使ってみたら最高だった](https://qiita.com/omochimetaru/items/98e015b0b694dd97f323)|
|78|1841|[そろそろ真面目に、HTMLで帳票を描く話をしようか](https://qiita.com/cognitom/items/d39d5f19054c8c8fd592)|
|79|1835|[UIセンスが壊滅的なエンジニアがそれっぽいwebアプリを作るために使った無料UIライブラリをまとめておく](https://qiita.com/h-tko/items/e2a23beafed2315b56f8)|
|80|1827|[なぜ仮想DOMという概念が俺達の魂を震えさせるのか](https://qiita.com/mizchi/items/4d25bc26def1719d52e6)|
|81|1788|[初心者エンジニアにおすすめしたい「進捗どうなった？」と言われないための仕事の進め方](https://qiita.com/soyanchu/items/d1cb9785fc211941a009)|
|82|1747|[[iOS] 新言語SwiftがObjective-Cよりも良いところ](https://qiita.com/nori0620/items/cf956fea84e82ec2aee5)|
|83|1735|[iOSの開発でお気に入りのライブラリN選](https://qiita.com/u651601f/items/08500df9246a6c208241)|
|84|1731|[Gitのこれやめて！リスト](https://qiita.com/doilux/items/b5a9abd95ac91e848a5f)|
|85|1725|[ゼロから始めるJavaScript生活](https://qiita.com/takahashim/items/7838334d1451fb0a9811)|
|86|1683|[外国人が語る：英語でクラスやメソッド等の名付け方](https://qiita.com/gazayas/items/3d352d1b6ec9a225c6f6)|
|87|1679|[Naming -名前付け-](https://qiita.com/Koki_jp/items/f3d3e824f98d182d4100)|
|88|1660|[クソコードにならない為に、これだけは守って欲しい７つのこと](https://qiita.com/koitaro/items/c3720d9c3ac1e7b0590f)|
|89|1653|[【機械学習】ディープラーニング フレームワークChainerを試しながら解説してみる。](https://qiita.com/kenmatsu4/items/7b8d24d4c5144a686412)|
|90|1653|[新米エンジニアが入社して半年で読んだ・読まされた本まとめ](https://qiita.com/kenju/items/d0b6064b8807edfddbe1)|
|91|1646|[0から始めるAWS入門：概要](https://qiita.com/hiroshik1985/items/6433d5de97ac55fedfde)|
|92|1636|[デザイナーに言われた「非デザイナーが気をつけるべきデザインの4原則」](https://qiita.com/Yama-to/items/cb7f280b44a14c898418)|
|93|1630|[エンジニアのための「Sketch入門！」　1時間コース](https://qiita.com/st5757/items/663f17756d61aa8e8ea3)|
|94|1627|[アプリ開発で参考にしておきたい UI デザインパターンまとめサイトのまとめ](https://qiita.com/sho5nn/items/3a2293e3549ba698a71c)|
|95|1616|[SEO嫌いにお送りするSEO策。これでもうSEOについてしばらく考えなくて良いぜ！！](https://qiita.com/taiyop/items/050c6749fb693dae8f82)|
|96|1598|[開発フロー研修 @ Wantedly](https://qiita.com/awakia/items/c571e93e96a1ec28044f)|
|97|1598|[Webフロントエンド表示速度、最速化手法まとめ](https://qiita.com/zaru/items/51ee8a5be22b75a42927)|
|98|1591|[技術的負債とどうやって戦うか](https://qiita.com/kmszk/items/ad687e772da454e3f614)|
|99|1585|[新卒の子にどこまで勉強すれば良いですかね？と聞かれた件](https://qiita.com/daijinload/items/0ee132950087da9366df)|
|100|1584|[Dockerで即実行できる、社内・自宅向けオープンソースWebアプリ](https://qiita.com/y_hokkey/items/406b5a8c4bc15354d069)|

自分の記事の中でも **[不思議の国のSE用語](https://qiita.com/t_nakayama0714/items/478a8ed3a9ae143ad854)** が一番好きなんですけどあと一息で入りませんでしたね。惜しい。
ちなみにこの上位100位のうち、複数記事がランクインされたのが以下の方々です。うーん、レジェンド。

|ランクイン数|ユーザ名|
|:---:|:---:|
|5|@hirokidaichi|
|4|@jnchito|
|3|@icoxfog417|
|2|@suin|
|2|@muran001|
|2|@mizchi|
|2|@kenju|

### **記事別分析の問題点**

さて、出しておいてなんですが、上記の記事別分析には問題があります。
今回のデータ集めでは、ユーザ名をベースにユーザトップから各種情報を抜き出し、ついでにユーザごとのTOP5記事の情報を取得しています。
記事に関してはさすがに全データを集めるのが大変(だしサーバ負荷も相当)なので、ランキングを出せればいいやということでTOP5情報しか持たずに上記のランキングを生成しています。

が、複数記事ランキングで1つだけ気になる点があり、 @hirokidaichi さんがTOP100に5つランクインしています。
これはもしやと思い、 **[ユーザトップ](https://qiita.com/hirokidaichi)** から記事一覧を眺めていると、やはりTOP5以外でも全体のTOP100に入る記事があるではありませんか。。。
それもそのはず、個人TOP5の第5位にあたる **[不安とストレスから解放される見積りとスケジュール方法](https://qiita.com/hirokidaichi/items/5a204a57a200569f755d)** ですら、収集当時で **2411いいね** となっており、これは全体でも37位にあたります。余裕のTOP100。

なので改めて、TOP100におけるボーダーが **1584いいね** であることを念頭におけば、

- **40位: 2314いいね - [新人プログラマに知ってもらいたいメソッドを読みやすく維持するいくつかの原則](https://qiita.com/hirokidaichi/items/c9a76191216f3cc6c4b2)**
- **50位: 2157いいね - [新人プログラマに正月休み中を使って読んでみてほしい技術書をセレクトしてみた。](https://qiita.com/hirokidaichi/items/d30714f0698dcff1200f)**
- **98位: 1608いいね - [新入社員が来てメンターになれって言われたけど、どうすればいいのかという対話テクニック](https://qiita.com/hirokidaichi/items/2e8e731acfd7b6c7e02f)**

が更に入ることになり、 **TOP100へのランクイン数は8** となります。恐ろしい。

# **今回のスポンサーたち**

![money_narikin.png](https://qiita-image-store.s3.amazonaws.com/0/45253/84ac036f-7e9a-8b74-5bdf-c2db5645f1a3.png)

今回いろんな分析をするにあたり、実はそんなに多くのシェル芸パターンを使っているわけではありません。
ハタから見ると長いだけなので、今回使ったもののエッセンスだけをいくつか抜粋したいと思います。

## **ソート**

今回はランキング、それもいくつかの切り口でのランキングですから、ソートは非常に活躍しました。
今回はCSVデータを降順ソートする事がほとんどでしたので、例えば第3カラムをソートする場合だとイディオム的には

```bash:ソート
$ (なにかのデータ) | sort -t , -k 3nr,3
```

みたいなものが基本の形になります。
`-k` ではソート列の情報を表し、 `nr` が `数字(numeric)の降順(reverse)ソート` の表現にあたります。
なんで3が2回も出て来るのって疑問はありますが、実用上はそんなに気にしなくてもよいでしょう...。2回です。2回。
気になる人は `man sort` を読んでみてください。 要は「ごっちゃになるからちゃんと指定しろ」ってことです。

## **抽出**

CSVから特定カラムの情報を抽出したいときもあるでしょう。
第3カラムを抽出する場合には以下のようになります。

```bash:抽出
$ (なにかのデータ) | cut -d , -k 3
```

こちらはデリミタ指定が `-d` オプションになっているので非常に素直ですね。

## **カウント**

分布などを調べる場合には値ごとのカウントが必要になります。
カウントする値が流れてくるケースでは、

```bash:カウント
$ (なにかのデータ) | sort | uniq -c
```

というようになります。
`sort` を挟んで整列させないとカウントがおかしくなるので基本的にはこういうコマンドだと思うのがよいでしょう。

## **計算**

平均や合計など、各行の値を横断して計算したいときもあるでしょう。
そうした場合にはそろそろ `awk` が使えます。

```bash:計算
$ (なにかのデータ) | awk -F"," 'BEGIN{SUM=0}{SUM+=$1}END{print "SUM: "SUM", AVERAGE: "SUM/NR}'
```

awkの場合はデリミタ指定が `-F` です。
awkの中は言語のようになっているので、結構色んなことができます。ワンライナーでしか使わないことのほうが多いと思いますが、スクリプトファイルに外出すると途端に夢が広がるかもしれません。
ENDブロックで使っている `NR` は、参照先の行数を表す特殊変数ですが、ENDブロックの時点では最終行に達していますから、ここのNRはインプットの行数を表すものになります。そのため、 `SUM/NR` が平均として機能するわけですね。

また他にも、ソート済みストリームを整列したりするときにNRを一緒に出しておくと、それが順位の代わりになったりもして便利です。

## **整形/整列**

色々なデータをパイプで受け取れる各種コマンドでしたが、アウトプットもコマンドによって様々です。
記事にするにあたり、当然表にして出したいのですが、Markdownの表におけるデリミタは `|` であることと列の順序もいじりたかったりするため、ここを工夫しなければなりません。
そういうときにもawkが活躍してくれます。

```bash
$ (なにかのデータ) | awk -F"," 'BEGIN{OFS="|"}{print "|"$2,$1"|"}'
```

awkで複数フィールドを出力する際はデフォルトでスペースが用いられますが、 `OFS` 変数に好きなものを入れてやるとその区切りで出力してくれます。
行頭と行末には入れてくれないので自分で足しているのが少しかっこ悪く思いますが、まぁこれくらいならいいでしょう。
あとはカラムの順序を入れ替えるのも簡単でいいですね。ありがとう、awk。

# **おわりに**

![kabu.png](https://qiita-image-store.s3.amazonaws.com/0/45253/7377da26-7369-1939-e246-317b5e8a3fc4.png)

今回もデータを **取得する部分、分析する部分、可視化する部分** それぞれでシェルが大活躍してくれました。
2017年何をしたってわけでもないですが、人よりはシェルに親しんでいることもあり、昨年よりはかなりスムーズにシェルを叩いていけたような気がしました。
とはいえ、データをCSV(カンマ区切り)で集めておきながら、データ中に一部カンマが入っていたりして、分析時にかっこわるいことをしたりと苦労しました。
また来年も同じようなことをするとなれば、もう少し華麗にできるよう、データ収集から気を使っておきたいなと思いました。

あと、自分のモチベーションでgnuplotを使ったのは割と今回がはじめてに近かったのですが、これはすばらしいですね。
グラフ系って結構微調整が面倒だったりするんですが、スクリプトファイルにして直して再実行がたいへん楽。
シェルで分析してCSVにしつつ、 **Excelでぽちぽちグラフに起こすなんていう不毛なこと** をしていた自分を恥じたい気分です。

それではみなさま良いお年を。