Take Your Time

仕事や研究、コンピューターとの付き合い方

2019-01-01から1年間の記事一覧

研究分析のパイプラインを考える(振り返り1回め)

delma.hatenablog.com 書いてから2週間経ったので振り返り。 新ルール(仮) とっかかりはrmdかjupyter。 検索可能性が上がるようにproject毎にまとめる。 projectごとにレポジトリを作る 作業のおおまかな計画的なやつはreadmeを更新していく。タスク管理…

軽く倒れた。 花粉症的な鼻水、咳から、嘔吐感、最終的に悪寒、震え、微熱。 寝たら治ったが。。、

放っておくとごみみたいなインプットしかしない自分にとってアウトプットのためにインプットする機会は貴重だ。世のブロガーがよくいうアウトプットせよというのはこういうことなのか。

スクレイピングスクリプトのよくあるエラーについて

自分が遭遇するウェブクローリング・スクレイピングのエラーはたいてい、StaleElementReferenceExceptionかWebDriverException: Message: unknown error: Element is not clickable at pointあたりだ。 スクロールしないと取得できない要素だったり、画面外…

初心者のためのgit

gitはよくわからないが、自分が日常これだけ覚えてれば大丈夫というもの github flowによっている(つもり) 新たにファイルを作ったとき とにかくまずブランチを切る git pull # 最初にローカルの状態をレポジトリと同じにする git branch -b hogehoge つぎ…

分析、研究パイプラインを真面目に考える

課題感 様々な分析しごとをどうオーガナイズするかめちゃくちゃになっているのでルールを決めたい。 現状 研究 jupyter notebookかRmarkdownで実施。コードを書く前に動作を確認したいときはSQLミドルウェアも使う。 Pythonコードはgithubで管理。 最近あま…

jupyter ルール

新しいことをするときは新しくノートブックをつくる。 コードを再利用するときは新しいものに貼る importは作業の直前。重複しても可。(セルで独立して仕事ができるようにする) 日付をいれる 一度実行したセルは修正しない エラーを消さない はじめにやる…

pandas join merge concatではまったこと

pandasは便利だが、結合あたりが非常にわかりにくい。 いい感じにやっておいてほしいところが全然やってくれない。 concat: indexがビシッと揃ってる場合はこれで大丈夫。 join これが使いづらい。sqlの雰囲気でやるとハマる。近づかないほうがいいかもしれ…

結局プログラミングは時間かけるしかないという気がしてきた。 最近、システムのアーキテクチャを考えて設計図書いてからコードを書くことが多いけど、こういうのも何回も実際にものを作ってみないと書けなかった。 Python歴は1年ちょっとだが、ようやくQii…

今回の統計問題、ビッグデータ推進派にはむしろ朗報かも。サーベイデータや、その加工に問題が多いのであれば、できるだけ人手のかからない間違いの少ない方法でやるしかない

Zoteroとsugarsyncで文献管理をする

年も改まったことだし論文管理環境を再構築する。 もともとmendeley派だったが、色々トラブルが多く一度Zoteroに以降した。ただ、ZoteroとSugarsyncを並行して使っていたためおかしなことに。 丸一日格闘した結果、Zoteroの動作をようやく理解したのでメモし…

正月後やる気が出ない。寝てばっかり。と思って過去の1月の日記を見ると、割と頑張っていたようだ。歳か??

くら12年

http://www.helios-syuzo.co.jp/docs/products/kura.html ホワイトオークで熟成するという贅沢な泡盛。飲み口はウイスキーなんだけど泡盛由来のアルコールの切れ味が鋭い。後味は極めて甘い。

death wish coffee

ダークローストなのにカフェインが通常の二倍という触れ込みのコーヒー豆。 ネットで見かけて購入。 Death Wish Coffee, The World's Strongest Coffee, Whole Bean, Fair Trade, Organic, Shade Grown, 16 oz Bag出版社/メーカー: Grocerylandメディア: 食…

暇人はろくなことをしない

激務をこなしていた知り合いが育休を取った途端某SNSでくだらない社会評論を始めた。本当にくだらなく一部の人には不快で一部の人には考えの甘さ世間知らずさを見破られる彼にとって何もいいことがない活動だ。 でも社会と接点のなくなった彼は、素人社会評…