ぼうのブログ

ArrayExpressのdataをrsync開始してから今日でちょうど一ヶ月。前回と変わらず、experimentディレクトリのミラーが終わらない。データ転送量的には、合計1.5Tbyteほど。もう1thread増やしてやっているものの。約44Tbyteと書かれている全体のデータを信じれば、あと2年半。対策を考えねば。

考えていることの体系化に向けて

Written by bonohu in misc on 日 11 9月 2016.

いろいろ書き散らす。2016年の計として元旦に誓ったことでもあるし。まさかこういう形で転ぶとは思っていなかったが。この …

Trailblazer

Written by bonohu in misc on 土 10 9月 2016.

昨日のセミナーで知った言葉だが、どうも気にかかると思ったら、やはり自分たちが果たしてきた役割をいう言葉だ …

第1回 SPARC Japan セミナー2016「オープンアクセスへの道」

Written by bonohu in misc on 金 09 9月 2016.

前にも書いたとおり、今年度(2016年度)から国際学術情報流通基盤整備事業(SPARC Japan)のセミナー企画ワーキンググループのメン …

3 weeks past rsyncing ArrayExpress data

Written by bonohu in misc on 金 02 9月 2016.

ArrayExpressのdataをrsync開始してから3週間。だが、experimentディレクトリのミラーが終わらない。データ転送量的には、合計0.9Tbyteほどで、約44Tbyteと書かれている全体のデータからするとやはりまだまだ。thread数を増やしてみましたが、果たして。

遺伝研研究会「次世代モデル生物におけるゲノム情報利用ワークショップ」やります

Written by bonohu in misc on 水 31 8月 2016.

今年度、申請して遺伝研研究会としての開催が決まっている「次世代モデル生物におけるゲノム情報利用ワークショ …

Trinityがコケる

Written by bonohu in misc on 月 29 8月 2016.

single end readsのTrinityの実行がこけて、hoge.fq.readcountファイルに以下のような記述が。

Error, cannot convert fastq file to fasta since cannot recognize read orientation as /1 or /2 (instead: F)

このエラーメッセージでググると同じ目にあった人のQAが …

NBDCヒトデータベースとJGAに感謝

Written by bonohu in misc on 金 26 8月 2016.

かつて関わった厚生労働科学研究費補助金(2009年度〜2011年度)による高齢者のがん研究のデータがNBDCヒトデータベースより公開されたと連絡をいただく。当初は生 …

trim_galoreでトリミングとQC

Written by bonohu in misc on 火 23 8月 2016.

トリミングしたうえでfastqcをかけてくれるソフトがこのtrim_galore。CutadaptとFastQCがすでにインストールされていることが必須(以下の使い方だと)。 singleの場合

[shell] trim_galore --fastqc --trim1 hoge.fq [/shell]

ペアエンドの場合

[shell] trim_galore --fastqc --trim1 --paired hoge_1.fq hoge_2.fq [/shell]

1 week past rsyncing ArrayExpress data

Written by bonohu in misc on 金 19 8月 2016.

ArrayExpressのdataをrsync開始してから1週間。atlasディレクトリは終わったものの、残りの2つ、arrayとexperimentは終わらない。データ転送量的には、合計0.4Tbyteほどで、約44Tbyteと書かれている全体のデータからすると1/100ほど。ただ、全部ミラーしたらこの容量になるのかどうかも今のとこ …

Say good bye to our deer twitterer

Written by bonohu in misc on 日 14 8月 2016.

初めての山の日(8/11)、急逝した研究者仲間のtwittererの初盆に名古屋へ。同じ分野の研究者というわけでもなく、オフラインには学会オフ会に …

inodeの枯渇

Written by bonohu in misc on 土 13 8月 2016.

ストレージの容量は多くの場合ファイルサイズで問題になることが多いが、たくさんファイルを作るようなプログ …

rsync ArrayExpress data

Written by bonohu in misc on 金 12 8月 2016.

2016年8月12日日本時間午後2時頃、ArrayExpressのFTPにあるデータをミラー開始。ポイントはFTPではなく、rsyncでやっているというところ。先月のSPARQLthonで調べてわかったことを元に。プロセスがコケていないか、ディスク容量は大丈夫かをちょくちょく見張りつ …

「新米探偵、データ分析に挑む」を読んで

Written by bonohu in misc on 水 10 8月 2016.

[amazon template=thumbnail&asin=4797382309]

新米探偵本、ようやく通読。出てきたことが一度だけでなく、俵太のまとめと天羽社長の統計学指南で波状 …

TIBCO Spotfire アカデミックフリー化

Written by bonohu in misc on 火 09 8月 2016.

先日の沼津でのワークショップで伺った、嬉しいニュース。

アカデミアの方々などに無料でご利用頂けるようになりました。 TIBCO started free of charge Spotfire License. http://spotfire.tibco.com/better-world-donation-program/

本当かと思 …

bam2wig

Written by bonohu in misc on 木 28 7月 2016.

bam形式なリファレンスゲノムへのアラインメントの情報をwig形式のcoverageファイルへ変換。実は昔もやったことがあり、ググって出てくるawkのワインライナーでなんとか凌いでいたが、今ネット検索するとbam2wigというコマンド化されたPerlスクリプトをgithubに発見。今回はこ …

'jPOST Workshop 2016 : プロテオームデータと生命科学データベース'

Written by bonohu in misc on 水 27 7月 2016.

東京白金台の北里大学薬学部にて、「ゲノムと遺伝子発現DBの現状ートランスオミクスのための基礎知識」というタイトルで、30分ほど話した。ワークショップの前座。

そのうち統合 …

SPARQLthon46 day2

Written by bonohu in misc on 火 26 7月 2016.

昨日の続き。直で職場のサーバーにsshできないのはやはり不便だ。やはり、1日経ってもファイルリストの取得、終わっていない…。定期的にrsyncするように早くしたい。が、昼前に終わったので、実体の取得を開始 …

SPARQLthon46 day1

Written by bonohu in misc on 月 25 7月 2016.

今回はいつもと違い、DBCLSではなく新潟大学での開催ということで、RDFやSPARQLの入門的な講習会がほぼ1日開催された。こういうスタイルは新しいが、こういう形の地方行脚重要。こちらはいつものハッカソンで …

SPARQLthon@新潟大学

Written by bonohu in misc on 日 24 7月 2016.

明日、明後日(2016/7/25-26)に、新潟大学にてSPAQRLthon開催(SPARQLthon46)。いつもの柏とは別の地域で開催することは、RDFの普及という意味で重要だと思う今日このごろ。そういった研究活動をしてい …

非モデル生物から新規モデル生物へ

Written by bonohu in misc on 土 23 7月 2016.

前職では、基礎と臨床を医学の研究をやろうということで、ノーベル賞を取った線虫(C.elegans)を使ったprogramed cell deathの研究が当時もてはやされていたこともあってそちら方面の可能性を探っていた(ちなみに、「き …

アクセッション番号のバージョン

Written by bonohu in misc on 金 22 7月 2016.

データベース(DB)、とくに塩基配列DBは公共DBに登録しないと論文が受理されないこともあって、DBのアクセッション番号(ID)に関する認知度は高いようである。しかしながら、アクセッション番号のバー …

第16回日本スポットファイアーワークショップ(創薬研究領域)

Written by bonohu in misc on 木 21 7月 2016.

沼津でのSpotfireワークショップ2日目。今日は丸一日で、午前中はトレーニングセッション、午後はPKJ社セッションとJASPUGユーザーセッション。自分は10年を超える長年のSpotfireユーザーではあるものの、典型的なユーザーと使い方が異な …

第15回日本スポットファイアーワークショップ(創薬研究領域)

Written by bonohu in misc on 水 20 7月 2016.

今年も沼津駅北口のプラザヴェルデで開催のスポットファイアーワークショップ。2日間開催の1日目は第15回ということで、MedChem(Medicinal Chemistry)な内容。2日目は第16回目で、バイオHCS(High Content …

スポットファイアーワークショップ2016 at 沼津

Written by bonohu in misc on 火 19 7月 2016.

明日明後日、2016年7月20,21日は昨年に引き続き、沼津駅北口のプラザヴェルデにてスポットファイアーワークショップ(創薬研究領域)が開催。今年は …

'Shizuoka.py #5'

Written by bonohu in misc on 日 10 7月 2016.

- Docker

静岡県富士市吉原で開催されたShizuoka.py #5に参加してきた。第3回目から参加しているものの、自分でscratchからPythonのコードを書くことは少なく、そのリソースを利用させてもらって何かを …

新規モデル生物NGS解析にpitagora-galaxyは使えるか?

Written by bonohu in misc on 金 08 7月 2016.

pitagora-galaxy meet-up(2016/07)に飛び入り参加してきた。昨年にGalaxy Workshop Tokyo 2015に参加し、VirtualBoxを使って仮想環境でデータ解析する仕組みのチュートリアルを受けて以来。それから1年間経ってのアップデートを期待して。ここにある手順通りに再実行。まずはバー …