第1回 SPARC Japan セミナー2016「オープンアクセスへの道」
Written by bonohu in misc on 金 09 9月 2016.
前にも書いたとおり、今年度(2016年度)から国際学術情報流通基盤整備事業(SPARC Japan)のセミナー企画ワーキンググループのメン …
Category: misc
3 weeks past rsyncing ArrayExpress data
Written by bonohu in misc on 金 02 9月 2016.
ArrayExpressのdataをrsync開始してから3週間。だが、experimentディレクトリのミラーが終わらない。データ転送量的には、合計0.9Tbyteほどで、約44Tbyteと書かれている全体のデータからするとやはりまだまだ。thread数を増やしてみましたが、果たして。
遺伝研研究会「次世代モデル生物におけるゲノム情報利用ワークショップ」やります
Written by bonohu in misc on 水 31 8月 2016.
今年度、申請して遺伝研研究会としての開催が決まっている「次世代モデル生物におけるゲノム情報利用ワークショ …
Trinityがコケる
Written by bonohu in misc on 月 29 8月 2016.
single end readsのTrinityの実行がこけて、hoge.fq.readcountファイルに以下のような記述が。
Error, cannot convert fastq file to fasta since cannot recognize read orientation as /1 or /2 (instead: F)
このエラーメッセージでググると同じ目にあった人のQAが …
NBDCヒトデータベースとJGAに感謝
Written by bonohu in misc on 金 26 8月 2016.
かつて関わった厚生労働科学研究費補助金(2009年度〜2011年度)による高齢者のがん研究のデータがNBDCヒトデータベースより公開されたと連絡をいただく。当初は生 …
trim_galoreでトリミングとQC
Written by bonohu in misc on 火 23 8月 2016.
トリミングしたうえでfastqcをかけてくれるソフトがこのtrim_galore。CutadaptとFastQCがすでにインストールされていることが必須(以下の使い方だと)。 singleの場合
[shell] trim_galore --fastqc --trim1 hoge.fq [/shell]
ペアエンドの場合
[shell] trim_galore --fastqc --trim1 --paired hoge_1.fq hoge_2.fq [/shell]
1 week past rsyncing ArrayExpress data
Written by bonohu in misc on 金 19 8月 2016.
ArrayExpressのdataをrsync開始してから1週間。atlasディレクトリは終わったものの、残りの2つ、arrayとexperimentは終わらない。データ転送量的には、合計0.4Tbyteほどで、約44Tbyteと書かれている全体のデータからすると1/100ほど。ただ、全部ミラーしたらこの容量になるのかどうかも今のとこ …
Say good bye to our deer twitterer
Written by bonohu in misc on 日 14 8月 2016.
初めての山の日(8/11)、急逝した研究者仲間のtwittererの初盆に名古屋へ。同じ分野の研究者というわけでもなく、オフラインには学会オフ会に …
inodeの枯渇
Written by bonohu in misc on 土 13 8月 2016.
ストレージの容量は多くの場合ファイルサイズで問題になることが多いが、たくさんファイルを作るようなプログ …
rsync ArrayExpress data
Written by bonohu in misc on 金 12 8月 2016.
2016年8月12日日本時間午後2時頃、ArrayExpressのFTPにあるデータをミラー開始。ポイントはFTPではなく、rsyncでやっているというところ。先月のSPARQLthonで調べてわかったことを元に。プロセスがコケていないか、ディスク容量は大丈夫かをちょくちょく見張りつ …
「新米探偵、データ分析に挑む」を読んで
Written by bonohu in misc on 水 10 8月 2016.
[amazon template=thumbnail&asin=4797382309]
新米探偵本、ようやく通読。出てきたことが一度だけでなく、俵太のまとめと天羽社長の統計学指南で波状 …
TIBCO Spotfire アカデミックフリー化
Written by bonohu in misc on 火 09 8月 2016.
先日の沼津でのワークショップで伺った、嬉しいニュース。
アカデミアの方々などに無料でご利用頂けるようになりました。 TIBCO started free of charge Spotfire License. http://spotfire.tibco.com/better-world-donation-program/
本当かと思 …
bam2wig
Written by bonohu in misc on 木 28 7月 2016.
bam形式なリファレンスゲノムへのアラインメントの情報をwig形式のcoverageファイルへ変換。 実は昔もやったことがあり、ググって出てくるawkのワインライナーでなんとか凌いでいたが、今ネット検索するとbam2wigというコマンド化されたPerlスクリプトをgithubに発見。今回はこ …
'jPOST Workshop 2016 : プロテオームデータと生命科学データベース'
Written by bonohu in misc on 水 27 7月 2016.
東京白金台の北里大学薬学部にて、「ゲノムと遺伝子発現DBの現状ートランスオミクスのための基礎知識」というタイトルで、30分ほど話した。ワークショップの前座。
そのうち統合 …
SPARQLthon46 day2
Written by bonohu in misc on 火 26 7月 2016.
昨日の続き。直で職場のサーバーにsshできないのはやはり不便だ。 やはり、1日経ってもファイルリストの取得、終わっていない…。定期的にrsyncするように早くしたい。が、昼前に終わったので、実体の取得を開始 …
SPARQLthon46 day1
Written by bonohu in misc on 月 25 7月 2016.
今回はいつもと違い、DBCLSではなく新潟大学での開催ということで、RDFやSPARQLの入門的な講習会がほぼ1日開催された。こういうスタイルは新しいが、こういう形の地方行脚重要。 こちらはいつものハッカソンで …
SPARQLthon@新潟大学
Written by bonohu in misc on 日 24 7月 2016.
明日、明後日(2016/7/25-26)に、新潟大学にてSPAQRLthon開催(SPARQLthon46)。いつもの柏とは別の地域で開催することは、RDFの普及という意味で重要だと思う今日このごろ。そういった研究活動をしてい …
非モデル生物から新規モデル生物へ
Written by bonohu in misc on 土 23 7月 2016.
前職では、基礎と臨床を医学の研究をやろうということで、ノーベル賞を取った線虫(C.elegans)を使ったprogramed cell deathの研究が当時もてはやされていたこともあってそちら方面の可能性を探っていた(ちなみに、「き …
アクセッション番号のバージョン
Written by bonohu in misc on 金 22 7月 2016.
データベース(DB)、とくに塩基配列DBは公共DBに登録しないと論文が受理されないこともあって、DBのアクセッション番号(ID)に関する認知度は高いようである。しかしながら、アクセッション番号のバー …
第16回日本スポットファイアーワークショップ(創薬研究領域)
Written by bonohu in misc on 木 21 7月 2016.
沼津でのSpotfireワークショップ2日目。今日は丸一日で、午前中はトレーニングセッション、午後はPKJ社セッションとJASPUGユーザーセッション。 自分は10年を超える長年のSpotfireユーザーではあるものの、典型的なユーザーと使い方が異な …
第15回日本スポットファイアーワークショップ(創薬研究領域)
Written by bonohu in misc on 水 20 7月 2016.
今年も沼津駅北口のプラザヴェルデで開催のスポットファイアーワークショップ。2日間開催の1日目は第15回ということで、MedChem(Medicinal Chemistry)な内容。2日目は第16回目で、バイオHCS(High Content …
スポットファイアーワークショップ2016 at 沼津
Written by bonohu in misc on 火 19 7月 2016.
明日明後日、2016年7月20,21日は昨年に引き続き、沼津駅北口のプラザヴェルデにてスポットファイアーワークショップ(創薬研究領域)が開催。今年は …
'Shizuoka.py #5'
Written by bonohu in misc on 日 10 7月 2016.
- Docker
静岡県富士市吉原で開催されたShizuoka.py #5に参加してきた。第3回目から参加しているものの、自分でscratchからPythonのコードを書くことは少なく、そのリソースを利用させてもらって何かを …
新規モデル生物NGS解析にpitagora-galaxyは使えるか?
Written by bonohu in misc on 金 08 7月 2016.
pitagora-galaxy meet-up(2016/07)に飛び入り参加してきた。昨年にGalaxy Workshop Tokyo 2015に参加し、VirtualBoxを使って仮想環境でデータ解析する仕組みのチュートリアルを受けて以来。それから1年間経ってのアップデートを期待して。 ここにある手順通りに再実行。まずはバー …
統合データベース講習会AJACS安芸
Written by bonohu in misc on 木 07 7月 2016.
2016年7月5,6日に広島大学霞キャンパスでの統合データベース講習会AJACS安芸に講師として参りました。今年度、1回目。 講師としては、1日目の「遺伝子発現DBの使い方」と2日目の「ライフサイエ …
遺伝子機能予測から遺伝子機能アノテーションへの20年
Written by bonohu in misc on 土 02 7月 2016.
このブログでも紹介したカイコアノテーションパイプラインは急に思い立ってそれを開発したわけでなく、大学院 …
SayaMatcherはどうなったのか?
Written by bonohu in misc on 金 01 7月 2016.
かつて埼玉県狭山地方に勤務していた時にSayaMatcherという計算する仕組みを作って、転写因子結合配列などをゲノム配列から探しだし、それらをBED形式やらで出力し、ゲノム …
2016年前半戦終了
Written by bonohu in misc on 木 30 6月 2016.
今年も早いもので前半戦終了。出張はかなり多かったようで、外泊数がなんと合計43泊。一月に約7泊ということで、勤務日の約1/3は外勤だったという計算。どこ …
群馬大学大学院医学研究科非常勤講師
Written by bonohu in misc on 木 23 6月 2016.
「オミックス医学とバイオインフォマティクス」というお題で。やはり90分では短く、珍しく時間オーバー気味。じっくり教えるには …
2016 BioHackathon 5日目
Written by bonohu in misc on 土 18 6月 2016.
最終日。ひきつづき。そして最後にwrapアップ。今回、AOE2のデータ作成パイプラインの構築に取り組み、機械的に単純にindexとなるデータを作るところまではできた。それらの成果(スクリプト群)はgithubのAOEプロジェクトのレポジトリに。今後は重複している …
2016 BioHackathon 4日目
Written by bonohu in misc on 木 16 6月 2016.
一昨日に仕込んだArrayExpress(AE)のファイルリストの取得が終わったので、AOE1の更新を続き。もうちょっとファイルリストが高速に得られれ …
2016 BioHackathon 3日目
Written by bonohu in misc on 木 16 6月 2016.
中間発表を1時間で。午後はExcursionということで、目の前の温海岳(標高736m)にbug取りがてら山登り。意外に険しい山道だったが、珍しい蝶が採れたらしい。
2016 BioHackathon 2日目
Written by bonohu in misc on 火 14 6月 2016.
温泉インフォマティクス研究会足湯支部に入部するも、蚊と雨の襲撃により敢え無く延期。今月のAOE1の更新も進めつつ、昨日入電した裏 …
2016 BioHackathon 1日目
Written by bonohu in misc on 月 13 6月 2016.
本日6/13から6/17までBioHackathon。今回も引き続きAOE2.0に向けてhackします。メタボにならないように、今回はランチはホテルでとらない作戦で。夜にガッツリ方 …
2016 BioHackathon Symposium
Written by bonohu in misc on 日 12 6月 2016.
今年もBioHackathonは、シンポジウムからの参加。皆さん、進捗していますなあ。
2016 SPARC Japan ワーキンググループキックオフミーティング
Written by bonohu in misc on 木 09 6月 2016.
今年度(2016年度)から国際学術情報流通基盤整備事業(SPARC Japan)のセミナー企画ワーキンググループのメンバーとして関わるこ …
Homebrewと暮らす
Written by bonohu in misc on 月 06 6月 2016.
Homebrew便利だが、しばらく経つとソフトウェアがアップデートされていってローカルに持っているインデックス情報が古くなり …
localBLASTのblastdbcmdを使って配列エントリの特定の領域を取得する
Written by bonohu in misc on 木 02 6月 2016.
新規なモデル生物では、ゲノム配列が公開されていても多くの場合染色体ごとに配列が一本につながっていない。ど …
'Mishima.syk #8'
Written by bonohu in misc on 日 29 5月 2016.
今回が8回目のMishima.syk（三島創(製?)薬勉強会）。三島で開催されたSPARQLthon44の次の日に開催をはたらきかけて、異分野交流を目論んでみた。み …
Trinityで転写産物を定量する
Written by bonohu in misc on 金 27 5月 2016.
Trinityの出力結果は、転写単位ごとの塩基配列のFASTA形式ファイルだが、付属のプログラム(align_and_estimate_abundance.pl)を使うと、転写量を見積もって定量、そして出力してくれる。TrinityのウェブサイトのTrinity …
Trinity on MacOSX
Written by bonohu in misc on 月 09 5月 2016.
de novo transcriptome assemblyをするソフトウェアの定番のTrinityがhomebrewで入って動くようになりました(v2.2.0)。これまでhomebrewには入っていたものの、私の環境ではきちんのインストールできないでいました。必要なときはその都度DDBJのスパコンにお世話になっておりました。 それ …
データベースとは1
Written by bonohu in misc on 水 04 5月 2016.
昨今、インターネット上には利用可能なデータリソースが溢れている。 データベース(DB)とは、生命の持つ情報を再利用 …
圧縮したファイルで処理する
Written by bonohu in misc on 日 17 4月 2016.
NGSデータ解析の出発点は、シーケンサーやSRA (Sequence Read Archive)から取得したFASTQ形式のファイルなのは同じだろうが、これを圧縮しない(ファイル拡張子が.fqや.fastqのことが多いが、ようするにテキスト形式のフ …
行番号を付ける
Written by bonohu in misc on 月 11 4月 2016.
バイオの業界ではとくに、IDが重複していることがある。Rでの処理の場合、それでは入力が受け付けてもらえず実行できないことがよくある。そんな時には行番 …
joinコマンドの出力をタブ区切りに
Written by bonohu in misc on 水 06 4月 2016.
joinというUNIXコマンドは、2つのファイルの同じ値のある行をjoinして、一行にまとめてくれるコマンド。
join -j 1 file1 file2
でタブ区切りテキストのfile1とfile2の一番左側のカラムの値が同じ行が結合されて出力される。
このコマンドのやってくれる事 …
scikit-learnのインストール
Written by bonohu in misc on 水 30 3月 2016.
pythonの機械学習ライブラリ。ふとしたキッカケで入れてみようと、思い立ったが吉日。
pythonのバージョン3が入っていなければ、まずそれを。
[shell] brew install -v python3 [/shell]
これでインストールされるpip3を使って必要なライブラリを …
RNA-Seq実験ハンドブック
Written by bonohu in misc on 土 19 3月 2016.
RNA-Seq実験ハンドブックという本が出版されます。出版社のページによれば2016年03月23日発行予定とのこと(2016年3月発行予定に変わっていました)。「RNA-Seqはこうして誕生したーそしてデータ再利用へ」と題したコラムを書かせてもらいました。短いですが、遺伝子発現解析の歴史的な …
第60回 人工知能学会 分子生物情報研究会(SIG-MBI)
Written by bonohu in misc on 金 18 3月 2016.
続けて同じ場所で開催されたSIG-MBIにかなり久しぶりに参加。SIG-MBIの開催が第60回にもなっていたとは。続けて開催されているのは大変素晴らしい。敬意を表します …
BH15.15成果報告会と第20回オープンバイオ研究会
Written by bonohu in misc on 木 17 3月 2016.
朝からみんなでバスでJAISTに移動して成果報告会。遺伝子発現目次の進捗状況に関して報告。いつもどおり、みんなで議論して情報を共有した …
BH15.15 3日目
Written by bonohu in misc on 水 16 3月 2016.
ArrayExpressのメタデータにBioProjectがなかったので、GEO由来のエントリだけでもBioProjectIDが付けられないか模索中…。すべてのデータをスクレイピングする以外に解決法はないのか?いろいろ調べた結果、結局bioprojectのXML(bioproject.xml)から生成する …