今日2016年12月12日から、国内版Biohackathon(BH16.12)、山口県湯田温泉にて。「公共遺伝子発現データ目次AOEを使ったデータ解析事例作成」というテーマで取り組む予定。遺伝子発現データ解析で、機能アノテーションを公共DBから引っ張ってくる際にRDF化したソレが便利に使えるはずなので、それが利用できるようにするための流れと実例を作りたい。
それを始めるために統合TVのとあるエントリを見ているとバグを発見したり、AOEのためのデータ作成しようと思ったら(以下同文)。全体としては良くなっている方向と。「すみなすものは心なりけり」ということで。
今回が9回目のMishima.syk(ミシマ・エス・ワイ・ケー、三島創薬勉強会)。今回は仮想環境の上のLinuxでTensorFlow（てんさーふろー、と読むらしい)とkerasのハンズオン講習会。1runで数千万リード出るようなご時世の塩基配列データ解析では直接的に使う部分は思いつかないが、必要になったときに役に立ちそう。やった内容は、githubのmishima-syk/9に上がっている。 時間が余ったので仮想環境つながりでpitagora-galaxyの紹介がてら、来週(2016/12/15-16)の遺伝研研究会の宣伝活動もしたり。新しい参加者も増えて、知的にも人的ネットワーク的にも満足。もっと勉強しなきゃな…。
treeという、置かれているファイルやディレクトリをCUIで可視化する便利なコマンドを教えてもらったのに、忘れていたのを半月後の仕事納めの直前に思い出した。MacだとHomebrewで入れられた。 [shell] brew install -v tree [/shell]
第39回日本分子生物学会年会にて、「いかにして使えるデータベースを維持し続けるか?」というフォーラムをオーガナイズした。本来ワークショップ(今年の場合はシンポジウム)企画として提案したものの、落とされてフォーラムになったわけだが。そんなにDB、重要でないですか、このデータがものをいう研究をされている人たちばかりの学会で?そういえば2年前もワークショップ落とされて、さらにプログラム集にも載せてもらえないというひどい扱いであった。なんか、嫌われているらしい。
参加者は50人ほど。私自身はデータ流通業代表として、「DBの流通業10年目の今ー知のめぐりは果たして良くなったのか?」と題して、統合データベースプロジェクトとして始めてからちょうど10年の今にして思うことをつらつらと。
統合TV: 2007年7月から、9年5ヶ月で、1,166の動画作成
統合データベース講習会AJACS: 2008年3月から、8年9ヶ月で、約60回の講習会実施
新着論文レビュー: 2010年9月から、6年2ヶ月で、1,002の総説公開
領域融合レビュー: 2012年9月から、4年2ヶ月で、60の総説公開
という具合にこの10年間で日本語のコンテンツは着実に増やしてきた。にもかかわらず、その本務では評価されているとは言い難い現実を語らせていただいた。「評価されていない」というのは競争的資金を取るときなどにやってきたことがプラスになっていないということで、この状況を予言するかのように6年前の2010年トーゴーの日に伊藤啓さんが「ショウジョウバエ脳の神経画像データベースFlybrain: 15年の蓄積と将来への課題」と題したご講演の中で指摘されていたことである。私にしたって、DBCLSとしてやった統合DBの仕事でなく、昆虫やハダカデバネズミでの個人研究で …
要するに、ArrayExpressのデータをコピった。やった事自体、簡単そうだが、転送量が数十TByteもあると、そう簡単にいかなかった。2016年5月に英国Cambridge郊外のHinxtonにあるEuropean Bioinformatics Institute(EBI)に行って打ち合わせしてきて、8月中頃に正式に自分がやることとなり。結果として、この11月末になんとか形になり、年越さずに済んでよかっただけでなく、週末からの学会年会(分生)に間に合った。
最初は、普通にrsyncでやっていて、そのペースだと2年以上かかることがわかり、絶望に打ちしがれつつも作業を継続した。それを先方に伝え、asperaのサーバーを用意してもらい。その後も何回もやりとりして、なんとか超高速にデータ転送することが可能となった。すると今度はディスク容量が逼迫して、disk full直前で一旦止めて、とか波瀾万丈だった。
DDBJのニュースにまでしていただいたが、言われてみればDDBJとDBCLSの協力関係の賜物。一昔前なら不可能だった。
私にとっては小さな一歩だが、センターにとっては偉大な一歩だ
データベースは維持してナンボのもの。今後の継続的なactionに乞うご期待。
地震で飛び起きたSPARQLthon50の2日目。結局、ArrayExpressのmirrorは終わらず。来月のSPARQLthonへと持ち越し。それ以外のデータ収集手段についてupdateしていただき、より簡単に高速にデータを取得できる目処がついた。
久しぶりの参加。ArrayExpressのmirrorに関しても目処がついて、次期開発に向けてのちょうど良いタイミング。RDFやSPARQLの利用実例として実用的なものに発展させていければいいな。 50回目のキリ番SPARQLthonのためか、参加者が多く、annexの柏での作業スペースでの参加。仲間と議論するのは楽しいが、それだけではなく、使われるシステムとしてどう舵を取っていくかももっと議論していければと思う。
AJACSadvanced三島３でPitagora GalaxyをNGSデータ解析環境として紹介したいと考え、Pitagora Galaxy Meetup 2016-11に参加。仮想環境のダウンロードページにある仮想環境イメージのアップデートのお願いがメイン。その目的は達成できたが、どういう操作を講習としてやるかはまだこれから考える感じ。
普通のftpやrsyncでコピーするとしたら、数ヶ月単位かかるような数十Tbyteのデータを転送する必要があり、先方にAsperaを設定してもらい。ascpというコマンドラインのプログラムをネット上からググって探してダウンロードインストールして、以下のようなコマンドで実行。 [shell] ascp -p -k 1 -QT -l 1G --overwrite=diff+older hoge@xxxx:hoged/ . [/shell] タイムスタンプ保持の-pオプションと上書きルールのオプション(--overwrite=diff+older)は今回のタスク的に大事だった。
今年(2016年)の３月に急逝したLorenz Poellinger氏の追悼シンポジウム(Professor Lorenz Poellinger Memorial Symposium)で縁の深かった方々によるプレゼンテーションは、泣きそうになる一方、彼らの研究の遍歴がうかがい知れて勉強になった。
またそれに続いて行われた、普段からお世話になっている関西医大の広田さんによる「2016年アルバート・ラスカー基礎医学賞を記念してOxygen, Hypoxia and Beyond」というプレゼンテーションはこの業界の歴史がよくわかって、知らなかった知識が補完されていって大変勉強になった。しかもそのプレゼンのスライドはfigshareで共有していただいているという…。オープンにしていただいて、ありがとうございます。
Hirota, Kiichi (2016): Oxygen, Hypoxia and Beyond. figshare. https://dx.doi.org/10.6084/m9.figshare.4142166.v1 Retrieved: 11 20, Nov 05, 2016 (GMT)
去年は三島でお世話させていただいた、がんとハイポキシア研究会。今年は岐阜で。実は、2年続けての東海地方開催。今年は運営に関わる部分がない分、しっかりと勉強させていただこうと。
会場のホテルは、なんと岐阜城を長良川越しに南に臨む素晴らしい立地。しかも、温泉。さらに、酸素の研究会にはもってこいの、鉄分が多い泉質という最高のお膳立て。
自分のポスタープレゼンテーションであるが、来ていただいた人たちと話してみて、これまでに増してメタ解析の需要があるらしいことを感じた。この研究会でこれまで共同研究ベースでシェアしてきたデータを論文化して、外に出すことを決心した。ついに機が熟したようだ…。
時は今 雨が下しる 五月哉
今年度(2016年度)採択していただいた国立遺伝学研究所研究会「次世代モデル生物におけるゲノム情報利用ワークショップ」を2016年12月15,16日に開催します。非モデル生物と呼ばれてきた、次世代モデル生物を使った研究でゲノム情報を利用している、もしくはそれに役立つ研究をされている方々を呼んで、ゲノム情報を始めとした生命科学分野のデータベースを利活用した研究を盛り上げ、支援しようという会にしたいと目論んでいます。
アナウンスには明示的に書いていませんが、11年前にかずさDNA研究所で開催されました、ゲノム情報ワークショップ2005ー実戦系バイオインフォマティクス＠かずさ、の現代版になっております。実は11年前にも、2日目の午後には講習会があったのですが、今回は1日目の午前と2日目の午後の両方に講習会を配置し、さまざまなリテラシレベルに対応する体制で臨んでおります。それらの講習会とは、以下のとおり。
DDBJing講習会: DDBJ,NIG SuperComputer,Bioproject,Biosampleの紹介編 (1日目午前)
DDBJing講習会: NIG SuperComputer の利用方法 (2日目午後)
統合データベース講習会 AJACSadvanced 三島3: pitagora-galaxyを使ったデータ解析環境の構築とTrinityによる Transcriptome assembly (2日目午後)
とくに、NIG SuperComputerの利用方法って、これまで講習はなかったかと思います。それぞれ参加登録を忘れずに、奮ってご参加ください。
cell types in mammals' wordpress_id: 2863 categories:
READとFANTOMDB論文以来、なんと15年ぶりにNucleic Acids Research (NAR) Database issueに名前が入った標記の論文が掲載。
Nucl. Acids Res. (2016) doi: 10.1093/nar/gkw995 First published online: October 27, 2016
Advance accessなのでページ数は付いてないが、DOIのcitationは変わらないので、こちらで是非。 「データベースセンター」に約10年勤務していてどういうことだとお叱りを受けるかもしれません。言い訳しておきますと、日本の中のDBを使った「知のめぐり」の向上を目標として活動しており、DBの利用普及活動や日本語のコンテンツを増やすのがメインで、英語の論文出版は二の次でした。また、ここのところはNARにはWeb server issueでの論文でお世話になることが続いており(2008年のgendoo、2012年のGGRNA …
去年は参加できなかったJASPUGMだが、今年は参加。今回はとくに発表とかなく。実質アカデミックフリーになって、公式にユーザーに返り咲いてからは初めてのユーザーミーティングだった。しかしながら、そこに居る必要は、もはやない印象を今までになく受けた。いつまでも惰性で参加していてはいけない。そう感じた。製薬業界の人たちの意見交流の場として、ますます発展していって欲しい。
今週はオープンアクセスウィーク。ということで、連動企画として、2016年のSPARC Japanセミナー2回目はこのタイミングで。
今回もセミナー担当のワーキングメンバーとしてなかのひと。前回は自分自身が話したが、今回はtsudaり係ということで、ひたすらtwitter。ただし、研究会のアカウントで。ハッシュタグ#sparcjp201602でそれが見れるが、有志の方がtogetterにまとめてくれました。ありがとうございました。
札幌の定山渓にて、10/22-23の一泊二日で。研究会のお題目の通り、オモロイ生き物でさまざまな生命現象を解明しようと取り組んでいる人たちの集まりで、かなりハイレベルな議論が。 ライフワークとなりつつある遺伝子機能アノテーションの話をして、これまでモデルとされておらずDBリソースが不足している生物種ならではの話をした。研究会の最後の方だったため、それを踏まえた議論があまりできなかった印象。今後の共同研究につながるといいな。
MacOSXだとSpotlight検索が中身まで検索対象になっていて便利だが、ファイル名でのみ検索したいときがある。しかもコマンドラインで。そういう時に使っているのがlocateコマンド。 [shell] locate hoge [/shell] でhogeを(絶対)ファイルパスに含むファイルをリストしてくれる。 それでも見つからないときはfindコマンド。 [shell] find . -name index.html -print [/shell] とかやるとindex.htmlというファイルをcurrent directory以下から探してくれる。 [shell] cd / find . -name 'hoge*' -print [/shell] とするとroot directoryに移動してから、hogeからはじまるファイルがリストされる、という具合に。
今年はトーゴーの日シンポジウム(10/5-6)と1日被り、大会2日目からの参加。企業展示ならびにポスター会場がスカスカでびっくりする。別の学会と被ったから、らしいが。clinical sequenceに移行していくなか、ますますアウェー感が増した印象。公共DBの再利用よりも自分のところで出した大量のデータをいかに解析するか、そっちの方が喫緊の課題であるような。その一方で大型機器は予算の制約で買えず、某社のデータ解析サービスが赤字に耐えかねて有償化という状況。果たしてどうなっていくのやら。
今年も、10月5日ということで、「トーゴーの日」シンポジウム。今では、この1年の進捗を発表する機会となっているが、統合データベースプロジェクトが始まって早10年。論文で測ることのできない成果が出てきているとは思うが、データの大量化に伴う個人持ちのデータの解析に悩む人はむしろ増えているのではないかと。そこを改善する解決策を提案していければよいのだが。
Entomology（昆虫学）の国際学会に参加。初参加でアウェーの学会だったが、来てみると全く問題なかった。自分は、いわば系統樹を書くときのアウトグループのような存在かと思っていたが、わりとそうでもなく。
種が多い昆虫ならではなのだろうか、比較生物学がごく当たり前に行われていて、また研究の分業化がされていてRNA-seq解析などもごく普通にやられているのも本邦との温度差を感じた。やはり身近にそういうデータ解析ができて相談(もしくは共同研究)できる人がいるようにならないと。
Keynote lectureが事情により録画で流されたり、学会に来れなかった人がskypeで遠隔からプレゼンしたり、新しいタイプの発表にも衝撃を受けた。学生のプレゼンでもちゃんとgrantを明らかにしているのは、当たり前だがきっちりしている。こういうところは見倣わねば。
周りの人に自分が何者かを話していると、専門がバイオインフォマティクスの遺伝研に居るが遺伝研所属じゃないデータベース流通業という、自分の中で少々曖昧になっていた自分の立ち位置を再認識できた良い機会となった。良い刺激を受けることができたのではないかと。
日本生物工学会誌に「バイオインフォマティクスを使い尽くす秘訣教えます!」という連載が開始。2ヶ月に1回、全7回の予定。2016年1月に鹿児島大学医学部で行われた統合データベース講習会: AJACS薩摩でその会誌の編集委員の方が受講されていて、講習の合間に話したのがきっかけとなって連載する話に。引き受けたのは、掲載後すぐネット上で公開され、会員でなくても誰でも読める、というところが決め手だった。その後、先方が遺伝研にいらした際に詳細を話し合って連載の構成を決め、第1回は私による「ウェブ上に散在する情報を生命科学研究にどう役立てるか」ということで。シリーズの今後の内容に乞うご期待。
ArrayExpressのdataをrsync開始してから今日でちょうど一ヶ月。前回と変わらず、experimentディレクトリのミラーが終わらない。データ転送量的には、合計1.5Tbyteほど。もう1thread増やしてやっているものの。約44Tbyteと書かれている全体のデータを信じれば、あと2年半。対策を考えねば。
いろいろ書き散らす。2016年の計として元旦に誓ったことでもあるし。まさかこういう形で転ぶとは思っていなかったが。このやり方のほうが怠惰な自分が奮起してやり遂げるのではないかと。もちろん、本務優先ではあるが、長い目で見るとこれこそがやるべきことになるのかもしれないね。
昨日のセミナーで知った言葉だが、どうも気にかかると思ったら、やはり自分たちが果たしてきた役割をいう言葉だった。折しもそのセミナー中に、この夏にずっと待っていた研究費の結果がやってきて、次のTrailbalzerを果たすべきターゲットがまた1つ増えた。個人的には、比較的大きな山だった昨日のセミナーが終わり、達成感とともに空虚感に見舞われていたところで、ちょうどいい。次なるTrailblazerとして頑張っていこう。
前にも書いたとおり、今年度(2016年度)から国際学術情報流通基盤整備事業(SPARC Japan)のセミナー企画ワーキンググループのメンバーとして、セミナー企画に携わっている。2016年度には3回セミナーを開催することを企画しているのだが、自分はそのうちの2つを担当する、ということで第1回 SPARC Japan セミナー2016「オープンアクセスへの道」が2016年9月9日に一ツ橋の国立情報学研究所にて開催。
ということで、演者の選定から関わった。生命科学研究者の立場からOpen Access(OA)に関して話してくれる人を探せばよかったのだが、演者決定まで時間もなく、そして何よりも話してくれそうな人が思い浮かばず、結局自分で話しをすることに。実は自分も適任者の一人だったのかもとスライドを作っていて思ったり。
参加申し込みがはじまってから1週間経たないうちに満席になるなど、今回のセミナーのテーマは現在関心の高いものだったらしく。多数の方が話を聴きたいのに会場の都合で入れないという事態になり、YouTube liveで動画配信されることに。セミナー企画メンバーの担当者がtwitterでもつぶやく、という情報発信を行ったので、ハッシュタグ(#SPARCJP201601)をみてもらうと感じがわかるのではないかと。とりいそぎ、自分の発表スライドはfigshareにアップしておいた。
Bono, Hidemasa (2016): 生命科学分野における研究者の投稿先雑誌選択趣向とOAへの意味づけ. figshare.
https://dx.doi.org …ArrayExpressのdataをrsync開始してから3週間。だが、experimentディレクトリのミラーが終わらない。データ転送量的には、合計0.9Tbyteほどで、約44Tbyteと書かれている全体のデータからするとやはりまだまだ。thread数を増やしてみましたが、果たして。
今年度、申請して遺伝研研究会としての開催が決まっている「次世代モデル生物におけるゲノム情報利用ワークショップ」。それを2016年12月15-16日に遺伝研宿泊施設の会議室で開かせていただくことに決めました。ちょうど同じ日程で企画されているSPARQLthonの裏になりますが。よろしくお願いします。
single end readsのTrinityの実行がこけて、hoge.fq.readcountファイルに以下のような記述が。
Error, cannot convert fastq file to fasta since cannot recognize read orientation as /1 or /2 (instead: F)
このエラーメッセージでググると同じ目にあった人のQAが。どうも、FASTQファイルのヘッダに問題があるようで、それを書き換えてしまえば問題ない模様。このQAにはこの書き換えスクリプトまで書かれていた。 [shell] awk '{if(NR%4==3) $0=sprintf("'"+${index}%d"'",(1+i++)); print;}' hoge.fq | awk '{if(NR%4 …
かつて関わった厚生労働科学研究費補助金(2009年度〜2011年度)による高齢者のがん研究のデータがNBDCヒトデータベースより公開されたと連絡をいただく。当初は生命科学系データベースアーカイブに、と提案したのが2年前。その後、一緒にやってきた担当者が亡くなるなど紆余曲折あったものの、データ公開の日を迎えて感無量です。
ヒトデータということで、データベースアーカイブに収めるのではなく、NBDCヒトデータベースでの制限公開という形になった。それでもメタデータはいつでも誰にでも見え、公共データベースの登録番号も付いた(hum0064)。NGSデータでなく、前世代な配列解析やマイクロアレイデータが主体のデータだったが、JGA(Japanese Genotype-phenotype Archive)にもきっちり入った模様(JGAS00000000061)。
データ公開を独自にするのではなく、NBDCヒトデータベースというしっかりした仕組みを使うことが出来て、本当助かった。何かあったら連絡下さい、と先方の引き継いだ担当者に言っておいたが、結局私は一度も手を下すことなく、データを持っている先方とNBDCとのやりとりだけでデータのアーカイブが実現された。こんなところでも、統合DBの取り組みのご利益が出てきている。関係者の皆様、ありがとうございました。
トリミングしたうえでfastqcをかけてくれるソフトがこのtrim_galore。CutadaptとFastQCがすでにインストールされていることが必須(以下の使い方だと)。 singleの場合
[shell] trim_galore --fastqc --trim1 hoge.fq [/shell]
ペアエンドの場合
[shell] trim_galore --fastqc --trim1 --paired hoge_1.fq hoge_2.fq [/shell]
ArrayExpressのdataをrsync開始してから1週間。atlasディレクトリは終わったものの、残りの2つ、arrayとexperimentは終わらない。データ転送量的には、合計0.4Tbyteほどで、約44Tbyteと書かれている全体のデータからすると1/100ほど。ただ、全部ミラーしたらこの容量になるのかどうかも今のところわからず。続行する。