DBCLS

Publications referring to NGS data に新データの追加

http://sra.dbcls.jp/cgi-bin/publication.cgiに新しくPubMedと次世代シークエンサ(NGS)のデータIDの対応を追加しました.今回追加新たに追加したものは,PubMedのMeSHで"High-Throughput Nucleotide Sequencing"が付いているものです.6月22日に25件ほど追…

Journal サイトから論文を取得

PubMed Central(PMC)では論文がfreeで公開されていますが,Entrez Utilities 経由ではxml形式で論文が利用できない論文があります.(Webブラウザであれば,freeで論文を見る事はできます.) このxml形式で利用できない論文数がかなりあるため,これらの論…

XMLで取得できない論文

現在,PubMed Central(PMC)から論文を取得して解析しています.PMCに登録されている論文は全文利用できるのですが,登録されている論文の中にはXML形式でファイルを取得できない論文があります.(参考:放牧27日目:this article does not allow downloadin…

敵を知る(10月第1週の勤務)

論文に書かれている塩基配列を抽出し,論文をゲノム配列にマッピングする事で,ゲノム配列の特定箇所について書かれた論文リストを作成する事を行っています. これには先行研究http://text2genome.smith.man.ac.uk/about.cgiがあります.今週はこのText2Gen…

今後の目標

9月末頃から活動内容が変わっているので,今後行っていきたい事をまとめました. 目標 論文中に現れる核酸塩基配列(ATGCUなどの文字列)をゲノム配列にマッピングし,「ゲノム配列のこの部分配列に関する論文リスト」を作成する事を目標としています.最終的…

これまでの活動のまとめ(9月第1週の勤務)

これまで行ってきた事が乱雑になっていたので,結果をまとめてみる. 目的 次世代シークエンサ(データベースSRA)の論文とそのSRAの実験IDを対応づける事.ただ,SRAが出来る以前は次世代シークエンサの実験結果がGEOに登録されていたので,SRAとGEOの両方を…

8月第2週の勤務

今週行った事 1.illlumina,http://www.454.com/publications-and-resources/all-publications.aspの文献リストから実験IDを抽出し,GEOのIDをSRAのIDに変換. 2.SRAのIDを抽出できたPubMedの論文から,meshが現れる頻度を求める. 1. GEO -> SRAの変換 実験…

8月第1週の勤務

目標:PubMedの論文と,書かれている次世代シーケンサーの実験ID(SRA)の対応を取りたい. 今週やったこと 1. 論文が出た時にはSRAのデータベースがなく,GEOのIDが書かれているものがあるかも.論文から抽出したGEOのIDを,SRAに変換してみる. 2. 論文検索…

GEOのデータからGEOのIDとPubMedのIDを抽出

今までの「PubMedの論文データ → 実験データID」の逆で、「実験データ(データベース:GEO) → PubMedの論文データID」を抽出しました。IDはメタデータの以下の文字列に着目しました。 ・GEOのID !Series_geo_accession = xxxx xxxxがGEOのID ・PubMedのID !Se…

PubMedから外部データベースのIDを抽出

今回の変更点 (1) PubMedのXMLに書かれているPubMed Central (PMC)のIDには、今後追加される予定のIDも書かれています。これらを区別できるようにしました。 (2) 論文から抽出するIDを、外部データベースのID全てを抽出する様に変更しました。 (1) 今後PMCに…

PubMedのXMLからID抽出

PubMedIDから論文中に含まれている外部DBのID抽出の続き。 htmlファイルから抽出したIDの修正 前回http://www.illuminakk.co.jp/support/literature_GA1.shtmlから抽出したIDに取り漏らしがあったので修正しました。前回の htmlファイル中の "http://www.ncb…

PubMedのXMLから情報抽出(2)

先週のPubMedのXMLから情報抽出を、JavaのXml構造を扱うDOM(Document Object Model)を使って書き直しました。 "/PubmedArticleSet/PubmedArticle/MedlineCitation/PMID/text()" という形式で直接指定できるXPathの存在に気づいたのが実装後だったため、NodeL…

PubMedのXMLから情報抽出

PubMedのXMLファイルから、以下を抽出して出力するプログラムを作成しました。括弧の中は抽出に使用したタグです。 PubMedID () タイトル () 雑誌名の略称 (タグの) 出版された日付 (タグの中の、、、) 外部データベースへのリンク () PubMedCentralのID、Pu…

PubMedのアブストラクトの取得

NCBIのeUtils経由で、PubMedにクエリを投げてxmlを取得しました。 eUtils PubMedやGenBankなどのデータベースから、検索結果が膨大になるxmlを取得する場合、NCBIに何度もアクセスすることになります。そのような場合に利用するサイトがeUtilsです。 作業 Pu…

MeCab単語の追加

先日のRMeCabのインストールに引き続き、MeCabの辞書へ単語の追加をしました。http://mecab.sourceforge.net/dic.htmlを参考にしています。 システム辞書とユーザ辞書、二つの追加方法がありますが、今回はユーザ辞書への追加をします。 disease.csvというフ…

RMeCabのインストール

RMeCabのインストールをしました。そのログです。 Rのバージョンアップ Rのバージョンが古かったので、2.10.1にアップデートという名の再インストールです。古いバージョンのアンインストールはしなかったはず。 http://cran.md.tsukuba.ac.jp/からダウンロ…