タグ: ビッグデータ(用語)

サンフランシスコジャイアンツがオフシーズンに獲得した大物の名, それはHadoop(?)
[筆者: Barry Eggers] 編集者注記: Barry EggersはLightspeed Venture Partnersの常務取締役で、主に情報技術のインフラ方面に力を入れている。とりわけ関心を向けているのは、クラウドコンピューティング、ビッグデータ、ストレージ、ITの消費者化、そしてネットワーキングだ。彼をTwitterでフォローするには、これで。 野球は、ほかのスポーツにも増して、記録しているデータ量が多く、管理者には、複雑な統計的処理と情報に基づく意思決定が求められる。だから、企業がビッグデータ革命の洗礼を受けている…続きを読む

CIAによるNoSQLへの投資は続く: In-Q-Telが今度はCloudantを支援
今日(米国時間10/2)、クラウドからデータベースを提供しているCloudantが、CIAなど合衆国の諜報機関が出資している非営利のVC、In-Q-Telから特注の開発を受注し、同時に投資(額非公開)も受けた、と発表した。In-Q-Telは先月にも、オープンソースのNoSQLデータベースとして知名度の高いMongoDBを抱える10genに、投資を行っている。それぞれ投資額は、100万〜300万ドルと噂されている。 今回の契約の一環としてIn-Q-Telは、Cloudantのホストサービスの利用を合衆国政府の諸機関に推奨していく。一般的…続きを読む

QuantcastがHadoopの分散ファイルシステムの独自代替製品をオープンソース化
Quantcastはインターネットのオーディエンスの計測とターゲティングをサービスしている企業だが、Apache Hadoopと同社独自の自家製ファイルシステムQuantcast File System(QFS)を使って毎日20ペタバイトあまりのデータを処理している。同社は今日(米国時間9/27)、その技術をApacheライセンスによるオープンソースとして一般公開した。今それは、GitHub上にある。 HadoopのデフォルトのファイルシステムはHadoop Distributed File System(HDFS)と呼ばれる。CEO…続きを読む

Webホスティングサービスのリビューはクソだった, Review Signalが状況の改善を目指す
Webホスティングサービスのリビューを参考のために読んだことある? だいたいどれも、次の二つのうちのどっちかだよね: A)不確かな個人的経験、B)アフィリエイトねらいのスパム。だから、本当に評判の良いホストを見つけるための、参考にはならない。 人気の高いフォーラムWeb Hosting TalkのモデレータだったKevin Ohashiは、この状態を変えたいと思った。Ohashiはかつて、修士論文で感情分析について書いたことがあるので、ホストに対する満足度を知るにはTwitterを使うべきではないか、と考えた。そして、彼のReview…続きを読む

超ビッグ・データ―Facebookは毎日25億件のコンテンツ、500TBのデータを処理中
今日(米国時間8/22)、Facebookは本社に少数のジャーナリストを招いて同社が処理するビッグデータの実態について興味ある数字を明かした。たとえば、Facebookのシステムは毎日25億件のコンテンツ、500TB以上のデータを処理しているという。また「いいね!」は毎日27億回、アップロードされる写真も毎日3億枚で、30分ごとに105TBのデータがスキャンされるという。またPrismというプロジェクトも紹介された。 こうしたビッグデータ処理の重要性について説明してくれたのはエンジニアリング担当副社長のJay Parikhだ。「ビッグ…続きを読む

ApacheがGoogleのリアルタイムビッグデータツールDremelのオープンソースクローンDrillを
Googleには、今さら言うまでもなく、大量のデータがあり、それらを扱うためのツールを数多く作ってきた。中でもとくに有力な製品として、MapReduceやGoogleFSはオープンソースのApache Hadoopを生み、BigTableはApache HBaseを孵(かえ)した。 でも、それで終わりではない。同社はその後もビッグデータを処理するためのツールを作り続け、それらに関する論文やドキュメントを次々と公開してきた。中でもDremelは、GoogleFSとBigTableに保存されている巨大なデータ集合のクェリを高速化する。Ha…続きを読む

Big Dataがもたらしているデータルネッサンス–これからはデータが無限におもしろい
編集者注記: Big Data〔参考日本語ページ〕は、クレジットカードや電話の利用記録、あるいは金融業界の業務データとして、実は相当前からあるものだ。AT&TやVisa、Bank of America、Ebay、Google、Amazonなどの企業は、膨大なデータベースをデータマイニングして企業競争に勝ち抜こうとしている。しかし最近では、Big Dataが小さなスタートアップにも侵入してきた。Webサービスやクラウドコンピューティングは、Big Dataをあらゆるところに生み出す。しかし、一体何が、このBig Data現象の本当の動因…続きを読む


