AVGIDEA, INC.
  • Home
    • 2020
    • 2019
  • Home
    • 2020
    • 2019
  • PRODUCTS
    • Avgidea Data Platform
    • Avgidea Messaging Service
    • PDF Generator
  • PRODUCTS
    • Avgidea Data Platform
    • Avgidea Messaging Service
    • PDF Generator
  • RESOURCES
    • ADP SETUP
  • RESOURCES
    • ADP SETUP
  • CONSULTING
  • CONSULTING
  • BLOG
  • BLOG
  • About
  • About
  • Contact
  • Contact

Google Cloud™️ を活用したクロス集計システムを開発

4/16/2020

0 Comments

 

Google Cloud Platform を用いた並列計算処理を実現

https://prtimes.jp/main/html/rd/p/000000001.000056702.html
​

株式会社アヴィデア(代表取締役:八木橋徹平、以下アヴィデア)は、博報堂社内の戦略ブティック Paasons Advisory(パーソンズ・アドバイザリー)が手掛けるクロス集計・解析業務を高度にサポートする仕組みとして、Google Cloud™️を活用した高速クロス集計システムを新たに開発しました。2020 年 3 月より Paasons Advisory のアナリストが試験的に利用を開始しています。

アヴィデア は、IT技術を用いて様々なビジネス アイデアを具現化し、サービスやアプリケーションとしてユーザーに提供します。また、G Suite™️や Google Cloud Platform™️(GCP™️) などのクラウド技術を用いたシステムの開発・運用やコンサルティングを提供しています。

Paasons Advisory は博報堂社内に戦略業務に特化したブティックとして立ち上がりました。クラウドプラットフォームを駆使し、クライアントと戦略レイヤーで常時接続したコミュニティを形成しながら、高度でアジリティを伴ったプランニングサービスを提供しています。

Paasons Advisory は、通常業務において Google Cloud の G Suite を活用しており、利便性の高い Google スプレッドシート™️を用いたクロス集計システムの開発にもいち早く着手しましたが、データ量と分析軸の増加に伴う性能の劣化とクライアント端末への負荷の増加が顕著になり、本来アナリストが注力すべき解析業務への影響も出始め、この方法に対する限界を感じていました。
画像
アヴィデアは、こうした Paasons Advisory の課題に対し、GCP を活用することで、高負荷な計算処理をクラウド環境で分散処理する新たな仕組みを構築しました。従来 Google スプレッドシートが担っていたデータの「保存」・「プロセス」・「描画」を分離し、保存とプロセス部分の負荷を完全に GCP へ分散し、Google スプレッドシートには描画のみさせることで、クライアント端末の負荷を大幅に下げることに成功しました。また、GCP 上での計算処理は、ハイパフォーマンスコンピューティング分野に見られるような並列実行が実現されており、計算処理時間の短縮にもつながっています。

今回、アヴィデアが Paasons Advisory 向けに実装した仕組みは、クロス集計処理を含む汎用的な並列計算基盤として活用することができるため、今後サービス化を進め他企業への有償サービスとして提供していくことを計画しています。

G Suite や Google Cloud Platform を用いたシステム開発・コンサルティングが必要な方は、ぜひ弊社にお問合せください!

https://www.avgidea.io/contact.html

0 Comments

D-Ocean のパブリック メタデータを解析した論文が公開されました

3/12/2020

0 Comments

 

D-Ocean のパブリックなメタデータを解析したプレプリントの論文が公開されました

datajacket と D-Ocean に蓄積されたパブリックなメタデータを解析し、データプラットフォームの構造的な特徴を評価された研究論文です。ご興味のある方はぜひご一読ください!

タイトル
Variable-Based Network Analysis of Datasets on Data Exchange Platforms
https://arxiv.org/abs/2003.05109
https://arxiv.org/pdf/2003.05109.pdf

著者
東京大学大澤研究室
早矢仕晃章、大澤幸生

​
論文の要約
近年のデータ流通エコシステムの拡大において、組織・分野を横断したデータ共創へのニーズが高まっており、世界的にデータを交換・取引するプラットフォームが登場してきている。しかし、データ流通エコシステムは萌芽的なシステムであるため、その特徴を理解するための適切な分析単位は確立されておらず、データプラットフォームの構造的特徴についても議論が十分であるとは言い難い。そこで本研究では、データ流通エコシステムにおけるプラットフォームの特徴を理解するため、データプラットフォームサービスで扱われるデータのメタデータに含まれる変数をベースとした構造解析を提案し、D-Oceanとdatajacket.orgの2つのサービスの構造的特徴を解析した。さらに、データプラットフォームの持続可能性と社会的受容性の観点から、プラットフォームの頑健性を評価した。
0 Comments

    アーカイブ

    April 2020
    March 2020

    カテゴリ

    All

    RSS Feed


PRIVACY POLICY   DISCLAIMER
  • Home
    • 2020
    • 2019
  • Home
    • 2020
    • 2019
  • PRODUCTS
    • Avgidea Data Platform
    • Avgidea Messaging Service
    • PDF Generator
  • PRODUCTS
    • Avgidea Data Platform
    • Avgidea Messaging Service
    • PDF Generator
  • RESOURCES
    • ADP SETUP
  • RESOURCES
    • ADP SETUP
  • CONSULTING
  • CONSULTING
  • BLOG
  • BLOG
  • About
  • About
  • Contact
  • Contact