「Metabase」はオープンソースでセルフホストも可能なデータ視覚化ツールです。前回の記事でその使い方を確かめられたので、早速GIGAZINE夏のプレゼント大放出企画で集めたアンケートデータを分析してみました。 Metabaseのセットアップや機能については下記の記事で詳しく解説しています。 無料で大量のデータを自動で見やすいグラフなどで可視化し定期的に更新反映されるダッシュボードをオープンソースでセルフホスト可能なアプリ「Metabase」を使ってみた - GIGAZINE GIGAZINEのアンケート結果を読み込むためにPostgreSQLのセットアップを行います。前回に引き続きDockerを利用するので、下記のコマンドでPostgreSQLを起動します。「パスワード」や「ディレクトリへのパス」は適宜書き換えて下さい。 docker run --name metabase-postg
Deleted articles cannot be recovered. Draft of this article would be also deleted. Are you sure you want to delete this article? ビジネスの現状を把握し、さらにモニターし続けるためにダッシュボードなどを使ったBI（ビジネス・インテリジェンス）の仕組みを社内に導入したものの、社内ではあまり活用されていない、またはプロジェクトが途中で終わってしまったといった話をよく聞きます。 そこで、こちらの記事ではBI導入やダッシュボード作成プロジェクトを進めるときにぶつかることの多い問題、さらには、そうした問題を乗り越えてプロジェクトを成功に導くための5つのポイントを紹介します。 1. データの加工 ダッシュボードの作成プロジェクトに関わるタスクを考えると、真っ先に思い浮かぶのは
EvidenceはSQLとMarkdownで洗練されたデータプロダクトを構築できるBiツールOSSです。MITライセンスの元でソースコードが公開されています。 従来のD&DによるBiツールではなくコードベースとなっており、データアナリストが信頼性が高く価値のあるレポートを提供できる事を想定したものとなっているそうです。 コードベースにする事で、アナリストがダッシュボードにチャートやフィルタをD&Dで作業するよりも、より活用度の高いワークフローをアナリストに提供できるようになるのだそう。 そのため、利用にはSQLとMarkdownの知識が前提条件となっています。D&D仕様のBiツールに使いにくさを感じている方はご覧になってみては如何でしょうか。 Evidence
はじめに こんにちは。ML・データ部/推薦基盤ブロックの佐藤（@rayuron）です。私たちは、ZOZOTOWNのパーソナライズを実現する機械学習を用いた推薦システムを開発・運用しています。また、推薦システムの実績を定常的に確認するためのシステムも開発しています。本記事では、Lookerを用いて推薦システムの実績をモニタリングするシステムの改善に取り組んだ件についてご紹介します。 はじめに 改善の背景と課題 背景 課題 課題解決のために 要件1. 指標異常時の自動アラート 要件2. サマリの定期配信 要件3. 上記2つをSlack通知できること ダッシュボードの候補の比較 要件を満たすための設計 要件の実現方法 開発環境と本番環境 実装 ディレクトリ構成 ダッシュボード ダッシュボード構築の流れ 配信実績に関して 推薦結果に関して GitHub Actions 1. 指標異常時の自動アラー
先日Power BIに関して次のようなツイートをしたところ、特に具体的な手法を解説した訳でもないのに少し狼狽するほどリツイートされてしまった。せっかくなので当方がPower BIを具体的にどのように活用しているかご紹介したいと思う。 PowerBIマジで凄い。このためにWindows買うレベル。これは社員だから言うのではなくもし退職しても普通に使い続ける。研究データをまとめるのに有益。これちょっとブログにするから読んで欲しい。PowerBIはデスクトップ版とクラウド版があって一瞬取っ付きにくいんだけどマジで凄いんですよ。 — 父 (@fushiroyama) October 14, 2022 Power BIとは何かマイクロソフトが提供するBIツールである。 BIツールって何だっけ企業が持っている、 各種データベース 売上を記録したエクセルシート ユーザの行動ログ などの様々な情報を分析・
それでは、各ツールを詳しく見ていこう。 1. Taipy｜Pythonでデータアプリを爆速構築 GitHub: https://github.com/Avaiga/taipy 僕が直面していた課題： 社内のデータ分析レポートを作るたびに、ExcelとPowerPointを行ったり来たりしていた。データが更新されるたびに手作業で図を作り直すのは、正直言って苦痛だった。 Taipyで何が変わったか： Taipyを使えば、Pythonだけでインタラクティブなダッシュボードが作れる。データフローの定義からUI構築まで、すべてコードで管理できるのが最高だ。 従来のBIツールと違って、プログラマブルに制御できるから、複雑なビジネスロジックも簡単に組み込める。プロトタイプを作って上司に見せたら、「これ、どうやって作ったの？」と驚かれた。 2. FastAPI｜Python APIフレームワークの決定版
2024年12月8日に開催されたISUCON14に「ウー馬場ーイーツ・ザ・ファイナル」として参加しました。最終スコアは29,386でした。実装言語はGoです。 こんなPostをしてましたがRustは採用しませんでした（今回は余裕がなかった）。 講談社サイエンティフィク様からのご厚意で書籍「RustによるWebアプリケーション開発」をご恵贈いただきました。早速読み進めてます。今年のISUCONはRustで決まりかー！？ #PR https://t.co/sOAcWEqE8P pic.twitter.com/cK7V6lPMQk— matsuu (@matsuu) 2024年10月8日 今年のチャレンジについて 我らがチームはISUCON開催のたびに新たなチャレンジ*1をしてるのですが、今回は以下の4つにチャレンジしました。 ログ解析の見直し 生成AIの導入 rustlsの導入 bpftune
はじめに 初めまして、データ戦略室データアナリストの井上と申します。このブログで過去に登場した井上とは別の井上です。レバレジーズ内においてSplatoon最強の男です。 先日、大変ありがたいことに、AWS様が主催するAWS で実践！Analytics Modernization ～事例祭り編～の登壇依頼をいただき、オンラインにて「日本一のITフリーランスDBを世間に大公開してみた」というタイトルで発表いたしました。 弊社のレバテックフリーランスというサービスでは、レバテックにご登録いただいている企業様、IT技術者様にマイページ「レバテックプラットフォーム」をご利用いただいております。情報収集やレバテックとのやりとりや契約管理だけでなく、企業様によるIT技術者検索やスカウト、IT技術者様による案件検索や応募まで、フリーランスの全てがレバテックプラットフォームで完結します。 この度、そのレバテ
著者 下田倫大（しもだのりひろ），寳野雄太（ほうのゆうた），饗庭秀一郎（あいばしゅういちろう），吉田啓二（よしだけいじ） 著 定価 3,740円（本体3,400円＋税10%） 発売日 2021.2.20［在庫なし］ 2021.2.18 判型 B5変形 頁数 440ページ ISBN 978-4-297-11948-5 978-4-297-11949-2 概要 AIやIoTが実用化フェーズに入りつつあるのみならず、デジタルトランスフォーメーション（DX）への注目の高まりによって、事業やサービスを取り巻くデータを分析・活用・管理するためのインフラであるデータ基盤の重要性が増しています。 データ基盤を構築するにあたり、先行する事例から、Google Cloud（Google Cloud Platform, GCP）はデータ領域に強みがある、あるいは、BigQueryは高速に動作するデータウェアハウ
月10万円と医療保険だけ残す形のベーシックインカムなら反対する理由ないだろ これを断るやつ普通に頭悪いと思うけど 何か合理的な反対理由あるの？
この記事は毎週必ず記事がでるテックブログ Loglass Tech Blog Sprint の79週目の記事です！ 2年間連続達成まで残り27週となりました！ 昨今、データエンジニアリングの重要性が高まるなか、データレイクハウスという言葉を聞く機会が増えてきました。一方で、BI、DWH、データレイクといった分野は、色のついた商用製品であったり大規模な技術スタックになったりと気軽に触りにくい印象があったりもして個人的に最近はあまり触れてこなかった分野でした(15年程前はだいぶBI製品にお世話になりましたが)。 でも、実はかじってみると美味しい、単なる食わず嫌いだったかもしれません。この記事では前半にデータレイクハウスを概観しつつ後半に軽くハンズオンしてみたいと思います。チョイスは、最も使われるフォーマットである Apache Parquet 、S3 Tables の元となっている Apach
一方で、ベーシックインカムには否定的な意見もある。財源など制度的な疑問のみならず、「ベーシックインカムを導入したら、働かない人が増えるだけだ！」「支給額はタバコや酒に使われるだけだ！」といった声もあるだろう。2021年3月、そのような憶測を覆す結果が明らかになった。 アメリカのカリフォルニア州ストックトン市では2019年2月から、毎月500ドル（約5万4000円）のベーシックインカム実験を開始した。支給対象はストックトン市に在住する18歳以上で、世帯収入が中央値である4万6033ドル（約500万円）以下という条件から、無作為に抽出した125人。受給者の平均年齢は45歳、うち女性は69％におよぶ。 今回、テネシー大学のステイシア・ウェスト博士、ペンシルベニア大学のエイミー・カストロ・ベイカー博士らは「Preliminary Analysis: SEED’s First Year（事前分析：S
はじめに こんにちは、データ・AIシステム本部データシステム部データ基盤ブロックの栁澤（@i_125）です。私はデータ基盤の安定化・効率化を目指しつつ、Analytics Engineerとしてデータ利活用領域にも踏み込み、データマート整備やLooker周辺の整備・サポートに取り組んでいます。本記事では、Lookerダッシュボードに生成AIによる要約機能を組み込んだ「Gemini in Looker」の活用事例をご紹介します。 目次 はじめに 目次 背景 Gemini in Lookerとは 概要 標準機能とLooker Extension アーキテクチャ全体像とデータフロー システム構成 セキュリティ上の重要な設計判断 実際のデータフロー（安全な設計） もしCloud Run側から呼び出していたら（危険な設計との比較） User AttributeとAccess Filterによる権限制
Deleted articles cannot be recovered. Draft of this article would be also deleted. Are you sure you want to delete this article? 前回 (2025/08/16) に なんで Power BI を正しく使用できるユーザーが増えないのだろう？ という記事を書いたところ、Qiitaのトレンドに入ってしまい、とても戸惑いました😇 (2025/08/24 現在 15 万 views 超) 前回の記事の最後に「AI に頼り過ぎ（過度な期待」という項目を挙げたのですが、今回はそこを自分なりに深掘りしてみようと思いました。 というわけで、タイトルの疑問が今回のテーマです。それでは張り切っていきましょー。 まずは AI の定義から AI と一言で言っても、様々なものがあります。昨
例えば、こんなデータ。おそらくオフィスへの入退室のデータです。これも立派にファクトデータなのですが、数値がないので何を集計したらよいか、途方に暮れる方もいるかもしれません。ご安心を😋‼こんな時はレコード数を数えればいいのです。もちろん目的によっては、レコード数を数えても知りたいことが知れないかもしれませんが、その場合はデータが不足しているということを意味します。 なお、レコード数を数える場合は、レコードの単位が正しいか確認してくださいね。レコード単位が正しいのであれば、DAX で COUNTROWS() 関数で数えるのがよいでしょう。 ちなみに私が公開しているコロナの感染者数のレポートはこの考え方で作ってます。いつ、どこで、どんな人が感染者として確定したかという感染者単位のデータになっていたので、COUNTROWS() にて、レコード数を数えて、欲しい数値の基となる感染者数を算出していま
この記事は何 2023年、世間はLLMで大騒ぎですが、データの業界ではセマンティックレイヤー・Headless BIへの注目も高まっています。 これは、まだ国内では黎明期ともいえるそんな技術が、今後どんな存在となりうるのかを、筆者の個人的な解釈と妄想をもとに述べる長文ポエムです。 セマンティックレイヤーとは まず最初にセマンティックレイヤーについて解説します。 セマンティックレイヤーとは セマンティックレイヤーとは、データベースとデータ利用者の間に入り、両者間のやりとりを円滑にする存在です。 データ統合プラットフォームを提供するAirbyte社は、セマンティックレイヤーをデータとビジネスユーザーの中間に位置する、複雑なデータを理解可能なビジネスの概念に変換・翻訳するレイヤーと説明しています。 A semantic layer is a translation layer that sits
気にはなってるけど触ってないビッグデータ系のツール・サービスを触る Advent Calendar 2022の#9です。 Evidenceとは MarkdownにSQLクエリやグラフの設定を記載し、レポート用の静的なHTMLドキュメントを作成するツールです。 デモ画面を見ていただくと、作成できるレポートのイメージがしやすいと思います。 この方法（コードでレポートを定義、静的なHTMLドキュメントを作成）により、 ソースコードと同じように、バージョン管理やレビュー SQLクエリの結果を利用した、レポートの動的な制御（テンプレート） 色々な場所への埋め込みがしやすい などのご利益がありそうです。 （Evidence公式サイトより抜粋） インストール・プロジェクトの初期化 プロジェクトを設定するディレクトリで、npx degit evidence-dev/templateコマンドを実行します。
アメリカ・ロサンゼルスで2022年8月31日から、若者に毎月1000ドル(約14万円)を支給するベーシックインカム制度が開始されていたことが分かりました。特に金銭的な困難に直面している若者を対象に実施されるこのプログラムは、若者が教育を受けたり技能を身につけたりする機会を提供することを目的としたものだと報じられています。 Three-Year Guaranteed Income Pilot Program for 300 Youth Launches – Supervisor Hilda L Solis https://hildalsolis.org/three-year-guaranteed-income-pilot-program-for-300-youth-launches/ L.A. basic income program to give young adults $1,000
You signed in with another tab or window. Reload to refresh your session. You signed out in another tab or window. Reload to refresh your session. You switched accounts on another tab or window. Reload to refresh your session. Dismiss alert
You signed in with another tab or window. Reload to refresh your session. You signed out in another tab or window. Reload to refresh your session. You switched accounts on another tab or window. Reload to refresh your session. Dismiss alert
はじめまして、アソビューでデータ基盤チームに所属している霧生です。 近年、モダンデータスタックの登場などによりデータ分析基盤は一層盛り上がりを見せています。選択肢も増えてできることが多くなった反面、どう構築していくか迷う場面も多いのではないでしょうか。今回はアソビューのデータ分析基盤の構成と現状の課題、将来的な改善をどう考えているのかなどを解説しますので、ご参考になれば幸いです。 現在のアソビューのデータ分析基盤アソビューは創業10周年を超えており、当然ながら今までもデータを分析して事業やサービスに役立ててきました。しかし、コードやインフラの継ぎ足しを重ねたことにより秘伝のタレのような状態と化してしまい、多くの課題が生まれています。そこで、アソビューではこの問題を解消するために、昨年から株式会社DATALEさんとともにデータ分析基盤の再構築を行いました。 データ分析基盤を構築するにあたり、
可視化手段(難易度) BIツールやPythonを一切触ったことがない人であれば、習熟難易度はSigmaが最も簡単かなと思います。(無論、日頃からPythonを使っていればStreamlit) Tableauも初めて触った際はドラッグ&ドロップで可視化ができてすごく感動しましたが、実際に利用し始めるとLODやブレンドなどを用いなければ集計できないことも多いです。 SigmaであればExcelライクに計算フィールドを作成でき、LODを意識せずとも行レベル計算も可能です。 動作環境 TableauはデスクトップアプリとWeb編集がありますが、SigmaはWeb編集のみになっています。 個人的にはさっとデータを確認する際にExcelを使う感覚でTableauを使う場面も多かったので、ネット環境がないと利用できないのは不便かなと思ったりはします。 ちなみにローカルデータもアップロードすればSigma
ボールペンやシャープペンシルなど文具の開発・販売を手掛けるぺんてるは、IoT（インターネット・オブ・シングズ）技術や人工知能（AI）をテストする基盤をオフィス内に構築。2021年に同基盤を使い、サーバー室や会議室の状況を遠隔で把握するシステムを開発した。
米Notion Labsnは8月13日（現地時間）、メモ機能やタスク・Todo管理機能などを備えたWebサービス「Notion」に、チャート機能「Notionチャート」を追加した。Notion内のデータを、外部ツールを用いずグラフ化。そのままNotion内のページやデータベースに埋め込めるという。 無料プランのユーザーは1つだけ、有料プランのユーザーは無制限にグラフを作成・運用できる。Notion内のデータに変更があれば、グラフの内容をリアルタイムで変化する。作成できるのは棒グラフ、折れ線グラフ、円グラフで、いずれもPNGやSVG形式で出力もできる。 日本法人のNotion Labs Japanは「データを簡単にチャートにし、視覚化することが可能になるため、数百行、さらには数千行に及ぶデータの解釈がしやすくなる」としており、用途としてプロジェクトの進捗管理や、個人の支出管理などを例に挙げて
こんにちはあるいはこんばんは。村山(twitter id:muraweb_net)です。2023年6月末に ユニバーサルアナリティクス が終了し、2023年7月から本格的に GA4 を利用することになりました。慣れないUIに戸惑っている方が多いかもしれません。今回は、 GA4 で利用できるようになったレポート機能である「探索」について紹介します。 モニタリング分析とアドホック分析 モニタリング分析 アドホック分析 GA4 の「レポート」と「探索」 GA4 の「レポート」でのモニタリング分析 GA4 の「探索」でのモニタリング分析とアドホック分析 GA4 の「探索」レポート活用例 自由形式 自由形式でレポートUI内でデータ分析するケース 折れ線グラフ ドーナツグラフ 地図 テーブル 自由形式にてデータエクスポートした後にBIツールで分析するケース GA4 からデータをエクスポートし外部BIツ
Deleted articles cannot be recovered. Draft of this article would be also deleted. Are you sure you want to delete this article? はじめに Looker StudioはGoogleが無料で提供しているBIツールです。無料でもかなりの機能が揃っており、BIの活用にあたっては大変重宝する存在になっています。ただし、以前「後回しにするとどうしようもなくなる（かもしれない）Looker Studioの権限を理解する」で整理したように、組織管理という観点で難があるのは事実です。 それは例えば、レポートを組織的に管理する機能がなかったり、Google CloudのIAMを利用した権限管理ができなかったりすることが挙げられます。Looker Studio Proという有償版のサ
業務の中にデータ分析を導入し、データドリブンな意思決定を行う企業が増えつつある。BI（ビジネスインテリジェンス）ツールや帳票管理ツールを提供するウイングアーク１ｓｔ（東京都港区）の調査によると、半数以上の企業がデータ活用に注力していると答えたという。一方、一部では分析に時間をかけすぎてしまう「分析疲弊」に陥っていると答える声も上がった。 同社の執行役員でData Empowerment事業の事業部長を務める大澤重雄さんは「データを分析できても活用にまでつなげることが難しく、属人的に行うことで分析疲弊を起こしやすい傾向がある」と指摘する。なぜ分析疲労は起きてしまうのか。また、その改善方法はあるのか。大澤さんに話を聞いた。
Professional Design Publication-quality visualizations designed for all device sizes Superior Performance Sub-second interaction time, even on millions of records Modern Dev Experience Build dashboards & reports in markdown, backed by version control and testing Professional Design Build polished data products Combine interactive data viz components to build responsive data products. Publish inter
こんにちは！DA(データアナリティクス)事業本部 インテグレーション部の大高です。 モダンデータ探索・視覚化プラットフォーム（BIウェブアプリケーション）の「Apache Superset」というオープンソースのアプリケーションがあります。Airbnbによって開発され、2017年にはApache Incubatorプロジェクトになりました。 先日、このApache Supersetがトップレベルプロジェクトになったとのことで、実際にどのようなものなのか触ってみました。 The Apache Software Foundation Announces Apache Superset as a Top-Level Project https://t.co/XSsz5mehuH #Apache #OpenSource #innovation #community #Superset #BigDa
「ChatGPT」の次にOpenAIが仕掛ける「世界革命」...アルトマンCEOが主導する「UBI」とは 「終わりのない成長を目指し続ける資本主義体制はもう限界ではないか」 そんな思いを世界中の人々が抱えるなか、現実問題として地球温暖化が「資本主義など唯一永続可能な経済体制足りえない」ことを残酷なまでに示している。しかしその一方で、現状を追認するでも諦観を示すでもなく、夢物語でない現実に即したビジョンを示せる論者はいまだに現れない。 本連載では「新自由主義の権化」に経済学を学び、20年以上経済のリアルを追いかけてきた記者が、海外の著名なパイオニアたちと共に資本主義の「教義」を問い直した『世界の賢人と語る「資本主義の先」』（井手壮平著）より抜粋して、「現実的な方策」をお届けする。 『世界の賢人と語る「資本主義の先」』連載第27回 『「海岸のゴミ」が「カネ」に変わる⁉...新しい「人間関係」を
Google、BIツールのLooker Studioのグラフからプレゼンテーション用スライドを自動的に生成する「Gemini in Looker」の新機能プレビュー公開 Googleは、同社の最新生成AIであるGeminiをBIツールと統合した「Gemini in Looker」として、Looker Studio ProのグラフからGoogle Slidesのスライドを自動的に生成する新機能のプレビュー公開を発表しました。 Looker Studioは、Google SheetsやBigQuery、Cloud SQLやGoogle AnalyticsといったGoogleが提供するデータソースだけでなく、Amazon RedshiftやMicrosoft SQL Server、MySQL、PostgreSQL、SnowflakeなどのデータベースやFacebook Ads、LinkedIn
You signed in with another tab or window. Reload to refresh your session. You signed out in another tab or window. Reload to refresh your session. You switched accounts on another tab or window. Reload to refresh your session. Dismiss alert
カリフォルニア州オークランド市の実験によると、ベーシックインカムは精神面にも良い影響を与えるという（Unsplashより） アメリカのカリフォルニア州サンフランシスコ市では5月21日から、130人のアーティスト（芸術家）を対象にベーシックインカム（最低所得保障）のパイロットプログラムにおいて、ついに月1000ドル（約10万5000円）の支給を開始したと見られる。美術手帖などが報じている。 ＞＞美術手帖による報道 近年、世界各国でベーシックインカムに熱いまなざしが向けられている。人工知能（AI）の進歩はもちろん、新型コロナウイルス感染症（COVID-19）の感染拡大にともなう不景気や失業率の悪化、少子高齢化や格差拡大などの社会的背景による影響も大きい。 今回、支払いを開始したベーシックインカムは、サンフランシスコ市のロンドン・ブリード市長が2020年に発表したもの。過去のArtforum I
政府が全ての国民に一定の現金を給付する「ベーシックインカム（BI）」を巡り、制度導入を重点政策に掲げてきた日本維新の会が、党の政策パッケージを見直し、財源などの具体案を削除する調整をしていることが判明した。維新は次期衆院選で野党第1党を目指しており、巨額の財源が必要なBIの財源論への批判を避ける狙いがあるとみられる。衆院選の公約からも消える可能性がある。 現プラン「全国民に6万～10万円」 維新は10日の党会合で、現行の政策パッケージ「日本大改革プラン」（2021年策定）に代わる「新・日本大改革プラン」の素案を示した。新プランを「将来的な政権政党を視野に入れ、政権構想を具体化する成長戦略」と位置づけ、BIを含む党の政策を精査した。BIは現行のプランで事業規模や給付額など具体案を記しているが、新プランでは…
GA4ではWebサイトごとに個別のカスタムディメンションやイベント設定を行うことで詳細データを得られますが、多くのマーケターが手軽に利用しやすいように、本テンプレートは極力汎用性を担保した設計にしています。 GA4版 Looker Studioテンプレートの導入設定手順最初に、自社Webサイト用にレポートをコピーする必要があります。コピーが完了したら、レポートの初期設定を行いましょう。 このテンプレートは誰でも無料で使えますが、Google アナリティクスとGoogle サーチコンソール、YouTubeの閲覧権限が必要です。閲覧権限がない場合は、自社のツール管理者に相談してください。Google サーチコンソールとYouTubeを連携しない場合は、以下の手順内の[新しいデータソース]を選択するステップを飛ばして、[レポートをコピー]してください。レポートをコピーする（この設定にかかる時間：
【ワシントン=大越匡洋】バイデン米政権は、最低限の所得をあらゆる家庭に保障する「ベーシックインカム」に似た制度の構築を静かに進めている。3月に2021年に限って拡充を決めた子育て世帯に対する税額控除を使い、7月から毎月一定額を対象家庭に給付する。制度を定着させ、期間延長に反対する野党を揺さぶる狙いがある。「およそ3900万世帯、全米の子供の88%が対象になる」。バイデン政権は17日、子育て世帯
日本維新の会は25日、次期衆院選の公約の原案を発表した。全ての国民に最低限の生活に必要な現金を支給する「ベーシックインカム」の検討や、2年間を目安とした消費税の税率5％への引き下げなどを盛り込んだ。都市制度については、住民投票で否決された「大阪都構想の実現」は消え、「広域行政の一元化」が掲げられた。 原案では、「セーフティーネットの構築に向け、給付付き税額控除またはベーシックインカムを基軸とした再分配の最適化、統合化を本格的に検討」すると明記した。新型コロナウイルス対策では、新型インフルエンザ等対策特別措置法を改正し、飲食店などへの休業命令や経済的な補償を付加した上で、都道府県知事に権限を移譲する。また、医療提供体制の再編を強力に推進し、国産ワクチンや治療薬の研究開発、生産体制に大胆な投資を…
この記事はdbt Advent Calendar 2022の12月1日の記事です。 サマリ DuckDBとdbtを使えばローカル環境で一定のデータ量であればオレオレDWHっぽいものが作れるようになる 社内にデータ分析基盤がない、データ活用しようにもデータ基盤がなく本格的に取り組もうと思うとセキュリティや運用までかんがえると始めることすらままならないようなプロジェクトや会社でも始められる可能性がある MLのデータの前処理とdb Pythonモデルを使ってローカル環境で一定のクレンジングと前処理のパイプライン等も作れるかも？ DuckDBとは？ SQLiteをベースとした軽量で高速なOLAPデータベースです。 近年のPCのメモリ増加で16GBとか乗っていると数百万行ぐらいのデータでもローカルで高速に一定処理することが可能になってしまっています。 詳しくは @notrogue さんが書いた記事を
こんにちは。データエンジニアリングの支援を行っているstable株式会社の代表の宮﨑（@ikki_mz）です。近年、データ活用の重要性がますます高まる中、BI（ビジネスインテリジェンス）ツールの選択は...
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く