はじめに こんにちは、ML・データ部推薦基盤ブロックの栁澤（@i_125）です。私はZOZOのデータ基盤におけるデータガバナンス強化を実現するために、Analytics Engineerとして複数の部門を跨ぐプロジェクトチームに参加しています。本記事ではZOZOにおけるデータガバナンス上の課題と、その課題の解決策の1つとしてdbtを導入した話をご紹介します。 目次 はじめに 目次 背景 課題 データマートの乱立 集計定義のばらつき 依存関係の洗い出しが困難 データモデリングツールの比較検討 データ変換に関する要件 データモデリングツールの選定 レイヤリングによる責務の分離 実装方針 今後の展望 dbtモデルを開発する上で工夫したこと 環境の分離 背景 工夫したこと ダミーデータセットの生成 背景 工夫したこと SQLFluffを使ったフォーマット統一 依存モデルを含むテスト dbt Doc

小学校小6～中学1年まで極度に勉強ができなかった。 テストの問題文の理解ができなかったり、問題文の日本語は読めるが表現が気になってその所を何度も確認して先に進めず1問目以降白紙などもあった。 このような状態だと学校や集団塾では改善はしないだろうと感じたので、自分が勉強につきっきりになることにした。 幸い、私はある程度勉強はでき、中学レベルなら英国数ならほぼ満点はとれる。 まず、問題文を読んで頭がパンクしてしまうことに関しては、深く考えるとパンクしてしまうということなので、そのパンクの兆候がでたらその問題から離れる訓練をした。 日々の家庭学習で問題集をとかせ、それが発生しそうなら知らせてスキップする。 テストのときでも、損切して0点を防ぐ効果がでた。 そのあと、問題文でパンクする問題を一緒に説いて、問題文は何を求めているのか2人でじっくり考えるようにした。 そうすることで、問題文の表現のパタ

はじめに vue公式の拡張機能のバージョンアップにより、VSCodeで開発するときに推奨される拡張機能や設定に変更がありました。 非推奨の設定のままの人は、多分以下のような通知が出てると思うので、直しましょう。 今までの推奨設定 Vue - Officialをインストールする TypeScript Vue Plugin (Volar)をインストールする テイクオーバーモードを有効にする 今後の推奨設定 Vue - Officialをインストールする 新しく設定する人がやること Vue - Officialのインストール Vue - Officialをインストールする 今までの推奨設定をしていた人がやること TypeScript Vue Plugin (Volar)のアンインストール TypeScript Vue Plugin (Volar)が非推奨になったので無効に、もしくはアンインストー

政府は子どもと接する仕事に就く人の性犯罪歴を確認する「日本版DBS」制度の創設に関連し、犯罪歴がなくても、子どもからの訴えなどで「性加害の恐れがある」と判断された人について、雇用主に配置転換などの安全措置を義務付ける方針を固めた。今国会に提出方針の関連法案に盛り込む。関係者が4日、明らかにした。 性犯罪歴の有無だけによらず、雇用主に幅広い対応を求め、子どもの安全をより重視した形。具体的にどのようなケースが性加害の恐れに該当するのか、判断基準を今後検討し、ガイドライン（指針）で示す。 DBSは国が構築するデータベースを通じ、雇用主が就職希望者や現職者の性犯罪歴を確認する仕組み。照会期間は拘禁刑（懲役刑と禁錮刑を2025年に一本化）が刑終了から20年、罰金刑以下は10年で、再犯リスクを抑える効果が期待される一方、初犯を防げないとの課題が指摘されていた。 学校や保育所には性犯罪歴の確認を義務付け

はじめに 34 歳のとき、勤めていた会社の経営が傾き早期退職を促されたのを契機に独立しました。その後、41 歳で Authleteオースリート 社を設立しました。諸般の事情で現在も Authlete 社の代表取締役という肩書きを持っていますが、経営者的な仕事は他の人に任せ (参照: シリコンバレーのプロフェッショナル CEO を迎えて米国市場に挑戦する日本のスタートアップの話)、50 歳目前の現在もプログラマとしてコードを書き続けています。 Authlete 社設立 (2015 年 9 月) から 8 年半弱経過したものの、まだまだ小さな会社で道半ばであるため、起業家として何か語るのは時期尚早ではあるものの、軽い体調不良が長引く中、『自分のエンジニアとしてキャリアを振り返ろう！』という記事投稿キャンペーンを見かけ、生きているうちに子供世代のエンジニアの方々に何か書き残しておこうと思い、文章

概要 スタースキーマからスノーフレーク、ギャラクシー、そしてデータボールトやアンカーモデリングまで、各スキーマの特徴、利点、そして適用シナリオを掘り下げます。 スタースキーマ スタースキーマを元に整理します。 スタースキーマ または 星型スキーマ はデータウェアハウスに利用される最も単純なスキーマである。スタースキーマには唯1つもしくは少数のファクト表と複数のディメンション表が含まれる。スタースキーマはスノーフレークスキーマの一種であるが、多くの用途で利用されている。 DWHに利用される最も単純なスキーマ 唯一または少数のファクトテーブルと、複数のディメンションテーブルが含まれる スノーフレークスキーマの一種 モデル ファクト表はデータウェアハウスでの解析で利用され、複数の異なるディメンションに区分される。ファクト表は主要なデータを持つ一方、ディメンション表は相対的にサイズが小さくディメン

仕事への意欲を失い、ただ必要最低限の業務だけを熟す「静かな退職」という働き方が広がりつつある。会社を辞める気はないが積極的に働く気もない。その多くが、入社後にそんな働き方を決めたという。調査により、その実態が見えてきた。 「静かな退職」はアメリカのキャリアコーチ、ブライアン・クリーリー氏が提唱した言葉だ。近年アメリカでも、Z世代を中心にそうした人たちが増えているという。日本では昔から、『釣りバカ日誌』のハマちゃんに代表される「ぐーたら社員」がいた。猛烈社員のアンチテーゼとして、ある意味、理想の生き方だったが、今の企業には働かない社員に給料を支払う余裕はない。 なぜそうした人が増えたのか、GPTW Japan（働きがいのある会社研究所）が企業に勤める男女6998人を対象に調査を実施した。その結果、静かな退職を選択している人の約3割が34歳以下の若手社員であり、理由のほぼ5割が「プライベートな

ローマ字のつづり方について国が定めたルールが、約70年ぶりに改められる見通しとなった。小学校で習うローマ字もこのルールを踏まえているが、駅名や案内表示など一般社会では、英語の発音により近い別の表記が浸透しているのが実情だ。文化審議会の小委員会は、統一的な考え方を示すことも視野に検討を進めている。 ローマ字のつづりは主に、母音と子音を規則的に組み合わせる「訓令式」と、「ヘボン式」がある。例えば「し」は訓令式では「si」、ヘボン式では「shi」と表記される。「愛知」は「aiti」（訓令式）、「aichi」（ヘボン式）になる。 国は1954年、内閣告示で「一般に国語を書き表す場合」は訓令式を用いると定めた。ヘボン式は「にわかに改めがたい事情がある場合に限り」使うとした。 学習指導要領も、小学3年の国語で、ローマ字について内閣告示を踏まえた学習をするよう求めている。だが、実際には訓令式は定着せず、

埼玉県蕨市と川口市周辺に集住しているクルド人と現地住民との間の軋轢はSNSでも度々話題になっていますが、先日蕨駅前の外国人排斥デモに対してクルド人群衆の一人が「日本人●ね！」と叫んだという動画（ただし諸説あり）が出回っていて、さらに相互憎悪が募る結果になっています。 「アベマプライム」でも取り上げられていました（トップ画像は番組映像から） ただ、この番組↑、あまり背景情報とかをちゃんと取り込まずにテキトーに印象論をぶつけあって終わってしまったような感じになっていて、ちょっと良くない扱い方だったように思います。お互いに余計に不満がたまる感じで。 一方で、今月はじめにこの問題がNHKで取り上げられた時の内容が以下のウェブサイトにまとめられていますが、こっちの方は断然背景が深堀りされていて、SNSでの「右と左の罵りあい」から距離をおいて川口市の関係者がなんとか問題を解決しようと具体的に模索してい

☆Taku Takahashi & TJO が世界中から集めたまだ発売されていないエクスクルーシヴチューンや、これからのクラブフロアを賑わすであろう最新キラーチューン等を紹介、また注目のDJ/アーティスト達によるここでしか聴けないインタビュー等も数多くフィーチャーしているプログラム。

米ドル/円 が150円と計算しやすくなり、コスト削減の圧力が日々強まる中、皆様お宝探しと垂れ流し回収の真っ最中でございましょうか。 最近はコスト削減や予算について見ることが多いので、その中で出てきた面白げな話に雑談を加えてとりとめなく書いてみようと思います。 削減余地はある 昨年にご好評いただいた AWSコスト削減とリソース管理 | 外道父の匠 を含め色々な削減施策を試みてきましたが、サクッと成果になる箇所から泥沼に動かない所まで様々あったりします。 ただ、どんなアカウントでもトラフィックや処理負荷には波があり、それに対する余剰リソースを確保して構成しているので、その辺をキュッと絞ることまで含めればやれることは必ず一定以上存在することになります。 そういう大きなお宝ではない小さなお宝だと様々あり、古びたとか退職者が作ったとかで、ほぼ使っていない垂れ流しリソースやデータをかき集めれば、チリツ

2024年2月20日、日本を含む複数の司法機関の共同捜査により、Lockbitランサムグループの関係者2名の逮捕とリークサイトなどのインフラのテイクダウンが行われました。ここでは関連する情報をまとめます。 共同捜査の成果 Lockbitランサムグループに対して10か国の法執行機関が参加した共同捜査はEUROPOLなどが調整を行っていたもので、作戦名はOperation Cronos。フランスからの要請を受け開始された。EUROPOLや英国NCA、米国司法省などが共同捜査に関連した情報について公表を行っており、そこではこの捜査を通じた主な成果として次の5つが上げられている。 Lockbit関係者の摘発や起訴 フランス司法機関の要請を受け、ポーランド、ウクライナの両国において関係者2名が逮捕された。またフランスおよび米国司法機関より、3件の国際逮捕状および5件の起訴状の発行が行われた。米国はL

すぅぅ🌹 @158cm43kg23cm 年収別 男性が使ってそうな化粧水 400万　：ハトムギ 600万　：メンズビオレ 800万　：無印良品 1,000万 ：バルクオム 1,500万 ：コスメデコルテ 敏感肌　：キュレル おじさん：SHISEIDO MEN イケオジ：モルトンブラウン マッシュルームカット：Aesop、THREE 2024-01-14 16:47:33

computerphile @computerophile @hangstuck 上「おまえのせいで俺の評価下がるんだけどなんでおわなんないの？報連相した？（しんやさん、お疲れだと思うけどもっとうまく方法ないかな？たのむよ＞＜）」 上「給料は下げるよ。（給料は下げるよ。）」 2024-02-28 23:25:07

公取委は昨年１２月２７日、一昨年１２月に社名公表した１３社によるその後の取組内容を公表した。本文に上げたメーカー系物流会社による取り組み状況は、「価格転嫁を申し出たすべての取引先の要求に対し、合理的な理由を確認した場合、双方合意の上、値上げを受け入れた」とある。 トラック事業者が運賃交渉に用いたものは、国交省告示の標準的な運賃とその考え方の基礎になる原価計算の手法、そして自社の諸原価だ。 「合理的な理由を確認」することも十分に可能なものだが、それでも１％、１％、１％といった不合理な形の「双方合意」。運賃額の合理性とは？　そのことの算数的な意味と実態経済的な意味の違いを、まざまざと見せつけられる一例だ。 あるトラック事業者は時々夢を見るという。「乗務員が退職しましたからもう業務の対応ができません。補充もできません。そう話すと取引先が『他の業者から手が上がればそっちに切り替えてもいいの？』と聞

まりにゃ🌰🐿 @mayimbesasson お前を中華街に連れて行く前に 言っておきたいことがある かなり厳しい話をするが 俺の本音を聞いてくれ 小籠包や肉まん食べ歩きはやめろ 食べ放題の店に入るな 甘栗買うな 世界チャンピオンの店に入るな よく分からないフルーツ飴を食うな 一番リピーターが多い占い屋に入るな 2024-02-28 22:27:39

パレスチナ自治区ガザ南部ラファで、配給食料を求めて集まった避難民（2024年2月19日撮影）。(c)MOHAMMED ABED / AFP 【2月28日 AFP】国連（UN）人道問題調整事務所（OCHA）のラメシュ・ラジャシンガム（Ramesh Rajasingham）調整局長は27日、安全保障理事会（Security Council）で、パレスチナ自治区ガザ（Gaza Strip）では「2月末時点で住民の4分の1に当たる少なくとも57万6000人が飢餓寸前」だとの認識を示した。 ラジャシンガムは、「ガザ北部では2歳未満の幼児の6人に1人が深刻な栄養失調や衰弱状態にある」とも語った。 また、国連食糧農業機関（FAO）のマウリツィオ・マルティナ（Maurizio Martina）副事務総長は、ガザでは地下水の約97％が「飲用などの使用に適さない」ほか、農業生産も崩壊しつつあると述べた。 一方

3000年以上前、今の中東地域で強大な勢力を誇った「ヒッタイト王国」のものと見られる粘土板を、日本の調査隊がトルコの古代遺跡からほぼ完全な状態で発掘しました。粘土板にはヒッタイト語のほか国家的な宗教儀礼で使われていたとされる言語「フリ語」も刻まれていて、発掘した研究者は「この遺跡が王国の重要な都市だったことを示唆するものだ」としています。 粘土板が発掘されたのは、トルコ中部にある「ビュクリュカレ遺跡」です。 この遺跡では、15年前から中近東文化センター附属アナトリア考古学研究所の松村公仁研究員が率いる日本の調査隊が調査を行っています。 去年5月、遺跡の北側から70行にわたってくさび形文字が刻まれた手のひらほどの大きさの粘土板がほぼ完全な状態で見つかりました。 粘土板は文字の形から今からおよそ3300年前、紀元前14世紀ごろのヒッタイト王国の時代のものだと考えられ、ヒッタイト語だけでなく当時