統計学で用いる行列演算の小技 - Qiita
はじめに 千葉大学・株式会社Nospareの川久保です．今回は，統計学（特に多変量解析）で多く出てくる行列演算の小技集を，線形回帰モデルにおける簡単な実用例を交えて紹介します． 転置に関する公式 行列の転置とは，$(i,j)$要素を$(j,i)$要素に入れ替えることです．$m$行$n$列の行列$A$の$(i,j)$要素を$a_{ij} \ (i=1,\dots,m; j=1,\dots,n)$とすると，$A$を転置した$n$行$m$列の行列$A^\top$の$(j,i)$要素が$a_{ij}$となります．また，自明ですが，転置行列の転置は元の行列になります．すなわち，$(A^\top)^\top = A$です． 行列の和の転置 行列$A$と$B$の和の転置は，転置行列の和です．つまり， が成り立ちます． 行列の積の転置 次に，行列$A$と$B$の積$AB$の転置としては，以下の公式が成り立
GW、暇なら読んどく？ 企業が無料公開した研修資料まとめ 「AI活用」「グラブル裏側」「うんこのリスク」など
2024年のゴールデンウイークがやってきた。暦の上では、3連休、平日3日、4連休と続いており、最大で10連休を取得し、休みを満喫している人も多いと思う。その中には、外出はせずに自宅でゆっくり過ごすという人もいるかと思うが、そんな人たちにおすすしたい、無料で読める研修資料を紹介したい。 昨今さまざまな企業で、自社の研修で使った資料を社外に公開するケースが相次いでいる。「事業や教育に役立ててほしい」という思いから公開されるそれらの資料たちは、新入社員向けの仕事の心構えを説くものや、各業務の基礎を解説した教材、今話題の生成AIの活用方法など多種多様である。 今回は、過去にITmedia NEWSやITmedia AI＋で取り上げた記事の中から数点を紹介する。ゴールデンウイーク中に読むもよし、連休明けの仕事始めのモチベーションを上げるために読むもよし、“あとで読む”用にブックマークしてもよし。それ
｢結婚した人のほうが老後に孤独を抱えることになる｣世界的にシングルを選ぶ人が急増している本当の理由 データが明かす｢結婚は短期的な幸福しかもたらさない｣という現実
結婚は孤独の解決策になるのか 結婚を支持する人たちは、カップルとして生きること、あるいは家族で生きることは、孤独を防いでくれると主張する（※1）。 しかしながら、結婚生活が本当に孤独を減少させるかどうかという問いとそれへの答えは、検証が可能であり、また、検証するべきものだ。もちろん、幸せな子どもたちのいる、幸せな結婚生活で、家族が愛しあっているなら、当然、恩恵はあるだろう。 問題は、あらゆる年齢層のすべての人々にとって、さまざまなシチュエーションにおいて、たとえば、別離や離婚、配偶者の死亡に終わった場合であっても、結婚が平均的に見てすぐれた解決策かどうか、ということだ。 それを考慮に入れて、結婚は孤独に対するよいソリューションかという質問への回答をシンプルな図にまとめてみた（しかし、もっと複雑な事情があることは、後に紹介する）。図表1を見てほしい。 結婚はシニアの生活を孤独にするという衝撃
岸田内閣支持率25％ 政権発足以降で最低 毎日新聞世論調査 | 毎日新聞
毎日新聞は17、18の両日、全国世論調査を実施した。岸田内閣の支持率は25％で、11月19、20日の前回調査の31％から6ポイント下落し、2021年10月の政権発足以降最低となった。不支持率は69％で前回（62％）より7ポイント増加した。岸田文雄首相が防衛費増額の財源について、1兆円強を増税で賄う方針を示したことが支持率低下につながったとみられる。 防衛費を大幅に増やす政府の方針については、「賛成」が48％で、「反対」の41％を上回った。「わからない」は10％だった。政府は防衛力強化のため、23～27年度の防衛費の総額を計43兆円とする。男女別でみると、男性は「賛成」が56％、「反対」が38％だったが、女性は「賛成」が35％、「反対」が46％だった。年代別でみると、50代以下は「賛成」が「反対」より多かったが、60代以上は「反対」が「賛成」…
大量流出した個人情報で判明「中国の人口はある時点から急減している」 | 人口学者が詳しく解説
中国は人口統計の数値を捏造していると指摘されており、異議を唱える者は取り締まりの対象となってきた。そのため同国が「公式」としている人口に関しては、さまざまな議論がある。 そんななか、中国の公安当局が管理する10億人分の個人情報が流出した可能性があると7月に報じられた。氏名や住所、犯罪歴、病歴記録までが含まれており、史上最大規模の情報流出とされている。 著名な人口学者である易富賢によれば、この事件によって漏洩した情報が中国の「数値捏造」を裏付けているという。 人口減少を頑なに認めない 中国政府公認の人口統計数値が意図的にかさ増しされていることなど、誰もが知っていることだ。にもかかわらず、当局はこれらのデータに疑義を呈する者たちを次々と弾圧している。 たとえば拙著『大國空巣』は、2007年の出版直後に発禁となった。同書が中国の一人っ子政策への懸念を表明し、人口の減少が始まるのが、中国当局と国連
誹謗中傷対策として炎上時のリプライ可視化システムを作ってみた｜tori
社会問題としての炎上・誹謗中傷最近テラスハウスという番組の出演者が亡くなるという痛ましい事件がありました．この番組自体はあまりよく知らないのですが，とにかくネット上での誹謗中傷がひどかったとのことです． 事件の詳細や炎上にどう対処すべきかという話については，こちらが良くまとまっているのではないかと思いますので，詳細は省きます． 木村花さんにはご冥福をお祈りする以外ないわけですが，このような痛ましい事件が起きている一方で，その実態というのはあまりよくわかっていません．私も炎上の分析をやっていたりもしますが，基本的には数百万人規模の炎上を対象としています． というのも，個人が攻撃されている炎上というのはなかなか分析が難しいんですね．規模が小さいと他人からはどうしても見えにくいのです．だからといって，本人にとってそれはどうでもいいことかというとそんなことはないわけで，何とかしなければいけない対象
今度の「統計不正」は空前絶後の大問題だぜ - モノシリンの３分でまとめるモノシリ話
国土交通省の建設工事受注動態統計調査に不正があったと報道されているが、正確に把握している人はほとんどいないと思う。そこで、まとめる。 問題点は、「合算処理」と「二重計上」の2点。 このうち、重要なのが「二重計上」なのだが、先に「合算処理」から説明しよう。 ◆合算処理とは 合算処理とは、提出の遅れた月の調査票の数値を、後の月に合算して計上する処理のことである。 建設工事受注動態統計調査は、対象企業から毎月調査票を提出してもらう。この提出期限が対象月の翌月10日であり、非常に締め切りがタイトである。 だから、締め切りを過ぎて出されることが多々あった。 そうやって遅れて出された月の数値について、遡って修正するのも手間がかかる。 そこで、後の月に合算して計上していたのだ。 これは具体例で考えると分かりやすいので、下記のような例を想定してみよう。 ・ある企業は、1月分の調査票について、締め切り日（2
「交通事故負傷者は実際には減ってない」問題が国会で質問 - 紙屋研究所
交通事故負傷者は実際には減ってないのではないか、という「しんぶん赤旗」の記事を読んでその感想を書いた。*1 kamiyakenkyujo.hatenablog.com その後、共産党の塩川鉄也衆院議員がこの問題を国会で取り上げて質問した（6月4日、衆院内閣委員会）。今日の「しんぶん赤旗」にはその反響を書いた記事が載っていた。 そして塩川議員のホームページにはその質問をまとめた記事が載っていた。 www.shiokawa-tetsuya.jp （2021年6月4日 衆議院内閣委員会 日本共産党 塩川鉄也 配布資料） 前回記事で青野渉弁護士のコメントを紹介したが、「横ばい」と「半減」ほどに違う。「実数が違うだけで、基本的には同じ傾向」ではないのである。これは統計の意味を無効化し、それを基礎にした国策を誤らせる。 乖離が生じているのはなぜかと質問。 警察庁高木勇人交通局長は「自賠責保険では、人身
食べログ3.8問題を検証 - クイックノート
先日、twitter上で食べログの星の数について、 ある問題が話題になりました。 食べログの闇として話題になったその問題とは、 「評価3.8以上は年会費を払わなければ3.6に下げられる」 というものです。 食べログは飲食店についての口コミを集めるサイトで、 その評価は実際のユーザーによって形成されるものとして広く認知されています。 専門的なグルメリポーターでもなく、 一般の人々の素直な感想を集めることで、 その飲食店のリアルな価値が知れると期待して、 利用しているユーザーも多いでしょう。 それだけに、 「食べログが評価を恣意的に操作しているかもしれない」という話は、 瞬く間にネットで話題となりました。 さて、この話は実際に行われていることなのでしょうか。 食べログでは、当然評価点は公開されているので、 このような恣意的な操作があれば、 何らかの形で偏りが見つかるはずです。 ということで、食
高木浩光＠自宅の日記 - ヤフーの信用スコアはなぜ知恵袋スコアになってしまったのか
ヤフオク!における取引実績や評価、ショッピングでのレビュー回数、知恵袋での活躍度、Yahoo! JAPANへの支払い滞納の有無および回数、利用規約・ガイドライン違反の有無および回数、宿泊・飲食店等の予約キャンセル率、キャンセル連絡有無などの行動実績等 Yahoo!スコアの作成および利用は、お客様のプライバシーの保護に十分に配慮したうえで実施しております。 算出元データには、通信の秘密にあたる情報、スコア化することで不当な差別につながる可能性がある情報（要配慮個人情報、性別や職業等）は使用しません。 知恵袋での行動が知恵袋内での信用評価として使われるのは普通（そういうサービスだということ）だが、それが、知恵袋の外で、お金を借りるときとか、飲食店を予約するときに信用として必要になってしまう、そんな社会はまっぴらごめんだ。（だれにもわかりやすくてたいへんよい。） ヤフーが信用スコアの作成をオプト
公的統計が壊れ始めたー指摘できない政治家、現場の声を反映できない霞が関｜松本健太郎｜note
後は業種別貸出統計です。最近、スルガ銀行のシェアハウス融資が炎上しましたが、実は私は10年ほど前、この仕事を通じて、その件に関わっていました（笑）。 日本銀行では10年ほど前から、個人のアパート・マンションローンに注目していました。当時の産業分類にはまだ「個人による貸家業」がなかったんです。個人の住宅ローンだと、返済が滞れば破産となり、すぐ官報に掲載されてしまいます。ですが、それとは違って限りなく「事業」に近いだろうと判断して、新たな業種として産業分類を作りました。 作った人間の意図としては「存在を把握して、監視してますよ」という意思表示ですね（笑）。 ーー日銀の公開する公的統計、それから政府が公開する公的統計、様々あると思いますが、最近の政府公的統計は緩いんじゃないかと思っています。日銀で統計を作っておられた立場から見て、どのように思われますか？ （鈴木）日銀の公的統計もいろいろあります
ナメクジの出現を予測する！- 市民科学と最新統計の融合
外来種問題は突然に 2014年7月某日、札幌市の円山原始林で私が出会ったのは、体長15cmもの巨大な豹柄のナメクジ、マダラコウラナメクジでした。私はそれを知っていました。過去に一度だけ、ドイツ・ドレスデンの森の中で見たことがあったからです。北欧原産のナメクジがどうしてここに？ 慣れ親しんだ円山の森に現れた、不似合いな新参者との突然の出会いに、目眩がしました。私の知る北海道の生態系は、これからいったいどうなってしまうのか？ 我々ヒトの生活への影響は？ 体長15 cmほどのマダラコウラナメクジ 市民のブログが教えてくれた 予期せぬ出会いに衝撃を受けた私は、研究室に戻るや否や、飛びつくように現状を調べ始めました。わかったことは、マダラコウラナメクジが2006年に茨城県で最初に侵入・定着が確認されたということ、さらに2010年には福島県、2012年には長野県にも侵入し勢力を拡大しているということで
40代前半男性の所得中央値
2017年の『就業構造基本調査』の結果が公表されました。昨日の14：30でしたが，私は10分ほど前からパソコンの前にへばりついて，今か今かと待っていました。 http://www.stat.go.jp/data/shugyou/2017/index.html このブログでは幾多の官庁統計を分析していますが，『就業構造基本調査』は最も活用しているものの一つです。この調査の目玉は有業者の所得を調査していることで，所得をキーにしたクロス集計表も多数アップされています。性別・年齢層別の所得分布，所得階層別の未婚率など，いろいろなことを明らかにできます。 本調査でいう所得とは，「賃金，給料，手間賃，諸手当，ボーナスなど過去１年間に得た税込みの給与総額」をいいます（用語解説）。税引き後の年収とは区別される概念です。 私は，2017年のデータが公表されたら，今の自分の世代の所得がどうなっているかをまず明
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
ヒト臨床試験安心プラン | 株式会社オルトメディコ
アルゴリズムがつくる「公正さ」には、差別を助長する危険性が潜んでいる：伊藤穰一