ABEJA Tech Blog

中の人の興味のある情報を発信していきます

Pants で決める python monorepo

ABEJA で Research Engineer をやっている中川です.普段は論文読んだり,機械学習モデルを実装したり,インフラを構築したりしています.今回のブログでは3,4ヶ月の間遊び9割仕事1割で取り組んできた Python で実装された機械学習マイクロサービスたちの mo…

ABEJAのスピードあるコロナ(COVID-19)対応

ABEJAでAdminの業務(一般的には管理部?)をしている森田潤也です。コロナの影響による働き方の対策に関して、緊急事態宣言が終わったこともありこれまでにやったことを振り返りとして整理しました。いろんな仕組みをスピード持って意志決定して作れたなぁ…

画像データに対するActive learningの現状と今後の展望 ~最新の教師なし学習を添えて~

今回の記事では, 画像データに対する Active Learningの現状と展望を, いま注目の教師なし学習手法の解説を添えて, お届けします.

Go vs Rust : 特徴量DBに適するのはどっち!? (2020-04-14 実験追記)

ABEJA で Research Engineer をやっている中川です.普段は論文読んだり,機械学習モデルを実装したり,インフラを構築したりしています.今回のブログでは,Insight for Retail の一機能として提供しているリピータ分析に用いる特徴量DBの改善に向けた言語…

Atomic Design思考でVue.js×Plotly.jsでのグラフComponentを実装した結果

こんにちは。はじめまして。 ABEJAでフルスタック(?)エンジニアをしている齋藤です。今回は`ABEJAってUI/UXガッチリやってるイメージない。`というイメージを払拭すべく、`ABEJA Insight for Retailの提供しているDashboardで、どのようにUI/UXに力を入れて…

AWSのAZ障害でもサービスを継続させる技術

こんにちは。ABEJAのインフラ管理してる村主 @rwle1221 です。 本ブログは ABEJA Advent Calendar 2019 の11日目です。 今日は、みなさん記憶に新しい2019年8月末に発生した AWS の東京リージョンの AZ 障害について、どのようにしていればサービス影響を与…

なぜPrometheusを辞めてDatadogを採用したのか

こんにちは。ABEJAのインフラ管理してる村主 @rwle1221 です。 本ブログは Datadog Advent Calendar 2019 の8日目です。 今日は ABEJA Platform というプロダクトで、なぜ Prometheus から Datadog に変えたのか。というお話したいと思います。 一人の方でも…

EKSの運用を楽に安くするためにSpotinst Oceanを使って工夫してる話

こんにちは。ABEJAのインフラ管理してる村主 @rwle1221 です。 この記事は Amazon EKS Advent Calendar 2019 2日目の記事です。 1日目は AWSの中の方が re:Invent 直前のアツい想いを書く ということで、ハードルが上がってそうですがそんなことは気にせずに…

ICCV2019 に参加してきました

ABEJA で Research Engineer をやっている中川です.普段は論文読んだり,機械学習モデルを実装したり,インフラを構築したりしています. 10/27-11/2 に韓国で開催された ICCV2019 に Researcher の白川と参加してきたので簡単に報告します. Summary 過去…

ABEJAの技術スタックを公開します(2019年11月版)

よくエンジニアの方にご質問いただく `ABEJAってよく聞くけど、実際どんなことやってるのかよくわからない` という点をクリアにするために、事業内容と技術視点でのABEJAの取り組みを紹介したいと思います。ABEJAに興味のある方や、未来の一緒に働くメンバー…

数千人規模の自社イベントで顔認証活用サービスを作ってデリバリーした話 (ABECOIN)

はじめに こんにちは、ABEJAの大田黒(おおたぐろ)です。最近は、一ヶ月100kmを目標にランニングしたり、POとユカイな仲間たちと一緒に小売店舗向けのIoTxAI活用サービスの開発を進めているエンジニアです。前回の記事からだいぶ間が空いてしまいましたが、久…

機械学習の研究開発が捗る個人的BGM10選

どうも、緒方(@conta_)です。 機械学習プロジェクト捗っていますか? 多くの人がPoCで疲弊しているという噂をよく耳にします。 機械学習の研究開発プロジェクトのうち10%がアルゴリズム検討、40%はデータ整形と探索、25%が実験で25%はレポーティングだと言わ…

ノイズのある教師データを用いた機械学習に関する研究サーベイ

こんにちは、Research Internの荒尾(@karolis_ml)です。 日進月歩の勢いで研究が進んでいる深層学習ですが、教師あり学習でもっとも大事なデータのアノテーション、応用分野ではまだまだ大変ですよね。例えば、犬の写真から犬種を判断する分類器を作ろうとし…

Terraform workspace を駆使しつつ assume-role + MFA 対応する

ABEJA で Research Engineer をやっている中川です.普段は論文読んだり,機械学習モデルを実装したり,インフラを構築したりしています.ABEJA ではインフラを構成する AWS に対するアクセス制御を容易にするため,以下の概念図のように権限だけを管理する…

急増するメンバーの名前と顔が一致しない。なんかいい方法ない...?ということで。“テクプレたちの遊び場” ABEJA Hackday#1

仕事はしない。まる1日ハッカソン 「日々の業務に忙殺されていませんか?」 とある朝会のメンバーからの問いかけで、ドキリ、とする社員たち。 国籍や性別にとどまらず、技術、ビジネスの素養を持った個性あふれるメンバーがABEJAには沢山集まっています。自…

効率的な教師データ作成(アノテーション)のための研究サーベイ

どうも緒方@conta_です。 みなさんAI頑張ってますか? きっと昼はGPUサーバーを回して、夜は結果待ちでビールサーバーを回してる人が多いことでしょう。 機械学習を実際のプロダクトに活用する場合、自分が解きたいタスクがそのままオープンなデータセットで…

メンバーと社長が対話した。ABEJAの掲げる「テクノプレナーシップ」って?

遠い存在にもみえる「テクノロジー」と「リベラルアーツ」をかけあわせた意味は?ABEJAが掲げる「テクノプレナーシップ」という言葉の意味をめぐり、社長とメンバーが改めて対話しました。

双曲空間でのMachine Learningの最近の進展

ABEJAでReseacherをしている白川です。 以前、Poincaré Embeddingsという双曲空間への埋め込み手法をご紹介しました。当時、木構造データを5次元の空間に精度良く埋め込めるということでかなり話題になったのですが、その後双曲空間での機械学習手法が多数研…

サンタクロースとサンタコスを見分けるDeep Learningモデルをサービス化してみた

この記事はABEJA Platform Advent Calendar 2018の24日目です。 はじめに どうも、緒方です。 世はAI戦国時代、皆さんの会社ではAI活用進んでいますか? 自分たちのプロダクトでDeep Learningを活用する際、データ収集からアノテーション、学習モデル作成や…

KDD 2018 に参加してきました

ABEJAでResearcherをしている白川です。 8/19-23にロンドンで開催されたKDD 2018に参加してきたので、目についた内容をかいつまんで報告させていただこうと思います。 とくに目についたこと 中国系の台頭が目覚ましい。参加者、企業ともに中国系が支配的で、…

SpotinstとECSを組み合わせたら気付けばContainer as a Service with Spot Instanceができてました

こんにちは。ABEJAのインフラを担当している村主です。 昨今インフラ界隈で流行っておりますKubernetesに全振りしたい気持ちで仕事に励んでおりますが、サクッと使うにはKubernetesは重くて、ECSが軽いのでECSも使っています。 まずはじめにSpotinstについて…

Jetson 上で Docker イメージをビルドするのが辛かったので EC2 上にビルド環境を作った

ABEJA の Platform エンジニアの小笠原です。 ABEJA Platform は Cloud 環境のみならず Edge 環境でも推論機能を提供していますが、正式にサポートしている Edge device として NVIDIA Jetson があります。 ABEJA Platform は、ユーザーコードの実行を Docke…

サンフランシスコにあるテック系企業のオフィスにお邪魔してきました

gcp

先月末に開催された Google Cloud NEXT 2018 に行ってきました。 せっかくなのでサンフランシスコにある、いくつかのテック系企業のオフィスにお邪魔してきました。 今回訪れた企業 Apple Google Spotinst Netlify Github Apple まず、サン・ノゼまで足を伸…

Uberのような配車サービスは海外の観光客とって必須なサービス。というのを体感した

ABEJAのSRE/インフラエンジニアの村主です。 今回、サンフランシスコでGoogle Cloud Next '18 が行われていたので行ってきました。その際にUberの乗りまくって体感したことを共有します。 Google Cloud Next '18 やサンフランシスコのネタはもっとあるので、…

より良い機械学習のためのアノテーションの機械学習

ABEJAでリサーチャーをしている白川です。 皆さん、アノテーションしていますか? 私はしています。アノテーション、自分でやるのは大変ですよね。 AIというとモデルの学習に注目されがちですが、もしかしたら、アノテーションはAI開発においてモデル開発以…

ABEJAリブランディングのデザインプロセス

去る2月22日、ABEJAは大規模AIカンファレンス「SIX 2018」を開催し、その基調講演でコーポレート・リブランディングを発表しました。 本記事では、この発表に至るまでのブランディングプロジェクトの「舞台裏」を、アートディレクターの視点からご紹介します…

CVPR2018 1000本ノック!(なお37本)

はじめまして。ABEJAでリサーチャーをやっている藤本です。 今年もCVPRの季節がやってきました。CVPRとはコンピュータビジョンに関するトップカンファレンスです。毎年規模が大きくなってきており、今年は3300の論文投稿があり、979件がacceptされました。ま…

serverlessで作る外形監視

エンジニアの鎗水です。 ABEJA Platformの機能は様々なAPIによって支えられています。 今回はそれらのAPIに対し行っている外形監視について紹介します。 今回紹介する外形監視は、ユーザーの利用シナリオに沿って行われます。 ABEJA Platform上の特定のresou…

Kubernetes x AWS x GPUにハマった話

tl;dr 長文なので3行で kubernetesとAWSとGPUは超える壁が多かった。やるならkubeadmがオススメ。 kubeadmでcloud-provider=awsの手順を後半に記載 はじめに ABEJAのサービス系インフラを管理しているインフラエンジニアの村主です。 コンテナ周りは割とECS…

pandas DataFrameをもっと自由にJOINしよう!

データエンジニアの千葉です。 今回は、データ分析の必須ライブラリ「pandas」について、 データフレーム結合機能 mergeと 自作の拡張ライブラリの話を書いています。 苦しみポイント 先日、2つのpandas.DataFrameを、こんな感じで結合する必要がありました…