レポート：「CircleCIの3000 万件のワークフローから得られたDevOpsに関する知見」 #devsumi2020 #devsumiC

概要

developers summit 2020に参加してcircleciのお話を聞いてきました。
タイトルの通り、CircleCIの持っているデータを分析してみたよと言うお話。
NetflixやFlickr等々、有名企業のこういったデータは公開されることが多いですが
全体的なデータってなかなかないので面白かったですね。

目次

セッション情報

• 13-C-2 02/13 11:05 ～ 11:50 CircleCIの3000 万件のワークフローから得られたDevOpsに関する知見
• デブサミ2020【13-C-2】CircleCIの3000 万件のワークフローから得られたDevOpsに関する知見 #devsumiC - Togetter

発表資料

dockerのmysqldbからテーブル毎のmysqldump＆リストア

概要

ローカル環境にて稼働するDockerのDB（MySQL）から全テーブル、全データのdumpを取得するシェルと
取得したdumpデータを全リストアするシェルです。

シェルを1本したためてコンテナに配置すればいいものを、
dockerコマンドのワンライナーで書いてしまった...
無駄に時間がかかりました。

目次

Poetryでお手軽yamllint環境を手に入れる（環境を汚さずに）

概要

全てはこのツイートで（ry

昨日、書いたこの記事（ https://t.co/kg1iCQqITC ）まんまのプルリクを会社で出したら「pipとかrequirements.txtとかマジ古いからやめれｗｗｗｗ」とか言われちゃったので調べてるんだけど
python周りはよくわからんな
～

— あとらす (@Lychee_jam) October 7, 2019

「最低でもpipenv、今ならpoetryがおすすめ」とアドバイス頂いたので調べて再度作成してみました。

ゴールは以前と同じで、pre-commitを使ってコミットする際に自動でyamllintの実行です。

前回の記事はこちら。

kitigai.hatenablog.com

目次

参考サイト様

• sdispater/poetry: Python dependency management and packaging made easy.
• Poetry: Python の依存関係管理とパッケージングを支援するツール | org-技術
• Poetryを使ったPythonパッケージ開発からPyPI公開まで - PYTHONIC BOOM BOOM HEAD

Poetryのインストールと初期セットアップ

概要

全てはこのツイートで語られてます。。。

昨日、書いたこの記事（ https://t.co/kg1iCQqITC ）まんまのプルリクを会社で出したら「pipとかrequirements.txtとかマジ古いからやめれｗｗｗｗ」とか言われちゃったので調べてるんだけど
python周りはよくわからんな
～

— あとらす (@Lychee_jam) October 7, 2019

くさるほど溢れてますが自身の備忘録を兼ねて。
インストールと初期セットアップのみです。入れてなにかやるとかはないです。

目次

参考サイト様

• sdispater/poetry: Python dependency management and packaging made easy.
• Poetry: Python の依存関係管理とパッケージングを支援するツール | org-技術
• Poetryを使ったPythonパッケージ開発からPyPI公開まで - PYTHONIC BOOM BOOM HEAD

pipでお手軽yamllint環境を手に入れる（venvで環境を汚さずに）

概要

20191010追記

pipは古いとアドバイスを受けてpoetryでやる方法に書き直しました。 こっちのpoetryの方を参考にしてくださいまし。

kitigai.hatenablog.com

追記ここまで

yamlファイルに対してのlinterが欲しいなと言う感じで環境を構築します。
pipを使って再配布可能な形でvenvで環境を汚さず構築します。

また、私はエンジニアの鏡なので怠け者です。
lintの実行を必ずサボってしまうので、pre-commitのgit hookでコミット時に自動的にlintが走るようにします。

目次

参考サイト様

• pre-commit
• adrienverge/yamllint: A linter for YAML files.