遅延が発生するIoTデバイスの時系列データを扱う際のアプローチ
時系列データ - Qiita Advent Calendar 2025 - Qiita データサイエンスというよりはデータ基盤や分析寄りの話ですが、いつか書いておきたいネタにちょうどよい時系列デ...
3
0
Comment0
24 search resultsShowing 1~20 results
Stocked
You need to log-in
EmbulkでJDBC Driverを使ってSnowflakeにprivate key接続するときにハマったメモ
結論 今回inですがoutでも多分同じノリで行けると思われる # 動かない in: type: jdbc driver_class: net.snowflake.client.jdbc.Snow...
2
0
Comment0
AthenaからSnowflakeへ移行するときの躓きポイント集
に一部書いたのですが、検討の末にデータ基盤をAmazon AthenaからSnowflakeへ移行しました。 構成の紹介は別途行うのですが、涙なし（？）では語れない移行の躓きポイントを紹介させて...
5
4
Comment0
働いている会社がITエンジニア採用の負のループに陥っていたので、メンバーの立場から改善を試みた
前置き どうも、候補者の立場でテンプレート文のスカウトが来ると残念な気持ちになるみゅーみくすです。 そんな採用へのアンテナが高い筆者だからこそ、自社の採用でもそんなことはして欲しくない、していよ...
1
1
Comment0
ゆるやか成長スタートアップの小さなEnabling SRE的活動
SRE Advent Calendar 2023の3日目の記事です。 少し前に書いたSRE NEXT 2023 IN TOKYOにオフライン参加したら一回り成長できた #srenext の結果、...
3
0
Comment0
EC2でWindows Server 2025の英語版amiを日本語化したらハマったので日本語版を最初から使った方が良い
ラノベのタイトルっぽくなってしまった...ハマった供養します。 結論 以下のAMIを選択 Microsoft Windows Server 2025 Base ami-0f2b7d16d1c8c...
2
1
Comment0
構築後にSnowflake環境をTerraform化してハマったところ v0.99
この投稿はSnowflake Advent Calendar 2024の6日目です。 から早2ヶ月。（切り替えからは3ヶ月） 上記の通り切り替えて3ヶ月が経つので、「活用が捗った」的なことを書け...
4
2
Comment0
データ基盤をAmazon AthenaからSnowflakeに移行しました
に続いて書きます。 結論 とりあえずAthenaからSnowflakeへ無事に移行完了 Snowflakeならではの活用はこれから なぜ移行したか S3+Athena構成の弊社データ基盤の限界が...
4
1
Comment0
LambdaでSQLの結果をDatadogにメトリクスとして送信し異常検知を行う
Datadogのアドベントカレンダー書くぞーと思った際に、いいネタ無いかなと振り返ったところ結構前にやったことですが、タイトルの件を思い出したので書いていきます。 シンプルな内容ですが参考になる...
4
1
Comment1
社内でAWSのモブコスト分析会を実施した〜AWSコスト削減 天下一武道会 観戦〜
社内でAWSのモブコスト分析会を実施した〜AWSコスト削減 天下一武道会 観戦〜 背景 第1回 AWSコスト削減 天下一武道会 でモブコスト分析というのが紹介されていたので、社内の月1開催のイン...
1
1
Comment0
S3+Athena構成の弊社データ基盤の限界が近い
こちらのアドベントカレンダーの記事です。 近々書くような気がするので、先駆けてアドベントカレンダー駆動で書いていきます。 スタートアップのデータ基盤に興味がある人には刺さるかもしれません。 TL...
9
3
Comment0
フレッツ光のDNSサーバー使うかつ特定条件下でterraform planできなくなる
分かればシンプルなのですが、解決策にたどり着くまで、色々あったので書いていきます。 「そうはならんやろ」「なっとるやろがい!!」案件です。本質的にはまだ謎な部分もあるのですが... TR;DR ...
1
0
Comment0
Amazon AppFlowでGoogleAnalyticsのデータ連携に苦戦している話
GMSでインフラエンジニアないしデータエンジニアをやっているみゅーみくすです。 ちょうどアドベントカレンダーの時期になったのでマイナーですがタイトルについて書きます。 記載する内容は執筆時点とな...
2
1
Comment0
EKSのpodをSQSのキューに応じてスケールさせる
背景 弊社ではAWSのEKSを使い、kubernetes環境を運用しております。 IoTデバイスからデータを受け取った際、直接dynamoDBには書き込まず、マイクロサービスの一環としてSQSを...
8
3
Comment0
社内用語ワードウルフをやってみたら盛り上がった！
社内交流+ドメイン知識獲得を目的に社内用語ワードウルフを開催しました。 背景 技術組織内にサブプロジェクトとして組織開発というものがありその活動の一環です。 1Qは技術組織内が主でしたがKPTで...
1
0
Comment0
Redashで行ごと列ごとに異なるリンクを設定する
前置き Redashで契約件数KPIを可視化したいとします。 作りたい表をこんな感じだとします。 n月の契約件数実績 国 新規 解約 継続 日本 40 4 500 アメリカ 5 1 20 … 件...
1
0
Comment0
EKSのKubernetesバージョンを1.15>1.19へアップデート
目的 サービス基盤として使用しているAmazon EKS の「kubernetesバージョン1.15」のサポート終了が2021 年5月3日と近いため作業時の最新リリースバージョン1.19にアップ...
6
2
Comment0
eksctlで作成していたEKSリソースをterraformに置き換える
目的 EKSのKubernetesバージョンを1.15>1.19へアップデートにてeksctlで作成したKubernetesクラスタを作り変えるので、管理上都合の良いterraformに置...
7
1
Comment0
Linux初心者がやらかしたConfig編集ミス3点
なんだかんだでLinuxの業務経験が1年半になったので今までにやらかした~~(死にかけた)~~経験を書いていきます。 特に最近はオンプレだとBIOSレベルで操作できてたのが、クラウドだとできず詰...
0
0
Comment0
Ping-tでLPIC1合格しました
以前個人ブログに書いた記事の移植になります(2019/4/21) LPICはLinuxの資格で、似たようなものでLinuCがあり宗派があるようです。 会社よりWeb系移るならまずはコレとのことで...
4
3
Comment0
24 search resultsShowing 1~20 results
Qiita is a knowledge sharing service for engineers.
- You can follow users and tags
- You can stock useful information
- You can make edit suggestions for articles