Colaboratory上で pysparkを使用してDeltaフォーマットのデータを読み取るサンプル
Databricksの標準データ形式のDeltaフォーマットのデータをGoogle Colaboratory上で扱ってみたいと思います。 Azure EventhubsのデータについてはADLS...
0
0
Comment0
19 search resultsShowing 1~19 results
Stocked
You need to log-in
Colaboratory上のPySpark で Azure EventHubs から eventhubs フォーマットでデータを取得する方法
pyparkのeventhgubsフォーマットを使ってAzure Eventhubsからデータを取得してみたいと思います。 Microsoftが提供しているOSSのsparkでのプラグインとして...
0
0
Comment0
Azure EventHubsのKafka通信をGoogle ColaboratoryでKafkaConsumerを使って手軽に確認する方法
本記事では、Google Colaboratoryを使って、KafkaConsumerでAzure EventHubsのKafka通信をすぐに確認する方法を紹介します。 1: Azure Eve...
0
0
Comment0
Rubyで日本の祝日を取得（iCalendar方式）
Google Calendarで公開されている日本の祝日のiCal形式のファイルを読み込んで取得する。 事前準備 icalendar の gem をインストールするか、Gemfileに追加して ...
0
1
Comment0
[Ubuntu Desktop] curlコマンドで死活監視して落ちていたら通知を表示するワンライナー
http://xxx.xxx.xxx.xxx:8000/ 宛にcurlで60秒間隔で死活監視を行い、接続できなかった場合に notify-send でデスクトップ通知するワンライナーです。 開発...
0
1
Comment0
Nuxt3入門チュートリアル(2)
概要 Nuxt3ではVue3の機能が使えるようになっているので、Vue3の機能をNuxt3で実際に試していきます。 前提 上記に記載している、「Nuxt3実行環境の準備」からNuxt3のサンプル...
6
2
Comment0
Nuxt3入門チュートリアル(1)
概要 開発環境を特に用意せずにブラウザ上でNuxt3フレームワークを入門できるものとなります。 公式ページ に書かれていることがほとんどですが、チュートリアル的にまとめてみました。 Nuxt3実...
12
8
Comment0
ElasticBeanstalkのRuby環境で軽微な修正を反映させるためにPuma再起動する方法
概要 マネージドサービスの場合、通常のデプロイ手順だとEC2自体が別のものに切り替わったりして反映までに時間がかかるため、そこまでの手順を踏まずに軽微な修正を反映したい場合の手順を記載します。 ...
0
0
Comment0
AWS Elastic Beanstalkで環境作成時の注意点
発生していた現象 AWS Elastic Beanstalk からアプリケーションを作成しようとすると「The instance profile aws-elasticbeanstalk-ec2...
5
3
Comment0
git submodule updateで進捗状況を表示する
問題 git submodule update コマンド使用時に、対象の外部サブリポジトリの容量が大きい場合、何も画面表示が変わらないまま固まってしまう（ように見えてしまう） 解決方法 --pr...
1
0
Comment0
Amazon CloudFrontについてメモ
はじめに AWS サービス別資料 にある Amazon CloudFrontの概要 の資料をもとに社内で勉強会を実施しましたので、そのメモを共有します。 Amazon CloudFrontについ...
0
0
Comment0
VMWare ESXiでUbuntuのファイルシステムサイズをオンライン拡張する
VMWare ESXiでHDD容量を増量後、サーバ再起動せずにOS側に反映したい場合の手順を記載します。 環境 VMWare ESXi 7 OS: Ubuntu 20.04 手順 1.現在の容量...
38
33
Comment0
Redmine DMSFプラグイン1.5.2〜2.4.4で発生する不具合を修正しました
概要 Redmine DMSFプラグインの特定のバージョンで発生していた不具合を修正しました Redmine バージョン 3.4.0以上を使用していて Remine DMSFプラグイン バージョ...
0
1
Comment0
ARM版JDKでPlayFrameworkを実行する方法
本記事の環境 OS: Mac OS Big Sur 11.1 JDK: Zulu11.45+27-CA (build 11.0.10+9-LTS) 64bit ARM sbt: 1.4.7 Sc...
4
3
Comment0
PlantUMLソースコードリーディング(1)
概要 PlantUML の仕様をソースコードから分析したくなったため、現時点（2020/01/03）でどのような設計で実装しているのか追いかけるための足ががりとなるポイントをまとめておく。（個別...
3
0
Comment0
Ubuntu20.04のNautilusでssh・sftp経由でファイルを閲覧する
Ubuntu 20.04でファイルブラウザNautilusでssh、sftp経由でファイルを閲覧したい場合、あらかじめ以下を実行する。 sudo apt install gvfs-backends
1
0
Comment0
Ubuntu20.04で最新のSamba4をビルド
準備 $ sudo apt update $ sudo apt upgrade 最新Sambaダウンロード $ curl -LO https://download.samba.org/pub/s...
2
2
Comment0
NginxでPassenger+GridFSのビルド
nginx + Passenger を使う場合は gem install passenger によるpassengerインストール後に使用できる passenger-install-nginx-...
1
1
Comment0
RubyのThread#[]=メソッドの注意点
RubyのThread#[]=メソッドについて RubyのThread#[]= メソッドでは、スレッドごとに固有の値を保持することができます。（JavaでいうThreadLocal のようなもの...
7
3
Comment0
19 search resultsShowing 1~19 results
Qiita is a knowledge sharing service for engineers.
- You can follow users and tags
- You can stock useful information
- You can make edit suggestions for articles