仕事やプライベートで調べたことのメモ書きなど(@札幌)

仕事やプライベートで調べたこと、興味ある事のメモ書きです。2016年4月から札幌で働いてます。※このブログは個人によるもので、団体を代表するものではありません。

勾配ブースティング (Gradient Boosting) について勉強する

はじめに 機械学習での回帰や分類問題に適用されるアルゴリズムで、勾配ブースティング (Gradient Boosting) とやらがなかなかよいらしいというのをいろんなところで見かけたのでちょっとお勉強。基本的には同じっぽいので、以下では回帰問題を前提にして考…

Pythonのloggingでログが重複して困った話 [fbprophet]

Pythonでログが重複する話は比較的よくある模様。自分で作ったLoggerでログが重複してしまったのであれば以下のようなものも参考になるが・・・。 uyamazak.hatenablog.com今回はいろいろ調査した挙句、インポートして使っているライブラリであるfbprophetに…

C#でのAzure Functionsの呼び出しにはまった

Azure Functions(HttpTrigger)で何らかのFunctionsを追加すると、通常は、 https://xxxxxx.azurewebsites.net/api/xxxxx的なURLが作成されます。で、以下のコードを書きました。 WebClient wc = new WebClient(); string url = "https://xxxxxx.azurewebsite…

PythonでAES暗号化/復号(PyCryptodomeにするときに必要な変更)

以下を参考に、Pythonでの暗号化復号化を実施。かつ、PyCryptodome の方がいいということで試してみました。qiita.com必要な変更は以下。 cipher.encrypt(raw.encode('utf-8')) return self._unpad(cipher.decrypt(enc[16:]).decode()) 後者のself._unpad追…

Azure Functionsで環境変数を取り扱う(Python編)

Python上のコードとしては、通常の環境変数を取り扱うように書ける模様。 以下を参考に対応。 note.nkmk.meそして以下を参考に、Azure Portal上で環境変数を設定します。 qiita.com

WSL上のdocker engineの試行錯誤

自分がやろうとしていることがdocker for windowsだとうまくいかそうだったので、WSL(ubuntu)上のdockerについて試しました。qiita.com上記を試すも、以下にハマり・・・。teratail.comで、docker.io でなく、docker-ceを使うべし、というのをどこかで発見し…

Azure FunctionsでPythonを使うメモ(LinuxイメージのFunction追加&pyodbc&fbprophet編)

(2019/1/23訂正) LinuxイメージのAzure FunctionsへのFunction追加ですが、基本はバイナリ依存するようなモジュールはすんなり追加できません。 それでも、pyodbcだと「--build-native-deps --no-bundler」だけでいけたのですが、fbprophetに結構苦戦して、…

Azure FunctionsでPythonを使うメモ(LinuxイメージのFunction追加編)

前回、DockerImage編でうまくいきましたが、DockerImageだと従量課金を選べないので、なんとかFunctinを登録する方式を探していました。ただ、思わぬ苦戦。単純な関数でもうまくデプロイできずに困っていました。ところが、以下の投稿を発見して解決。 githu…

Azure FunctionsでPythonを使うメモ(Dockerイメージ編)

Azure FunctionsはAzureのサーバーレス環境。Dockerイメージを作りそれを実行するパターンでやります。投稿を書いている時点では、Pythonサポート自体もプレビューなので、さほど情報も多くないです・・。基本的なところは以下のページを参考に。 docs.micro…

Docker pullでエラー

なんと、これで解決!感謝! naughtldy.hatenablog.jp

「現場ですぐ使える時系列データ分析~データサイエンティストのための基礎知識〜」を読みながらRでやってみたことのメモ書き1

祝日を利用して「現場ですぐ使える時系列データ分析~データサイエンティストのための基礎知識〜」という書籍を読みながらRをいじってみました。 書籍のサポートページが以下にあり、サンプルデータのダウンロードができます。ちなみに、私は、Rはほぼ初心者…

「Azure DB for PostgreSQL/MySQL開発マネージャと話そう!(通訳&ビール有)」に行ってきました (2018/3/13@品川)

今日は久々に勉強会に参加♪ ossonazure.connpass.comそのメモ書き。 Azure Database for MySQL and PostgreSQLはコミュニティ版を入れていて、その最新を入れるようにしている。 OSS on Azureをしっかりやらないと、Azureのサービスが危うくなりかねない。 A…

AI・業務自動化展に出展(2017/11/8@幕張メッセ)

お仕事でAI・業務自動化展(10/8-10)に出展しました。 www.ai-auto.jp 大盛況 我々の出展もそれはそれは大混雑で、今回展示したソリューションの関心の高さがうかがえました。 RPA 今回、AI・業務自動化展というのに出展したのですが、まわりを某N〇〇グルー…

「MySQL最新情報セミナー 2017年10月 in 大阪」に参加(2017/10/27@大阪)

今日は大阪に別件で出張にきたため、以下のMySQLセミナーに参加しました! atnd.org資料は後ほど公開いただけるとのこと。 State of the Dolphin (Morgan Tockerさん) MySQL 8.0での新機能などを、サンプルアプリ実装 GIS機能の強化 独自実装を捨てて、Boost…

「Rancher Meetup #02 in Sapporo with Mautic Meetup」に参加(2017/10/12@札幌)

弊社札幌オフィスにて「Rancher Meetup #02 in Sapporo with Mautic Meetup」が開催されました。#1に引き続き参加しました。 rancherjp.connpass.com普段、ドッカーも、クーバネィテスもあまり使っているわけではないので、正直、実感のあるツールではないが…

No Maps Trade Showに出展(2017/10/11@札幌)

機会があってNo Maps Trade Show 2017に、北海道IT推進協議会の枠として出展しました。 no-maps.jp 残念ながら一般のお客さんはほとんど来なかったのですが、出展していた他の企業と名刺交換等ができたのはよかったです。 が、イベント(このTrade Show)自体…

札幌マラソンを走った(2017/10/1@札幌)、そして東京マラソンに当選!

札幌マラソン、無事感想しましたー。 satumara.shsf.jp結果は去年より伸びず残念。。。 だけれども、この大会、まだずっと続いてほしい大会。 なんといっても家から近い!フラッと行って、預け荷物もなく、 走って終了。運営の方にはいつもありがたく思って…

Sapporo Tech Bar #12開催(2017/9/22@札幌)

db tech showcaseのバタバタが終わり、また定期的にSapporo Tech Barを開催できる状況になりました!今回はこれ! www.db-tech-showcase.comGPUデータベース MapD と GISのお話し。 [20170922 Sapporo Tech Bar] 地図用データを高速処理!オープンソースGPU…

Y!mobileとUQ mobileの体感速度(@低速モード)

AUからUQ mobileに変更して、その後訳あって最近Y!mobileに変更しました。宣伝でも何もない、体感速度差について、書いてみました。 低速モードでの速度が全く違う 具体的に計測した訳ではないけれど、低速モードでの体感速度が全く異なります。UQでは普段低…

db tech showcase Tokyo 2017参加 (2017/9/5-7@秋葉原)

db tech showcase Tokyo 2017へ参加しました。参加したといっても自社のイベントなので運営側です。 www.db-tech-showcase.com 運営側としてはとりあえず終了して一安心しているのが正直なところです!今回も強力な講師の方々へ講演いただくことができ、また…

マラソン大会で聴くと盛り上がる曲の勝手なベスト3

マラソン大会に出られたことがある方は分かると思いますが、大きめの大会だと、沿道にブラスバンドやってくれる学校があったり、ラジカセで曲を流してくれたり。練習ではなく大会で聴きたい曲です。 以下のようなページもありました。 https://recochoku.jp/…

北海道マラソン なんとか完走♪

記録は? 北海道マラソンをなんとか完走。途中、暑かったり、涼しかったり。いずれにせよ疲れた。 https://hokkaido-marathon.com/2017/ 確認してみたところ、昨年より数分遅くなっており、グロスはなんとか4時間30分をきったものの、ネットタイムは4時間30…

Apache GeodeとApache Igniteについて調べたメモ書き2

先日書いた投稿に対して、ありがたくコメントをいただきましたので、紹介いただいた参照先を調べてみました。 takumats.hatenablog.com GridGainのページにある、Pivotal Gemfireとの比較記事 www.gridgain.com それぞれ商用版ですが、背後にはオープンソー…

Apache NiFi, Storm, Kafkaを利用して、ストリームデータ処理を体験しよう、に参加(2017/8/1@東京)

東京に出張するといろんな勉強会があって本当に楽しい! 今日は、前々から参加したかった、以下の会に参加しました。 futureofdata.connpass.comチュートリアルは以下をベース。 realtime event processing.0.2h · ijokarumawak/hdf-tutorials-ja Wiki · Git…

Wordpressのプラグインで Custom Permalinks 1.0.1 にバグ?

いつものルーチンワークとしてWordpressのプラグインバージョンアップを行ったら非常に焦りました!!!Custom Permalinksというプラグインなんですが、更新後、Webページが見られなくなるという事態に。。 ja.wordpress.org当該プラグインのページを見ると…

札幌視察の企業さんの来社(2017/7/某日)

先日、札幌への進出も選択肢として考えられている企業さんが、東京から進出した企業の一例として弊社を訪れてくださいました。面白い会社がどんどん札幌に来てくれるのは、とってもありがたいこと。 ぜひ札幌に決めて、拠点開設していただきたいものですね。…

北海道IoTビジネス共創ラボ 設立キックオフ&第1回勉強会に参加(2017/7/26@札幌)

掲題の催しに参加してきました。 iotbizlabo.connpass.com www.ecomott.co.jp https://www.facebook.com/hokkaido.iotbizlabo/ 最近この手の集まりは多いですね。どうやらこの「IoTビジネス共創ラボ」は、MSさん主導でやっている集まりのようです。 なので、…

Apache GeodeとApache Igniteについて調べたメモ書き

今日、訪問先でお話ししていて、Apache Geodeが話題になりました。そういえばApache Igniteは少し聞いたことがあったのですが、Apache Geodeとの違いとはどういうところだろう?ということで少し調べたメモ書きです。 インメモリデータグリッド そもそも、「…

Sapporo Tech Bar #11開催 (2017/7/14@札幌)

db analytics showcaseがあったため6月はお休みをしたSapporo Tech Bar。OSCと日程が被ることで開催日程をずらそうかとも思ったのですが、運よくOracleの山崎さんに講演いただけることになり、無事開催のはこびとなりました。感謝です。 www.db-tech-showcas…

真駒内花火大会に行ってきた (2017/7/8@真駒内)

近所でやっている花火大会。 www.makomanai-hanabi.com 結構な値段するので、有料の席には行ったことはないのですが。。。 いつも家のすぐそばでかなり遠目に見ていたのですが、今回は真駒内公園まで歩いて行ってみました。昔、二子新地(川崎市)に住んでいた…