technology

AWS Lambdaはプログラム全体ではなく、ハンドラの関数を実行する

Q. Lambdaって、毎回.pyを実行するんじゃないの? A. ハンドラの「関数」を実行する メッセージそれぞれに対して print("message: ", message["text"], message["ts"], time.time() - float(message["ts"])) と時間差を取得してみても、正しい時間差が取れて…

AWS Lambdaに自作プログラムをアップロード(再)

一つ上のディレクトリに戻ってzipを作ります。 cd ../ zip -r9 layer.zip python そしてそのzipファイルを、lambdaのレイヤーに登録し、 実行できているのかを細かく確認するために、kanehosi_tukeai.pyを import ipadic import jaconv import MeCab import …

AWS Lambdaと同じ環境でLambdaのレイヤーを作る方法2

Q. Dockerに入れたみたいだけど、何するんだっけ? A. pip install 今度は、 cd var/app/tmp を実行し、ここで mkdir python としてみます。 mkdir: cannot create directory 'python': Not a directory エラーメッセージですね。検索しましょう。「cannot c…

Lambdaと同じ環境でLambdaのレイヤーを作る方法1

Q. インストールしたのに、なぜimportできないの? A. インストールした環境が、Lambdaと違うから インストールしたはずなのに…と思いながらもエラーメッセージが出たので検索します。「Unable to import module」で検索すると、Python Lambda 関数の「モジ…

AWS Lambda に50MB以上のレイヤーがアップロードできない場合の一つの対処法

前の記事までで Slackからメッセージを取得する 文が五・七・五かを判定する Slackにメッセージを送信する 定期的に行動(処理)を実行する 全てが可能になりました。必要そうな能力は全て手に入れたはずです。この記事では、それらを組み合わせます。 後は…

AWS Lambdaの定期実行

前の記事で、AWS Lambdaで自作コードを実行するための手順がわかりました。この記事では、Lambda関数を定期実行します。 Q. Lambdaに乗せた関数を、定期的に実行するにはどうすればいいの? A. トリガーにCloudWatch Eventsを設定しよう 【Slack自動保存】サ…

AWS Lambdaでunable to import module no module named 'requests'

Q. requestsはどうやってimportするの? A. importしたpythonディレクトリをzipでレイヤーに追加しよう 今回はrequestsがimportできていなさそうです。多少Pythonをやっていればpip install requestsとかpipenv install requestsとかすれば良いと思うかも知…

AWS LambdaでUnable to import module ‘lambda function’: No module named ‘lambda_function’

前の記事で、Lambdaに自作プログラムをアップロードしたらエラーが出ました。この記事では、そのエラーを解決します Q. Unable to import module ‘lambda function’: No module named ‘lambda_function’って出たんですが… A. ハンドラを設定しよう エラーメ…

AWS LambdaへPythonコードをアップロード

前の記事で、AWS Lambdaで関数が実行できました。この記事では、自作プログラムをLambdaで実行しようとします。 ところで… Q. これ無料ですか?(もしかして手遅れですか?) A. 無料ではないけどめっちゃ安い そして、どのくらい時間とメモリを使ったのかも…

Rust、何もわからない... #4を開催しました

エンジニアの松本です。Rust、何もわからない... #4 (2022/10/06 19:00〜) を開催いたしました。 今回は株式会社エモーションテックから門田見 侑大さんにご登壇いただき、estieからは私とhige_yy (@kia5n_y2_mud) / Twitterが登壇しました。 それぞれのスラ…

AWS LambdaでPython実行

前の記事までで、プログラムに必要な部品は完成しました。この記事から、プログラムを定期的に実行します。 Q. 定期的にPythonプログラムを実行するには何を使えばいい? A. 例えばPythonファイルをAWS Lambdaに置いて… Q. AWS Lambdaって何? A. サーバーの…

Pythonで、Slackに投稿する方法

「これをSlackのメッセージの取得の次にやれよ!」という声が聞こえてきそうですが、ゆったりあちこちに手を出します。何をどういう順でやると良いのかも、慣れているから分かる問題です。分からなくても順番にやれば(手戻りが発生して時間はかかるかもしれ…

MeCabを使った575判定

前の記事で、形態素解析器を使って、日本語から読みを取得できるようになりました。この記事では、その読みが575かどうかを判定できるようにコードを書きます。 Q. 575判定はどうすればいい? A. 音を数えて、文節の区切れと575が一致するかを見よう 前回の…

Pythonを使った、形態素解析器での読みの取得

この記事から、能力2「文が五・七・五かを判定する」の獲得を目指します。 Q. 漢字の読みはどうやって見つけるの? A. 形態素解析器(例えばMeCab)を使うと見つけられる 松尾芭蕉の有名な「古池や蛙飛び込む水の音」を575だと判定するのは、大人の日本人に…

1分以内のSlackメッセージの取得

前の記事で、Slackのメッセージの取得できました。毎分動かそうと思うので、2分以上前のメッセージは必要ありません。そこで、この記事では1分以内のメッセージのみに絞って取得します。 Q. 毎分動かすけど、1分以内のメッセージだけにできない? A. oldest…

Pythonを使った、Slackからのメッセージ取得3/3

前の記事で、Slackのメッセージのtokenを手に入れました。この記事では、Slackのメッセージの取得に必要なもう一つの引数である、channelを手に入れ、Slackからメッセージを取得します。 Q. さっきのプログラムにtokenを貼ったら動く? A. まだ。チャンネル…

Pythonを使った、Slackからのメッセージ取得2/3

前の記事で、Slackのメッセージの取得コードの概形ができました。この記事では、Slackのメッセージの取得に必要なtokenを手に入れます。 Q. tokenはどうすれば手に入る? A. appを作るとOAuth Tokens for Your Workspaceにある やっとArgument(引数)まで来…

Pythonを使った、Slackからのメッセージ取得1/3

前の記事では、タスクを分解し、まずSlackからメッセージを取得する必要があることが分かりました。 この記事からは、Slackからメッセージを取得するのを目指します。 能力の獲得 能力1: Slackからメッセージを取得する Q. Slackのメッセージを取得するには…

AWS Lambdaで形態素解析するためのタスク分割

お久しぶりです。AWS Lambda で形態素解析〜句を詠めば鐘が鳴るなりスッコココ〜 - estie inside blogの著者です。前回の記事では、必要な作業を簡潔に述べました。このようなブログをよく見ます。便利で読みやすく、必要な内容が詰まっています。多くの人が…

行ってよかった?RubyKaigi 2022に参加したメンバーに教えてもらった

エンジニアの松本です。RubyKaigi 2022に参加したメンバーにRubyKaigiの様子を教えてもらいました。 メンバー 一言 eririn 今回のRubyKaigiはスタッフとして参加した。 toku Ruby歴は社会人になってから数年。学生時代はLLVMとか少し触っていた。RubyKaigi 2…

estieのありたい姿とは

estieで取締役CTOを務める岩成(Nari / @iw_tatsu)です!毎日ブログ投稿をするestie連続ブログ企画が今月は行われていましたが、そのバトンをつなぐ長いリレーの締めくくりの記事となります! 走り出す前に少し連続ブログ企画の記事を振り返ってみると、以…

estie のデータを可視化 〜IT 企業が集まる駅はどこだ〜

はじめに DPL Unit でソフトウェアエンジニアとして働いている和田です。最近、やっとこさ緑コーダーになりました。 さて今回の記事は、「estie が取り扱っているデータの可視化に取り組んでみた」という内容になっております。estie でどんなデータが使われ…

オフィス不動産から紐解く東京の焼肉事情

こんにちは!estieの丸島です。 estieではデータパイプラインと呼ばれるデータ基盤プロダクトのエンジニアリングマネージャーとソフトウェアエンジニアの二足のわらじを履く生活をしております。日々精進。 ところで皆さん、今日が何の日かご存知でしょうか…

2年目QAエンジニアは何に取り組んでいるのか?

estieでQAエンジニアをしている粕谷(@ma_cho29)です。 趣味でボディビルをしており先月行われた大会では3位入賞しました!!(誰か褒めてください) メンバーからは「まちょ」の愛称で親しまれています。 今回はQAエンジニアはおろかIT業界すら未経験でest…

CPythonのソースコードを読んでみた

estieでソフトウェアエンジニアをしている安東です。普段の業務で関わっているのはPython製のシステムが中心ですが、過去データを分析するのにちょっとRustを使ってみたりもしています。 こうやって普段からお世話になっているPythonですが、中身がわからな…

創業以来継ぎ足されたAWS環境をTerraformで統治した

estie VPoEの青木信(kirin_shi)です。 【 プロフィール】 青木 信(あおき しん) 1991年生まれ横浜育ち。 東京大学数理科学研究科修士課程を修了後、2016年にアクセンチュア デジタル(当時)に入社。 "ビッグデータ"を軸足に、官公庁関連のデータ基盤刷新…

AWS Lambda で形態素解析〜句を詠めば鐘が鳴るなりスッコココ〜

はじめに 今日は8月19日、俳句の日ですね。私は575判定が得意で、575のセリフが載った漫画のコマの画像を切り抜いた数なら世界一を目指せると思っています。世の中にはたくさんの575が存在するのに、多くの575は無視され忘れられていく……。私はこの由々しき…

元不動産屋が第一回TOPSIC SQL CONTESTに参加してみた話

初めに こんにちは、estieの田中(@rikutanak)と申します。 この8月に8名の大変心強い方が入社して凄いなぁ(小並感)と思っていたのですが、自分もこの8月でestieに入って3年を迎えていたことに気づいた今日この頃です。社内的には結構初期からいるにも関…

現役エンジニアが空室率と潜在空室率を解説

2022年1月からestieで働いているたにしです。私は知人のリファラルでestieと知り合ったのですが、それまでは不動産に馴染みのない生活を送っていました。オフィスビルって灰色だし、なんだか縁遠い感じがしますよね。 ところが実際働き始めてみるとドメイン…

Ruby が YJIT でなんで速くなるのか? Lazy Basic Block Versioning をサクッと理解してみた

estie でソフトウェアエンジニアをしている徳永(@yTo_9)です。 estie では Ruby を書いたりTypeScriptを書いたりしています! estie 夏のブログ祭りにかこつけて、せっかくなら普段は追わない部分だけど、気になっていたYJITなるものを深掘りしてみようと思…

© 2019- estie, inc.