Toomore Blog

週一趕上了 COSCUP 第一期電子報 發送內容，這陣子一直在實作 Go web application，希望為一個簡單的發報系統，但包含開信、點擊追蹤。目前很簡陋的完成發信系統，也在這次的 COSCUP 第一期電子報實際使用。 關於電子報發送的流程是這樣的，首先需要電子報的樣板（template）、發送對象的清單（CSV）在後台操作的時候會將樣板上傳到 S3 存放、清單的部分會變成一個個 queue message 放到 SQS 。而發送的部分則是執行一個叫做 mailman 的 worker 去取 SQS 的 message 下來與 template 內容結合為信件內容後發送出去。通常這種大量發送什麼的一定會配合 go 的 goroutine ，所以在取 queue、Send mail 的部分就這樣處理。 最後就是與 Docker 結合， worker 在設計的時候要考慮到 config 的問題，一定不能寫死，要保持非常彈性的狀態，這樣再配合 docker-compose scale 的時候就可以很自由的增減 worker 發送。其實 config 的部分有想到可以透過類似 API 的方式去詢問 webserver 目前的設定值，有點像是 AWS EC2 的 Meta-Data 一樣。 實作的內容這幾天有補上 README 內容，說明一下目前的進度與目標。 其實我有好一陣子沒寫 Python ，但希望只是單純的因為目前一直在練習 Go 的關係，所以沒什麼機會去寫，多學一個語言後會發現有些事情或處理方式和語言沒什麼關係，既然沒什麼關係的話，如果開發速度差不多的狀態下，當然會傾向效能比較好的語言，現在看起來還滿多專案或是 startup 都轉向用 Go ...... 另外週五台北放颱風假，相對的證交所就沒有交易，之前在寫 gogrs 的時候有為是否開休市的問題寫一個簡單的 API ，放入要查詢的時間回傳開休市結果。通常一年的預定的放假、補上班日證交所都會公告，但是遇到颱風這種臨時公告的事件就需要一個額外的服務來同步修正，其實現在也還是人工的更新放假、補上班的 表 ，但這次是第一次完成更新。另外也把這服務申請一張 SSL 憑證，因為看到 Google Bot 來爬東西。 這禮拜三陸股暴跌，台灣股市也跌了快三百點，我...

這禮拜好像過的有點快，來紀錄一下做了什麼。 延續 上禮拜 提到關於 Docker-compose scale 的部分，看到很多 文章 分享都提到用 HAProxy / etcd 來處理，有一天晚上播著 Dockercon 2014 的內容，印象有人介紹這樣的組合應用，但是一時之間找不到哪段。這禮拜大部的時間都在趕其他東西，所以 Docker 的部分沒有實作練習的部分。 用 Go 實作一個 web application 的進度這禮拜剛好落在要使用 aws/aws-sdk-go 搭建一些服務，但初步看一下 aws/aws-sdk-go 的內容，實在有夠 low-level，有些部分都還要預先處理才可以拿來使用，所以只好自己再以 aws/aws-sdk-go 建一個自己常用的服務和一些比較快速使用的程序。 toomore/simpleaws 目前整理了 SES 、 S3 、 SQS 這三個服務。SES 簡化只要 sender、receiver、content 這樣就可以寄出去了。S3 完成簡單的 Put/Get object。而 SQS 的部分除了基本的 send queue messages 外還簡化 send batch 的部分。不過 aws/aws-sdk-go 還不錯啦，命名規則都是依照 aws docs 的名稱，有的時候我真的搞不懂 SDK 寫的用法，直接用關鍵字找都會找到最原始的內容。 這三個服務串起來應該就很清楚要做什麼了，之前在 COSCUP2013 接行政組長 的時候就有 作過 類似的服務，不過那是用 Python 寫的，這次還想要加入一些功能，之前做的只有將信發送出去，但之後的開信與點擊的追蹤都沒有，想說每年 COSCUP 或是其他的 conference 都會有類似的需求，所以建立一個服務來使用，一方面把最近在學的東西一次來個大驗收這樣。不過目前看起來還真的有好多流程要趕工，我是分三大部分：發信、接收開信/點擊、後台操作，但目前看起來只完成 20% 這樣 XD 這禮拜也花點時間整理 RSS feeds，有好一陣子沒時間把上面的文章消化完，在 github 上面看到有很多人整理所謂的 engineering-blogs ，自從 Google 把 Reader 關掉之後就轉移到 feedl...