這是什麼?
程式週記主要內容如下:
Gihub project 介紹:
- 主要會貼一些github,但是會盡量寫上一些有用的評語(或是我容易想到的關鍵詞)幫助以後查詢
網路文章心得:
- 會寫些心得,強迫自己閱讀.
“程式週記”並且定期週期性更新.
大部分內容在我的twitter都會有,這邊只是將一些簡單的心得與感想註解一下.
本週摘要
真是一個瘋狂的禮拜,每天都是滿滿的會議.見識了很多特別的人,也了解了許多商場上的策略.很開心能有這樣的機會了解與參與公司在擴張與尋找合作夥伴的機會.
在學習上,也開始能夠參加公司內部 Macine Learning 的讀書會. 希望能花上更多時間來好好學習.
Go
uber/cherami-server: Distributed, scalable, durable, and highly available message queue system.
Uber 將他們的 Task Queue - Cherami 開源. 原本 Uber 是使用 Celery (Python) 作為他們的 task queue . 由於業務的增加,對於 HA 的需求增加,於是用 #Golang 重寫成過,
並且與 Uber 許多好用的套件 TChannel (管 RPC) 與 RingPop (負責 Health Checking 與 Membership ) 結合在一起.
成為一個具有 Distributed, scalable, durable, 跟 highly available 的 task/message queue 系統
說明的部落格在這裡
Goroutine leak
Goroutine leak #golang 這篇文章敘述了再使用 goroutine 的時候經常呼叫了卻沒有跑完而造成 memory leak
Go 1.8 development stats
Golang 二月將要發行的 1.8 目前開發的狀況!!
Go 1.8 Performance improvements on ARM (RasPi)
有人在 reddit 上面丟出 #Golang 1.8 針對 RPI (Raspberry Pi) 跟 1.7.4 來比較,平均效能能高出一倍左右.
Dataman-Cloud/swan: A Distributed, Highly Available Mesos Scheduler, Inspired by the design of Google Borg
Swan 是一個用 Golang 寫出的 mesos 資源管理器套件. 參考了 Borg 裡面的精神.
作者並且在 Reddit 上面寫了兩篇來介紹了如何透過 Golang 來寫另外一套類似 Mesos 的資料管理器,文章不僅僅有介紹了身為”資源管理器”所需要的功能與面向,也介紹了該如何透過 Golang 來實作 Mesos 資料管理器.
主要推廣的 Golang Package Dataman-Cloud/swan
:
github.com/Dataman-Cloud/swan
教學文章整理:
Python
Android/JAVA/NODE.JS/Scala
Cassandra backup script on linux system
Use nodetool
to backup cassandra DB.
Docker
Kubernetes
kubernetes-incubator/kompose: Tool to move from docker-compose
to Kubernetes
幫你把 Docker-Compose 的機制放到 Kubernetes 上面,更容易來部署 Kubernetes 的 Pods .
iOS/Swift
其他程式語言
論文收集
Apache Hadoop YARN: Yet another resource negotiator
Morning Paper 是一個會每天讀一篇論文,然後幫你寫導讀跟介紹的網站. 裡面論文的精彩程度是每個做軟體工程師不可不讀的.
之前一系列的 Deep Learning 之後,作者準備要來好好讀讀分散式系統了. 所選的第一篇論文就是這篇 Hadoop YARN 的論文.
YARN 是從 Hadoop 2.0 之後從 Hadoop 中抽出來的架構.本篇論文裡面的 YARN 還無法解決 SPOF . (Hadoop 2.4 之後有支援 HA)
本篇論文也有討論到底 Mesos 跟 YARN 有什麼差異:
Mesos -> Offer-based approach YARN -> Request-based approach
同場加映:
有沒有辦法把 Mesos 跟 Hadoop YARN 一起用呢? 可以看看這篇文章
網站文章
资本寒冬,你真的懂怎么裁员吗?
對照 H 公司,這篇文章真的很有趣
各大互联网公司架构演进之路汇总
將中國大陸的比較大的互聯網架構演進文章都收集得好好的.