顯示具有 mongodb 標籤的文章。 顯示所有文章
顯示具有 mongodb 標籤的文章。 顯示所有文章
2015年1月2日 星期五

MongoDB 開發筆記 - 替 Mongoose (Node.js MongoDB Driver) 送 patch 的經驗

›
大概 2014 年 11 月附近，下了班仍會抽空把玩 MongoDB ，當時就決定搭配 node.js 來把玩 :P 當時在挑選 Node.js MongoDB Driver 時，看到官方文件提到了 Mongoose ，就順勢把玩了幾下。 對於 nodejs - mong...
2014年12月29日 星期一

MongoDB 開發筆記 - 使用 MapReduce 進行 Matrix Multiplication (矩陣乘法) 運算

›
最近下了班有空時都會繼續專研 MongoDB 分析資料的部分，一開始完全都用 Aggregation ，實在是有一些實測的效能比 MapReduce 好很多，但對於一些較複雜的計算方式，一直用 Aggregation 反而會卡住或是增加資料結構的複雜度 Orz 總之，開始正式去寫...
2014年12月28日 星期日

MongoDB 開發筆記 - 在 MapReduce 進行 debug 的一些心得

›
有點久沒寫 blog 了！最近有空時就是把玩 MongoDB 或是嘗試送一些 patch ，所以反而就少寫一些筆記，因為都改成用 Code 啦 :P 最近玩 Mongodb MapReduce 時，碰到幾個問題跟需求： 碰到 mongod Out of memory 想...
2014年11月3日 星期一

[Linux] 架設 MongoDB Sharded Cluster 與驗證資料分散性 @ Ubuntu 14.04

›
今年年初時，把玩過 MongoDB Replica Set  ，也試過一些 Map-Reduce 計算等，最近終於又開始抽空實驗了 :P 當時看到不少 Sharded Cluster 搭建在 MongoDB Replica Set 身上，深感 process (server) ...
2014年10月29日 星期三

[Linux] 使用 MongoDB Aggregate (Map-Reduce) 實作共現矩陣(Co-Occurrence Matrix)及簡易的推薦系統 @ Ubuntu 14.04

›
這陣子查閱了一些推薦系統的作法，發現早在 2012 年網路上就有非常多 Apache Mahout 的使用心得，這一套已經內含許多常見的演算法精華，故許多人都是採用 Apache Mahout 搭建推薦系統的。至於為何還要自己刻一個出來？單純練功啦，在此就練練 Partit...
2014年2月28日 星期五

MongoDB 開發筆記 - 使用 find / aggregate: $match 找尋必有或必無某屬性(property/element/field)的資料

›
話說 MongoDB 真是越用越順手，也唯有這樣才能體會大家為何對他驚歎 :P 在處理資料時，由於 schema free style，有時分析資料時，希望每筆資料都要有某個屬性才來處理，或是資料不能有某個屬性: db.collection.find( { property...
2014年2月26日 星期三

MongoDB 開發筆記 - Aggregate 之 Group BY Timestamp / GROUP BY ObjectID getTimestamp @ MongoDB Server v2.4.9

›
上回看文件時，上頭說系統預設 ObjectID(_id) 中，已經有時間戳記了，並且建議不需要額外在儲存一個時間: ObjectId is a 12-byte BSON type, constructed using: a 4-byte value representin...

[Linux] 使用 Node.js 與 MongoDB 溝通與帳號認證 @ Ubuntu 12.04

›
透過 apt-get 安裝 node.js: $ sudo apt-get install python-software-properties $ sudo add-apt-repository ppa:chris-lea/node.js $ sudo apt-get...
2014年2月25日 星期二

[Linux] 從 MongoDB Standalone (Single-Noe) 到 MongoDB HA (Replica Set) 的線上轉移方式(without shutdown/offline) @ Ubuntu 12.04

›
不關機的轉換原理應該都差不多？例如把水管從 A 處改接到到 B 處，只是情境跟操作手法適不適用是需要考慮的重要因素，在此先敘述使用情境： 一隻 PHP 定期收到資料後，把資料存在 /tmp 區，再透過 popen 在背景發動一隻 pymongo 程式讀取 /tmp  資料，由...
2014年2月18日 星期二

[Linux] MongoDB Replica Set with Auth & KeyFile @ Ubuntu 12.04

›
建 cluster 不見得需要帳號管控，因為多數處在保護的網路環境，而 MongoDB 預設沒有帳密管控且帳密管控做的很簡單，分成 read-only 跟 read-write 模式。而使用認證的主因是為了遠端關掉機器，沒有認證機制的服務僅能透過 localhost 關掉服...
2014年2月5日 星期三

[MongoDB] 透過 MapReduce 進行 Collections Join @ Ubuntu 12.04

›
使用 NOSQL 時，其先天設計無法提供像 MySQL Table Joins 等招數，此時的解法就是把兩個 tables 倒進一張 table 來解決。 以 MongoDB command line 操作，新增資料： > use mydb switched t...
2014年1月24日 星期五

[MongoDB] 使用 PyMongo 把玩 MapReduce @ Ubuntu 12.04

›
稍微接觸了一下 MongoDB 後，對此感到無比的興奮？與 Hadoop 相比，感覺上手度滿高的，不過，使用 PyMongo 的情況下，還是需要比較適合熟悉 Javascript 的人，因為 Mapper 跟 Reducer 的撰寫仍是用 Javascript 的，更正確來說是 ...
2014年1月22日 星期三

[Linux] MongoDB 與 PyMongo 初體驗 @ Ubuntu 12.04, Linode

›
架設： http://docs.mongodb.org/manual/tutorial/install-mongodb-on-ubuntu/ $ sudo apt-key adv --keyserver hkp://keyserver.ubuntu.com:80 --r...