2010年11月12日金曜日
Technologies to be used in next generation search engine.
First of all, I would like to introduce several technologies that are to be implemented in my next generation search engine.
I am going to use :
1. Most importantly, I will be using Hadoop to analyze logs and rank web results. I will be making a small cluster of computers, and use virtualization technology.
2. Semantic Web search. Metadata and ontology is an important part of semantic web search. I will be focusing on this from this year and start implementing by next year.
3. mod_pagespeed : a new mod by Google for using in Apache web server, which will at maximum make web page load time 50% shorter. The technology is new, and I will have to try it on my server to see if it will really make some change. I am excited for this.
I am going to use :
1. Most importantly, I will be using Hadoop to analyze logs and rank web results. I will be making a small cluster of computers, and use virtualization technology.
2. Semantic Web search. Metadata and ontology is an important part of semantic web search. I will be focusing on this from this year and start implementing by next year.
3. mod_pagespeed : a new mod by Google for using in Apache web server, which will at maximum make web page load time 50% shorter. The technology is new, and I will have to try it on my server to see if it will really make some change. I am excited for this.
2010年11月6日土曜日
Looking for partners in improving Mohawk.
I am currently looking for partners in improving Mohawk Search Engine. If you are interested, just DM me at @stingraze on twitter.
Looking for skills in: C, C++, Java, Cent OS, Perl, (preferably expert in all these) and skills in MySQL tuning.
Japanese skill will be helpful.
I will be looking for partners globally.
Tsubasa Kato
Looking for skills in: C, C++, Java, Cent OS, Perl, (preferably expert in all these) and skills in MySQL tuning.
Japanese skill will be helpful.
I will be looking for partners globally.
Tsubasa Kato
2010年11月4日木曜日
今日の気になったキーワード
今日の気になったキーワードを紹介します。
-Google クラウドの核心から-
「サーバーラック1つでも、すぐに現在のデータセンター並のハードウェアスレッドを持てるようになるだろう」
NAS装置
オーバーサブスクリプション
共有メモリシステム
「どこまでローエンドにできるか」- まさにこれですね!
メモリパリティ検知
誤り訂正符号付きDRAM
上記のキーワードを使って、僕のMohawkを改良、公開したいと思っています。
-Google クラウドの核心から-
「サーバーラック1つでも、すぐに現在のデータセンター並のハードウェアスレッドを持てるようになるだろう」
NAS装置
オーバーサブスクリプション
共有メモリシステム
「どこまでローエンドにできるか」- まさにこれですね!
メモリパリティ検知
誤り訂正符号付きDRAM
上記のキーワードを使って、僕のMohawkを改良、公開したいと思っています。
登録:
投稿 (Atom)