-
PyFes LT 2012.08 で「使い捨て python コードの書き方」についてし... d:id:shiumachi
使い捨て python コードの書き方 from Sho Shimauchi サポートの仕事におけるプログラミングというのは通常の開発と少し異なっています。「1時間以内に数十GBのログを解析して問題を特定し対策を回答しなければいけない」などということはしょっちゅう発生しますので、ちまちま時間を... 続きを読む
-
これから Hadoop を学ぶ人向け読書ガイド - 科学と非科学の迷宮 d:id:shiumachi
なんだかんだで Hadoop 周りの本も結構増えてきましたので下にまとめました。抜けてるのもあると思うので(特に和書)、なんかお薦めありましたらコメントください。追加します。 タイプ別お薦め読書コース短期間で全部読むのは不可能なので、とりあえず簡単にお薦めの読書コースを紹介します。 非技術者(... 続きを読む
-
技術系メーリングリスト上で使える英語の習得法 - 科学と非科学の迷... d:id:shiumachi
前回バグレポートの提出方法というテーマで記事を書きましたが、今回は英語にフォーカスして少し書いてみることにします。 英語の学習法は数多くありますが、もし英語を学ぶ目的が「IT の技術系メーリングリストに投稿し、議論する」ことが目的でしたら少しだけ楽な方法があります。 それは、技術系メーリングリ... 続きを読む
-
とりあえず親(とか自分が「サポート」する全ての関係者)のPCにはTeam... d:id:shiumachi
TeamViewer を知らない人に説明すると、相手のPCを遠隔操作可能になる非商用利用フリーのソフトです。Mac/Windows/Linux全対応。TeamViewer をお互いに起動した上でかつ相手のIDとパスワードを知らなければ接続できないので、普段オフにしていれば乗っ取られるリスクもあ... 続きを読む
-
ハドゥープ、象ではなく猿が動かしていたと判明 - 科学と非科学の迷... d:id:shiumachi
独立独歩法人分散処理推進機構(DPA)は1日、分散処理ソフト「ハドゥープ」の調査報告書を公開した。報告書は、近年オープンソースの分散処理ソフトとして注目されているハドゥープの市場動向、及び内部設計について調査し、まとめたもの。その報告書の調査結果から、ハドゥープが実は猿を使って分散処理している... 続きを読む
-
オフィス設営時に購入すべきアイテムリストのメモ - 科学と非科学の... d:id:shiumachi
まさに誰得記事これを追加した方がいいというのがあったら教えてくださいこういうのをはてなネイバー(名前忘れた)みたいなキュレーションサービスでまとめればいいのかと今更思ったけど面倒なのでこのまま投稿する アイテム購入前に オフィスビルに入居している場合はサービス・備品をチェックして無駄な買い物を... 続きを読む
-
hadoop コミュニティ開発メモ - 科学と非科学の迷宮 d:id:shiumachi
注: 必要があってこの記事を書いているのであって、決して万人向けに書いているわけではありません。 用意するもの(Mac) JDK6Eclipsemaven git protocolbuffer (protoc)多分最低この5つのツールがあればなんとかなる。pb が必要なのは、pb がないと 0... 続きを読む
-
hadoopのバージョン表記について - 科学と非科学の迷宮 d:id:shiumachi
先日 hadoop-1.0 がリリースされたことが巷で話題になっています。話題になること自体は構わないのですが、この 1.0 が実は 0.20 系の派生だということはあまり理解されていないように見えます。1.0.0 は従来のバージョンナンバリングポリシーで言えば 0.20.205.1 に相当す... 続きを読む
-
英語によるhadoop系メーリングリストへのバグレポート提出ガイド - ... d:id:shiumachi
hadoop アドベントカレンダー 2011、1日目及びその他空いているところ全部を担当する @shiumachi です。27日は誰もいないようなのでこれを27日とします。 基本テンプレ的に書くとこんな感じ。「本来は……であるべきだが、実際にはこうなっている」前半は should を使い、bu... 続きを読む
-
hadoop アドベントカレンダー 2011 1日目 CDH hadoop/hive/hbase を ... d:id:shiumachi
hadoop アドベントカレンダー 2011、1日目及びその他空いているところ全部を担当する @shiumachi です。最初はサポートの話を書こうと思ったのですが、せっかくのアドベントカレンダーの初日なので少しだけ技術的なことを書くことにします。あと最初に断っておきますが、私の書く記事は基本... 続きを読む
-
ロードマップよりポートフォリオ - 科学と非科学の迷宮 d:id:shiumachi
最近、こんなことを聞かれました。「shiumachi 君、人生のロードマップとかそういうの持ってないの?」「ありません」と即答すると、「夢がないねぇ」と不思議そうな顔をされましたが、ないものはしょうがありません。小学生だか中学生の頃に、「人生の計画を書いてみよう」という授業がありました。22才... 続きを読む
-
アメリカのIT企業で働くために行った英語の勉強法など - 科学と非科... d:id:shiumachi
こちらの記事を読んで、自分も書きたくなったので書いてみました。といっても私は別に仕事で普通に日本語も使うし、半年ちょっとしか働いてないのでえらそうなことは何も言えませんが。あくまで自分のメモ用。 入社前のスペック 小さい頃USに4年間住んでた。語彙の充実には全く役に立ってないが、多分リスニング... 続きを読む
-
自炊メモ - 科学と非科学の迷宮 d:id:shiumachi
(書きかけ。そのうち追記する)裁断 電子レンジ 900W + カッター漫画は 70秒、文庫は 50秒かけたらすぐにハードカバーをはがす数個に分割できるので、くっつかないよう広げて乾かす絶対に糊のついた状態でスキャンにかけないことカッターで丁寧に切る最後にヤスリがけで仕上げるカッターのtips ... 続きを読む
-
転職しました - 科学と非科学の迷宮 d:id:shiumachi
twitterを見ている人はご存知でしょうが、3月末に前職を退職し、4月から Cloudera で働くことにしました。ちゃっかり公式サイトに名前載せたりしています。 http://www.cloudera.com/company/team/ 昨年末に書いた通り、私の興味はデータマイニングと H... 続きを読む
-
Hadoop Conference Japan 2011 参加メモ - 科学と非科学の迷宮 d:id:shiumachi
私の記事は個人的なメモで、間違った部分も多いため関連リンクを併読することをおすすめします。特に今回は twitter と並行して読み書きしてたので、結構書き漏れてる箇所多いです。網羅性とか正確性は期待しないように。 概要イベント名Hadoop Conference Japan 2011URLh... 続きを読む
-
GNU screen メモ - 科学と非科学の迷宮 d:id:shiumachi
はじめにid:marqs とかに「screen いいよー使うと便利だよー」と薦められながらも「別にそんなに不自由してないし、設定とか調べるの面倒だからいいや」と放置していた GNU screen ですが、年始に読んだnokunoさんの開発環境の記事に screen が載っているのを見て急に欲し... 続きを読む
-
CentOS6開発プロジェクトの現状 - 科学と非科学の迷宮 d:id:shiumachi
先週、CentOS 6 はいつ頃出るのかどうか、ふと気になりました。リリース予定もニュースにならないし、どうしたのだろうと調べていたら、CentOSの開発MLが荒れていることを知りました。不安を感じた私は調査を続けました。すると、LWN.net の一つの記事に、CentOS の開発の現状につい... 続きを読む
-
2010年まとめ:データと向き合った一年 - 科学と非科学の迷宮 d:id:shiumachi
- コンピュータ・IT
- datamining データマイニング 集合知 hadoop programming
- 49 users
- 2010/12/31
はじめに:2010年弾丸ツアー 今年一年を一言でまとめると、「データと向き合った」一年でした。2009年の終わり、私は The Datacenter as a Computer の読書会を通して、分散システムによる大量なデータの処理がこれからの時代にもっと重要になるということを学びました。Th... 続きを読む
-
Hadoopソースコードリーディング第6回 - 科学と非科学の迷宮 d:id:shiumachi
概要イベント名Hadoopソースコードリーディング第6回URLhttp://atnd.org/events/10425日時2010/12/17 19:00 - 21:30場所楽天株式会社 関連リンクtwitterハッシュタグ#hadoopreadingUst http://www.ustrea... 続きを読む
-
Hadoopモデリング座談会#3 - 科学と非科学の迷宮 d:id:shiumachi
第2回のレポートはこちら 概要イベント名Hadoopを中心とした分散環境での開発方法論・モデリング・設計手法等についての座談会(第3回)URLhttp://atnd.org/events/9098日時2010/11/19 18:30 - 21:00場所スター研修センター神田3F 関連リンクtw... 続きを読む