phpによるスクレイピング処理入門
1. はじめに このサイトは php を利用したスクレイピング処理の具体的手法について記載されたサイトにしようと思っています。なので、あまり面白いサイトではありません。内容も偏重していることと思いますが、ご質問などがございましたら、りょーちまでご連絡ください。 1.1. スクレイピングとは スクレイピングの話しを始める前に、現在のWebサービスについて幾つか言及しておきます。 現在様々な会社が様々なWebサービスを展開しています。かなり昔、今よりWebサイトそのものが少ない頃の時代は、HTMLファイルを手動で作成することが殆どでした。しかし、現在はバックグラウンドにデータベースが存在し、データベースの内容を動的に表示し、ページを作成するようなサイトがかなり多くなっています。 さて、データベースを利用するメリットは何でしょうか？ 幾つかの視点が挙げられると思います。 最も重要な点は、ひとつひ
iSight内蔵macで外部USBカメラを有効に
最近のmacにはiSightというwebカメラが画面上部に内蔵されていて、簡単にライブチャットしたり自分の写真を撮る事が出来ます。 しかしカメラの撮影範囲は本体の方向やモニタの角度でしか調整できない、つまり自分方向にのみ固定されています。これは照れざるを得ない仕様です。 先日 USTREAM で本体を操作しながらモニタの向こう側を撮影したいイベントがあったので、方法を探ってみました。 まずmac対応を謳っているWEBカメラを用意 昔販売されていたApple純正の筒のようなデザインの iSight はかっこいいのですが解像度も低いので却下、解像度が130万画素で出来るだけすっきりしたデザイン、USB Video Classに対応しているということで『シグマ UVCA130AUWH』を選びました。 iSightが優先して認識されてしまう 早速USB接続し USTREAM にログインしてみると、
Video Container Changer - ｋ本的に無料ソフト・フリーソフト
動画ファイルのコンテナフォーマットを、再エンコードなしで変換してくれるソフト。 MKV / MP4 / TS / MOV / FLV / H264 / AVI / WEBM / MPG / VOB / RM / WMV / 3G / ASF / RAW / YUV ファイルのコンテナ形式を、ロスレスで MKV / MP4 / TS / PSP / MOV / FLV / SWF / MPEGTS / AVI / RM / WEBM / WMV / MPEG / VOB / RAW に変換することができます。 H.264 のレベルを調整する機能や、フレームレート / アスペクト比 を変更する機能 等が付いています。 「Video Container Changer」は、シンプルなビデオコンテナチェンジャーです。 ドラッグ＆ドロップで放り込んだ MKV / MP4 / TS / MOV / F
TvRock、TVTestを新BSチャンネルに対応させる方法 - あれこれほしい
10月1日からBS新チャンネルが始まりました。 有料チャンネルが多いので放置していてもいいのですが、開局記念ということで無料放送もやっているので折角なので見られるようにします。 私はWOWOWを契約しているのでWOWOWの新チャンネルを録画出来る様にします。 作業の前にはTvRockを終了させておいて下さい。 BonDriver_PT-ST（人柱版３）に更新します。 PT2以外を使っている場合はそれらに合った、新BSチャンネルに対応したBonDriverを入れます。 『BonDriver_PT-S.ChSet.txt』に以下を追加します。 区切りがタブ区切りなので注意して下さい。 [追記](コメントでのご指摘ありがとうございます。) BS5/TS0＜スペース＞WOWOW＜スペース＞LIVE＜タブ＞0＜タブ＞13＜タブ＞2＜タブ＞17488 初めの空白、チャンネル内の空白はスペースです。 B
知らなかった? ちょっと便利なMountain Lionの新機能(2) - 新・OS X ハッキング!(62)
Mountain Lionがリリースされ、はや1ヶ月。そろそろ慣れてきた頃だろうが、気付いていない変更点・新機能はまだあるはず。前回に続き、つい見過ごされがちなピリリと辛いMountain Lion関連情報をお届けしよう。 Launchpadのスマートな使い方 Mountain Lionの「Launchpad」は、アプリケーションラウンチャーとしてより使いやすく進化した。フルスクリーンにアイコンを並べ、トラックパッドで操作を進めるスタイルはLionのときと同じだが、キーボードで検索可能になったことが大きい。 たとえば、iTunesを起動したいときには、Launchpadの起動後おもむろに「iTunes」と入力するとiTunesのアイコンが選択された状態になるので、「enter」キーを押せばiTunesが起動する。検索はインクリメンタルサーチ(逐語検索)されるため、実際には「it」か「itu
jQuery Roundabout
Roundabout is a jQuery plugin that converts a structure of static HTML elements into a highly customizable turntable-like interactive area. (And now, not just turntables, but many shapes!) In its simplest configuration, Roundabout works with ordered- and unordered-lists, however after some quick configuration, Roundabout can work with an set of nested elements. Requirements & Add-Ons Requires jQue
WordPressのトップページを雑誌や新聞のような段組にする方法
WordPressのブログは一般的に記事タイトルと記事の概要が単純に縦に並ぶだけですが、jQuery Masonry という jQuery プラグインを使用すると、このブログのトップページのように雑誌や新聞のような段組で記事一覧を並べることができます。 jQuery Masonry は WordPress 用に作られたわけではありませんが、WordPress テーマに組み込んでトップページ等で使用することができます。 ただ、公式のドキュメント通りに JavaScript を書いただけでは WordPress テーマではうまく動かないので、やり方をここにまとめておきます。 ここでは、WordPress 3.3 のデフォルトテーマ「TwentyEleven」をベースに解説します。 準備 まず jQuery Masonry 公式サイト のページ中央にある「Download the script
jQueryでパネルをフリップ（裏返す）させる演出つけるプラグイン「Flip!」｜BLACKFLAG
以前、「jQueryでパネルをめくるエフェクト効果「QuickFlip2」」と題して、 jQueryを使ってパネルをひっくり返す演出を組み込む為のプラグインを紹介しましたが、 同じような動きでコンテンツ要素を上下左右ひっくり返す操作を実装することができる 「Flip! A jQuery plugin v0.9.9」が今後使えそうだったのでメモ書き程度に紹介します。 Flip! A jQuery plugin v0.9.9 ≫Flip! A jQuery plugin v0.9.9 動作デモは上記ページより確認でき、 フリップさせる要素に対しての「left」「top」「bottom」「right」のボタンがあり、 クリックすることでコンテンツ要素を操作することができます。 オプションでフリップ後の背景色や回転スピードに加えて、 アニメーション開始前、アニメーション中、アニメーション終了後のそ
Windowsスマートチューニング(164) Win 7編: シンボリックリンクでアプリを別ドライブに待避させる
こんにちは、阿久津です。一般的なOSでは実存するファイルに対して、参照性を高める場合や別名を付けるため、"リンク"を作成する機能が備わっています。OSによって呼称は異なりますが、Windows OSでは拡張子「.lnk」を持つショートカットがそれにあたり、初期状態では拡張子が非表示になっているため、意識される方は多くないでしょう。 その一方で以前から実装されながらも、あまり表に出ることのなかったジャンクションやシンボリックリンクといった機能は、Windows Vista以降から活用されるようになりました。例えばWindows 7のユーザーフォルダーはジャンクションによって下位互換性を実現しています(図01)。 まずはジャンクションの話から始めましょう。そもそもリンクにはハードリンクとソフトリンクという二種類が存在し、両者とも特定のファイルやフォルダーに対して別名で参照するという役割は同じな
[iOS] アップデートも怖くない！遂にiOS 5対応！これで復元出来る！” iFaith v1.4 “
Step 1：SHSH の 抜き出し 上記からダウンロード、解凍したiFaithを起動します。 『OK』をクリックします。 まずはSHSHの抜き出しから行います。 メニュー右上『Dump SHSH Blobs』をクリックします。 『Proceed』をクリックします。 続いて『Let’s Go!』をクリックします。 AppleTV 2以外の方は『いいえ』を。 AppleTV 2の方ははいをクリックします。 抜き出し作業を開始します。 デバイスをUSB接続し、電源を切っておきます。 接続、電源を確認したら画面下の『Start』をクリックします。 ５秒後より手順を開始します。 最初の手順はホームボタンと電源ボタンの同時押しです。 １０秒間ホームボタンと電源ボタンを同時に押し続けて下さい。 電源ボタンのみ離します。 ホームボタンはそのまま押し続けます。 ホームボタンを押し続け、画面に反応があれば成
![[iOS] アップデートも怖くない！遂にiOS 5対応！これで復元出来る！” iFaith v1.4 “](https://web.archive.org/web/20240601102335im_/https://cdn-ak-scissors.b.st-hatena.com/image/square/bdc7ca910e9637958c1621b1a008cdb1f2c07036/height=288;version=1;width=512/https%3A%2F%2Ftools4hack.santalab.me%2Fmedia%2Fuploads%2F2015%2F03%2Fifaith-v14-01.jpg)
JavaScriptでの日付の処理が超便利になる「Moment.js」:phpspot開発日誌
Moment.js - A lightweight javascript date library JavaScriptでの日付の処理が超便利になる「Moment.js」 以下にできることをまとめてみます 文字列からパースして日付オブジェクトを生成 UNIXのタイムスタンプから日付オブジェクトを生成 「Dec 25, 1995」みたいな文字列から日付オブジェクトを生成 日付オブジェクトに時間を簡単に を加算・減算 指定日時からの経過時間を取得 オブジェクトをベースにフォーマットして出力する moment(date).format("dddd, MMMM Do YYYY, h:mm:ss a"); phpにもdateという関数やstrtotimeという関数があったりしますが、そういう便利機能をJSでも使うことが出来るようなものです。 日付をヘビーに使うようなプロダクトで使えそうですね。 サイ
iPhoneとSafariだけでできる！ホーム画面に設定ショートカットを簡単に追加する方法 - isuta（イスタ） -私の“好き”にウソをつかない。-
こっくり濃厚～な秋の味覚・かぼちゃの季節がやってきた！期間限定スイーツが見逃せない都内カフェ5軒ご紹介
WebDAVのオンラインストレージbox.netを便利に使うための設定まとめ ～12月2日まで無料で50GBの容量もらえるbox.netの使い方～＊リンあれ
先月から、その大盤振る舞いで話題になっているオンラインストレージ『box.net』。 12月2日まで無料で50GBの容量もらえるのは、iPhoneやiPad、iPod touch、つまりiOS用のアプリをおとした人限定です。 対象を広げたキャンペーンもするかもしれませんが、取りあえずAppleユーザーだけです。 さて、私も最近ようやくcloudについて考えるようになりました。 作業する場所が自宅、事務所と複数あるので、同じ更新を手作業で反映させているのですが、手作業だと忘れてしまうこともあり…最近ちょっと失敗をしてしまいました(=_=;) 私もクラウド化を図らねば！（ちょっと真剣です） そんなタイミングでのbox.net 50GB無料キャンペーン！(｀･ω･´)ﾉ 利用させて貰うことにしました。 box.netのアカウントの作り方 ブラウザののbox.netのサイトからも作れますが、今回は
面白い！JavaScript+Canvasによる画像差分表示·JS-ImageDiff MOONGIFT
JS-ImageDiffはJavaScript+Canvasタグを使って二つの画像の差分表示を行うライブラリです。 GitHubでは差分をWebブラウザ上で閲覧できますが、その時に画像の差分表示も行えるのを知っているでしょうか。スライダーで動かしたりして差分を確認できるのですが、その一つの差分表示をオープンソースで再現するのがJS-ImageDiffです。 サンプルです。上が元、中間が変換後そして下が差分となります。どこが違うのか一目で分かります。 左が影無し、右が影ありです。一致している部分だけが表示されています。 サイズが違う場合の差分表示です。 JS-ImageDiffはCanvasタグを使って画像を読み込み、その差分を表示しています。各ピクセル単位で画像を比較して同じであれば黒、違う場合はうまく表示するというやり方でここまで見事に表示できるのが面白いですね。 JS-ImageDif
【コラム】Windowsスマートチューニング (42) XP/Vista編: UACが有効な状態で管理共有を有効にする | パソコン | マイコミジャーナル
こんにちは、阿久津です。Windows OSでは、システム管理ツールを用いてリモートコンピュータを設定する際、管理共有という隠された共有設定を用いてきました。この隠された共有設定は、共有名の最後に「$（ドル記号）」を付けているのが特徴で、Cドライブであれば「C$」、Dドライブなら「D$」という共有名を用いることで、ユーザーが共有フォルダを作成せずとも、リモートコンピュータにアクセスすることが可能です。 管理共有には、このほかにもいくつか用意されており、システムルートフォルダは「ADMIN$」、FAXクライアントがFAXを送信する際に使用するFAX共有は「FAX$」、名前付きパイプを使用したネットワークアプリケーション間の通信は「IPC$」、プリンタのリモート管理には「PRINT$」が使われてきました。Windows XP時代は、一台のコンピュータを用いることが多かったため、リモート管理に
AVCHD/TS/MTS/M2TSを無劣化でカット・編集できるフリーソフト「TSSniper」 - GIGAZINE
ムービーの指定した部分を再圧縮することなくサクッとカットできるのがこのフリーソフト「TSSniper」です。対応している形式は.ts/.mts/.m2ts/AVCHDとなっており、音声についてもMPEG1/MPEG2/AC-3/AAC/AAC-HEに対応しており、画質や音質を一切損なわない無劣化編集・ロスレスカットが簡単かつ高速にできます。 ◆ダウンロード＆起動方法 このソフトを起動させるためには「ffdshow」と「Haali Media Splitter」が必要で、これらについては以下の記事を読みながらインストールしてください。 ムービー再生に必要なコーデックとプレイヤーをまとめて簡単にインストールできるフリーソフト「K-Lite Codec Pack」 - GIGAZINE 次に配布サイト「TSSniper 0.80.0.600 test - VideoHelp.com Downlo
面白い！Ruby/Pythonなど多数のプログラミング言語をWebブラウザ上で実行する·repl.it MOONGIFT
repl.itはWebブラウザ上で多数のプログラミング言語を実行し、その結果を確認できるソフトウェア。 repl.itはHTML5/JavaScript製のオープンソース・ソフトウェア。プログラミングの学習はどこで行うのが良いだろうか。書籍を購入する人もいれば、オンラインのチュートリアルを見る人もいる。いずれの場合もローカルに実行環境を用意して行うものだろう。 利用可能な言語一覧 お勧めなのはオンライン学習なのだが、実行環境がJavaScriptくらいしか用意できないのが問題だった。だがrepl.itを使うとそれ以外のプログラミング言語もオンラインで実行できるようになる。 repl.itが使える言語としてはJavaScript、CoffeeScriptの他、Ruby、Python、Lua、Scheme、QBasic、Forth、Emoticon、Brainfuck、LOLCODE、Unla
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
Subversionで簡単・確実にファイルを構成管理
Minimit Gallery Plugin
eels-bros.jp