Yahooは今朝、Yahoo Labs Webscopeからこれまでで最大となる機械学習のためのデータセットを学術研究コミュニティーに解放すると発表した。この新たなデータセットの容量は驚きの13.5テラバイト（圧縮していない）で、匿名化したユーザーのインタラクションデータで構成されている。具体的には2015年2月から2015年5月までにYahooのホームページ、Yahooニュース、Yahooスポーツ、YahooファイナンスとYahoo不動産を訪れた2000万人のインタラクションデータだ。
Yahooがこれまでで最大の機械学習用データセットを研究コミュニティーに解放 | TechCrunch Japan
先日発表されたYahoo!Japanによるイー・アクセス（＋WILLCOM）買収による計画の発表。
そして、爆速経営の判断として買収が撤回されました。
ちなみにイー・アクセスとWILLCOMの合併は予定通り行われ、Yahooとは何の資本会系のない「Y!mobile」という通信会社が立ち上がります。
撤回の理由としてはYahooが通信インフラを手がけるよりも、YahooはYahooの領域に、イー・アクセスは通信インフラの領域に注力したほうがいいとの判断だそうです。確かにYahooがインフラを持つ必要性は少ないですからね。。
親会社のために一肌脱いだようにしか見えない買収劇だと、株価2割減というインパクトには逆らえなかったのかもしれないですね:p
ソフトバンクからYahoo! Japanがイー・アクセス（イー・モバイル）とWILLCOMの合併企業の株式を取得し子会社化すると発表
新社名はワイモバイル（Y!mobile）だそうです。
MVMOによる事業参入ではなく、ソフトバンクからキャリアを買い上げた理由としては1000万単位のリーチを行いたいという理由から。Yahoo!BBの時と同じような効果を期待しているのだと思います。というか他のインターネット企業にはできないこの発想…（楽天あたりはイー・モバイル買収しようとしていたのではないかと思っていますが）
最近の爆速といいこのスピード感にワクワクします。
そしてソフトバンクもYahoo!に売却したことで手を離れた…といえるのかどうか…
さて、驚いた。
なんせ今朝WSJがぶっこぬいたかと思ったら、あれよあれよという間にYahoo!とGoogleから公式発表がありました。
Yahoo! JAPAN の検索サービスにおけるグーグルの検索エンジンと検索連動型広告配信システムの採用、ならびに Yahoo! JAPAN からグーグルへのデータ提供について
当社は、本日、Yahoo! JAPAN の検索サービスにおけるグーグルの検索エンジンと検索連動型広告配信システムの採用、ならびに Yahoo! JAPAN からグーグルへのデータ提供について、下記のとおり決定いたしましたので、お知らせいたします。
link: ヤフー株式会社がGoogleとの提携を正式発表【湯川】 : TechWave
Yahoo!のオフィシャル文はPDFで公開されているので転機となります。
そして、本日、ヤフー株式会社に対して再び検索技術をライセンス提供することになったことを発表いたします。今回の非独占的な契約に基づき、ヤフー株式会社（ソフトバンク株式会社の子会社であり、米ヤフーも一部出資しています）は、Google が日本国内で最も速く、最も先進的であると自信を持つ検索技術を利用者に提供できることになります。
link: Google Japan Blog
こちらはGoogleのオフィシャルBlogから。
ちなみにGoogleは対外的な情報もBlogで公開しています。例の中国事件の事なども。
米Yahoo!は包括的にMicrosoftが提供するBingを採用する運びとなりましたが、ソフトバンク資本のYahoo! Japanに関しては機能面で米国Bingに劣る日本のBingを採用するのではなくGoogleを検索パートナーとして選択。
さらに広告ネットワークも自社内にかんしてはGoogleのものを利用するとのことです。
日本最大のポータルサイトがGoogleの広告ネットワークを採用すると言うことは…という事ですね。
Yahoo!にしてみれば検索エンジンはどこのものでも全然問題なくポータルや関連ビジネスを効率的に行うための手段とすごい割り切れてて気持ちの良いほど。
利用者側からすると明らかに質の低下していたYahoo!独自の検索エンジンから、精度の高いGoogle製に中身だけ入れ替わり質の向上。
個人的にはBloggerはなぜかYahoo!検索での存在感というかクローラーに嫌われていただけに、Google化してくれれば人並みになれるのではと期待しています。
今回の提携が効力を発揮するのは未定ですが、これにて日本国内はGoogleシェア9割獲得と言うことで決着しそうです。
以前作ったTwitter Botですが、動いている内容はとても単純。
ここまで単純ならわざわざMeCabを使わなくても良いのではと思ったので、以前話題になったYahoo! Japanが提供するWeb APIの日本語形態素解析を使ってみました。
Yahoo!デベロッパーネットワーク - テキスト解析 - 日本語形態素解析
まず下準備として、YahooのIDを持っておく必要があります。意外とGoogle依存なのでYahoo! Japanのアカウントの用意で手間取ったのは内緒:p
あと、Yahoo! Japanのアカウントは各国共通じゃないのでFlickrとかの海外Yahoo!サービスのアカウントじゃログインできないので注意してください。
あとは、非常に簡潔にまとめてくださっている方がいらっしゃいますので、そちらを読んでいただければ・・・
YahooWebAPI"日本語形態素解析"を使って日本語文をひらがなに変換、索引用語のソートに利用 - Object Design
これだと、別にファイルを用意しないといけないので、少し改造して予め入力してあげようと言うことで
word = u'庭には二羽ニワトリがいる。'
yomi = reading(word)
print (word+'->'+yomi).encode('utf-8')
ちなみに1行目に #coding:utf-8 をつけてないと文字化けします。
すると結果は
$ python yomi.py
庭には二羽ニワトリがいる。->にわには2わにわとりがいる。
ここまでしてくださっていると説明の必要もありません。
帰ってくる答えを変えたい場合は def reading(text,appid=appid,results='ma',filter=''): のfilterの引数に日本語形態素解析に戻り値として欲しい品詞番号を入れておくと、名詞だけを抜き出せたりします。
あとは、形態素解析のどれを拾うかの設定
帰ってくるXMLはこのような形なので
<word_list>
<word>
<surface>庭</surface>
<reading>にわ</reading>
<pos>名詞</pos>
<baseform>庭</baseform>
</word>
ソースコード中の
readings=soup('reading')
に対応しています。
が、このまま変更しても結果は帰ってこないので
postdata= {
'response' : 'surface,reading',
この response の引数を ‘’ にするか、結果として欲しいものを指定してあげる必要があります。
何が変わるかというと、例えば形態素の基本形を知りたいは reading を baseform に変えてみると
$ python yomi.py
お待ちしております。->お待ちするておるます。
こんな風に、帰ってくる形が変わります。
Web APIですが、扱いやすいですし環境依存しない(MeCabの場合は最低条件としてMeCabが動く環境が必要)ので面白いんじゃないかな。
特に1つあたりの情報量の少ないTwitterとか・・・Twitterとか・・・には好都合な気がします。ちなみに制限は1つのリクエストあたり 100KBまでで、24時間以内に50,000リクエストとなっております。
Microsoftの予測値からすると、YahooのRPSが4.3セント、MicrosoftのRPSが3.9セントであるのに対して、GoogleのRPSは7セントに達しているという。検索シェアの過半数を独占しつつも、売り上げの効率は他社の2倍となるGoogleのすごさは恐ろしい。
米ヤフー、MSとの提携を任意で打ち切りも可能--SECへの提出文書で明らかに:マーケティング - CNET Japan
New York Times on Flickr - Photo Sharing!
インターネットの世界の10年ってかなりすごいと思う。
もはや先月のお話になっちゃいましたがMicrosoftとYahoo!が提携を発表。
今回の要点は
Microsoftにとっては念願叶ってYahoo!の検索エンジンの支配が出来て、さらに広告まで表示させることができる…勝ち馬はMicrosoftかな。陰でほくそ笑むのはGoogleかもしれませんが;p
もちろん両者の規模がインターネットの世界で見れば巨大すぎるので、いろいろな所の承認を得る必要があり、Yahoo!自身も即座に切り替えることは無いでしょうから変化はゆっくりとしたものになるかと思います。
今回気になる点としてはYahoo! Japanも採用するかもと言っていること。
「米Yahoo!がBingに切り替えた後、日本市場向けにも良いエンジンだと判断すれば、Yahoo！JAPANにもBingを搭載していく可能性が高い」（ヤフーの広報担当者）という。
日本のヤフーも「Bing」採用へ 米Yahoo!とMSの検索提携で - ITmedia News
におわせる程度の発言ですが、Googleにとってはチャンスになるかも…もちろんベースとなるBingが日本語検索の出来が酷いという場合ですけどね。
考えてみればYahoo!はその昔Googleを使っていた訳ですから、検索エンジンのアウトソーシングは経験済みですね。
今回の10年という提携も、昔Googleの買収に失敗したことを考えると逃した魚は大きくて悔しかったんだと思う反動と考えれば…
まだ20年少々しか生きて生きていない自分にとって10年先を考えるのは難しいことです。しかし、1年先もGoogleを使っているのは容易に想像できます;p
Hadoop on Flickr - Photo Sharing!
これは非常に興味深いです。
米Yahoo!はHadoopを使っている事を公表していましたが、日本でも使っているらしいです。
Hadoopで、かんたん分散処理 (Yahoo! JAPAN Tech Blog)
今回の話はMapReduceの処理の流れがどういったものかという感じです。実際に内部どれだけの規模で使用して、これだけの処理時間短縮・効率化という話ではないです。
これで日本でもHadoopに注目が集まって、もっとドキュメントが日本語化されて敷居が低くなってくれればいいなぁ:-)
しかし、6時間かかった処理が、1台マスター/19台スレーブで5分に短縮できたという話ですが、どうやったんだろう…
自分の場合はそこまで劇的に変化しなかったので気になる!
 |
Googleのようにとりあえず「BigTableに入れておきました＾ｑ＾」と言うのではなく、数千台のFreeBSDサーバを連携させて構成させているようです。
このサーバーの単位を以後機能サーバーと呼びます。
いくつか機能サーバーの例をあげますと・マスタ
・商品リスト
・検索
・画像
・マイ・オークション
などがあります（もちろん全てではありません）。
キャッシュを利用しないのは、タイムラグによる表示の変化を最小限に抑えるためだそうです。そのあたりの同期の仕方についても説明されています。
Yahoo!規模のサイトを作ろうという方は是非!
それにしてもYahoo!はFreeBSDを使うのが好きですよね。
一年前の今日 2009/02/16 | itFun.jp
この中でもYahoo!のサーバの基盤としてFreeBSDを使用していることを上げています。
自分も主にライセンスの関係でFreeBSDを使ってみたいと思っていますが、なにぶんLinuxってユーザーライクですよね:-)
Fred Hill Briefcase Drill Team on Flickr - Photo Sharing!
Yahoo! ブリーフケースです。
ちなみに今回の話は米国のYahoo!なので日本ではどうか分かりません。
同社は米国時間1月28日、Briefcaseを3月30日で終了すると発表した。ユーザーに対し、ストレージ内のデータをその日までに回収または消去するように呼びかけている。
30MBのサービスですが、Yahoo!がこれまで放置してきたのですから収益に結びつかなかったんでしょうね。
そんな中Googleは本当にGDriveを展開してくるんでしょうか?
GDrive は「いつでも、どこでも」がコンセプトらしい | itFun.jp
ちなみに日本のYahoo! ブリーフケースは完全有料化されています。
ヤフー・ジャパンの発表によると、無料会員は12月1日以降、ファイルの新規アップロードが不可となる。さらに、来年2月2日には、保存されているファイルをすべて削除するという。引き続き、Yahoo!ブリーフケースを利用したい場合は、月額294円（12月1日からは346円）のYahoo!プレミアム会員になるか、Yahoo! BB会員になるしかない。
Yahoo! ブリーフケースの有料化で気になる… 国内の無料ストレージサービス選び - デジタル - 日経トレンディネット
Dropboxが2GBも無料で公開していることの方が驚きですね;p
Google, Er, Yahoo Car Needs a Bath on Flickr - Photo Sharing!
GoogleとYahoo!がそれぞれ検索結果の表示を改善しました。
自社が持っているYahoo!知恵袋のQ&A情報を通常の検索結果に組み込みを開始。
直接的な回答というわけではないですが、ライトユーザーにとっては分かりやすいのでは無いでしょうか?
検索が直接答えを返してくれる世の中にもなるのかな?
via 探し物は何ですか？ - Yahoo!検索 スタッフブログ
これまでの「もしかして」部分が機能強化されました。
有名なキーワードに対しては2件検索結果が表示されるようになっています。
mixiiで検索した結果 以下に10件表示されるので、合わせて12件が表示されます。
間違ったキーワードでも、わざわざ「もしかして」をクリックする必要は無くなりますが、一部では逆効果になってしまっている場合も…
と言うか○○で検索というのはYahoo!でもGoogleでも1位を取らないと出来ないキャンペーンですよね…どんだけぇ～
Yahoo! RIP 1994-2008 on Flickr - Photo Sharing!
7年前はITバブルの崩壊で赤字に陥りましたが、今回もやはり広告事業が不振に陥ったことが大きな原因のようです。さらにリストラ費用が大きかったとのこと。
最終損益が3億300万ドルの赤字（前年同期は2億600万ドルの黒字）
減益にとどめたGoogleとYahoo!の差は一体何なんでしょうか?
ちなみにこのお話は本家米Yahoo!の話です。
日本のYahoo!は相変わらず好調です。
いよいよ広告はネットの時代に？ ヤフー、広告事業が大幅増収―― 2009年3月期 第3四半期決算短信発表：RBB TODAY
本当にYahoo! Japanが本家を買収しそうな勢いです。
1年前の動画ですが、かなり面白かったので。
日本語訳の一部が気になりますが、Webが現実世界を食ってしまうという発想はなかなか面白いですし、実際に新聞・テレビメディアはインターネットが食ってしまった感じです。
GoogleがMicrosoftを買収し、AmazonがYahoo!を買収するというのは大胆予想;p
ただ、あくまでも変化は着実に起きているもので、Facebookが全世界に1億5000万以上の会員を持ち。7500万以上のアクティブユーザーを誇るメディアに成長しました。
iPhoneとApp Storeの関係はこれまでのハード・ソフト配布の関係を圧倒的に進化させました。
またTwitterの浸透によって既存のBlogメディアの価値も大きく変化してきているのではないでしょうか。
ここに書かれている未来は結構真実みがあると思います。
でも、そのときGoogleが中心プレイヤーであるのかは分かりません。
Boss on Flickr - Photo Sharing!
すごいマッシュアップです。
作ったのはYahooの社員。
Yahoo! BOSSというのはものすごい衝撃的な事なんですよ!!
米Yahoo!が持っている検索エンジンを非常に手軽にマッシュアップできます。しかも、通常であれば検索回数の問い合わせに制限があるとこが…一切の無制限で利用できます!
衝撃的です。
ただし、日本のYahoo! Japanは独自のインデックスを持っているらしく完全にはカバーしていません。
今回作ったマッシュアップはYahoo! Newsの記事とTwitterのそれに関する話題を一度に表示してくれるというもの。
もちろんこれを動かすインフラはGoogle App Engineです。
http://tweetnews.appspot.com/fresh?q=yahoo
一切日本語は利用できません。
ソースコードも公開されているので、腕に覚えのある人は日本語も対象にしてみたりなんかすると面白いのでは?
百度贴吧三周年 on Flickr - Photo Sharing!
過去にも書きましたが、百度の広告の不正操作問題がさらに大きな展開になっていきそうです。
問題の流れは百度の日本向けサイトがリニューアル! しかし… と百度のリスティング不正問題 中国全体に不振感 を読んで下さい;p
簡単に言うと、百度もGoogleやYahoo!などと同じようにインターネットの検索画面に広告を出すことで、収益を倍々ゲームのように増やしていきました。
Googleなどとの大きな違いは検索結果その物に広告を掲載すること。ですので効果は非常に高いです。
その反面不正があった場合の影響は非常に高いです。
百度に対して、「悪意によるマーケティング妨害」、「商標権侵害」、そして昨年より話題となっている「広告不正操作による詐欺的行為」などの理由で百度を提訴する意向であることを明らかにした。
中国の100社以上のインターネット企業からなる連合"インターネット反独占連盟"から提訴される可能性が濃厚だと。
ただ、中国インターネットの一番の大手企業なので公正な裁判が行われるかは不明です;p
Black Magic SEO, SEO Comic on Flickr - Photo Sharing!
地球が静止する日ぐらい一部の人にとっては問題になること…かも知れません。
これを読んで不思議に思った人も少なく無いと思います。
なぜならSEOが無意味になる日がやってくる方が利用者にとっては絶対に良いことなのですから。
SEOを施すまでもなく必要な情報がスパムに埋もれない…そんな検索結果が帰ってくる日がやってくる方が素晴らしい気がします。
ですので、ある意味Indoseekはこの問題に対する一つの答えを示してくれたのかなぁ…なんてね。
このコラムを書いている人は怒っているようですが、お金を出して検索の上位（この場合はファーストビュー）に乗っているくらい本気な会社なのですから、それに関する事業を行っていてもおかしくないと思います。
変更が営利目的によるものなのか真相は不明ですが、利用者はどう思うでしょうか。
前回Yahoo! japanの検索の表示の仕方が地味に変更されました。
Yahooが広告をどんどん目立たせるよ! | itFun.jp
検索エンジンサービスも民間企業ですから、営利目的なので何とも言えません。
いやなら広告その物を表示しないように、利用者が自営する時代に変化したのかも…知れません。
いかがです?
これを期にスマートなGoogleに検索を乗り換えてみては:-)
 |
思ったよりも難しい問題。
自分はよほどのことがない限り、Googleからの脱却はないでしょう。
J.P. MorganのインターネットアナリストであるImran Khan氏の調査によると
このようになっているそうです。
よりよい検索結果を求めているようですが、自分としては比較の対象が無いのが…
検索結果に答えを提供してくれるのはWindows Liveだけです。
でも、それがよりよい回答なんでしょうか?
「日本の人口」で検索
いつもはGoogleしか使っていませんが、他の検索エンジンも帰ってくる結果が違ってなかなか。
最近の検索エンジンがメールなどのサービスと連携させています。
そうなってくると自然とそのサービスと連携している検索エンジンを利用する時間も増していきます。
と言っても、自分も日本人らしく、最初はYahoo!から入った口です。
ある時、Gmailのアカウントを運良く招待してもらって…それ以来、Google一色です。
自分は検索結果以上のモノが必要ですね。
FirefoxとGoogleの相性の良さも抜群ですし、ブラウザと検索エンジンを乗り換えるのはたぶん早々簡単な事じゃないと思います。
そう考えると、変更しない!が38％もいるのに納得できます;p
eggs 2 on Flickr - Photo Sharing!
例えばGoogleなら"google easter eggs"と入力して「I'm Feeling Lucky」をクリックするとゲームが始まります。
Dreamweaverならプロパティのカラーコードを入力する欄にDreamweaverと入力するとピンポンゲームが始まります。
そんな感じで、実際の製品には関係ない機能を仕込んであるのがイースターエッグです。
元の意味は復活祭を祝福するための装飾した卵のことです。
ちなみにWindows XPには政府機関などでの使用も考えられるとの理由から仕込まれていないとのこと。
GoogleがあるならYahoo!もあるだろうと思ったところ…ありました。
最高に爆笑してしまいましたw
残念ながら日本のYahoo! japanではないのですが、Yahoo.comには面白いものが。
日本のYahoo! japanと違って、Yahoo.comはロゴマークのところにはリンクがないのですが、「!」の部分だけカーソルが変わります。
そこでクリックすると…
音が出るので注意して下さい;p
知らない人に教えてあげると、一発目の時は絶対ビックリした顔をすると思いますよ;p
Yahooさんに1本取られた感じです!
Hotline on Flickr - Photo Sharing!
ちょっぴり衝撃的だった話。
電話も通じぬＩＴ企業、増える「窓口はメールのみ」 : 社会 : YOMIURI ONLINE（読売新聞）
「話が伝わっているのかいないのか分からない」
国内最大のネットオークション「ヤフー・オークション（ヤフオク）」を巡り、身に覚えのない出品料約２４万円を請求された兵庫県芦屋市の会社員梅田雄一さん（３８）は憤る。
自分の会員ＩＤで何者かが偽ブランド品約２００点を出品していると気付いたのは９月２９日。運営会社のヤフーに連絡しようとしたが、同社の電話番号は一般に公開されておらず、問い合わせはメールに限定していた。
すぐメールで事情を伝えたが、翌日、「改めて連絡する」と返信があった後は、音さたなしに。１０月中旬に催促のメールを送ったが、その返信は月末。具体的な措置はとられないまま今月５日、２４万円は引き落とされてしまった。
「電話なら１回で済むのに。時代の最先端をいくＩＴ企業のはずだが、まるで江戸時代の手紙のやり取りだ」と梅田さんは話す。
自分自身も電話よりもメールを優先します。
だって、こっちの都合が邪魔されないですからね。
でも、メールを出す時は心配になりますよ…ちゃんと届いていて、それに対して返信していないのかもしかして間違っていて届いていないか分からないですから。
読売新聞がプロバイダーなど大手ＩＴ企業２６社を調べたところ、ヤフーやミクシィなど６社が公式サイトで電話番号を掲載せず、うち５社は番号案内（１０４）にも登録していなかった。
ただ、電話会社を抱えるソフトバンクが大株主なYahoo! japanが電話対応しないというのが、何とも言えません。
分からないわけではないです。
1日に10億以上のPVを誇るYahoo! japanのトップページに電話番号が書かれていた場合、使い方の説明とかを求められたらたまったものでは無いでしょう。
同サイトを閲覧した人のパソコンも知らないうちに感染し、個人情報が抜き取られるタイプで、最大約２０００人分が感染した可能性があった。ところが、同機構は９月１８日にサイト上で告知したほか、メールマガジン登録者に連絡しただけ。全国農業協同組合連合会（東京都千代田区）も同様に公式サイトがウイルスに感染しながらサイト上でしか告知せず、「サイトを閲覧した方が再びチェックするとは限らず、対応は不十分だった」とする。
これはどうすれば満足なのでしょうか。
テレビでCMを打つ?
新聞社だからやっぱり、全国紙で全面広告を打つ?
でも、海外の人にはどうすればいい…?
Webサイトでお知らせするのが距離や時間に関係なく、興味のある人が見てくれる非常に効率の良いものだと思います…あれ?
Googleも 「Google 電話番号」でググっても出てきませんでした;p
Webに合わせて人間の意識も変えていく時代なのかも知れません。
基本書 
初心者向き 
「さがす」に使われている技術を一般読者に向けて解説したユニークな本 