【統計分析】機械学習・データマイニング【集合知】
レス数が950を超えています。1000を超えると書き込みができなくなります。
0001デフォルトの名無しさん
2010/10/04(月) 23:00:10【関連サイト】
機械学習の「朱鷺の杜Wiki」
http://ibisforest.org/index.php?FrontPage
0002デフォルトの名無しさん
2010/10/04(月) 23:08:230003デフォルトの名無しさん
2010/10/04(月) 23:15:13人工知能を作ろうver0.0.6
http://hibari.2ch.net/test/read.cgi/tech/1263645019/
0004デフォルトの名無しさん
2010/10/04(月) 23:24:00言語訓練のために立てたものです。
アイと研究員とのやり取りに利用するスレッドなので、
関係者以外は書きこまないで下さい。
京都大学霊長類研究所
0005デフォルトの名無しさん
2010/10/04(月) 23:43:140006デフォルトの名無しさん
2010/10/05(火) 01:32:520007デフォルトの名無しさん
2010/10/05(火) 08:47:510008デフォルトの名無しさん
2010/10/06(水) 01:02:05最初に集合知プログラミングを読むだろ?
集合知プログラミング
http://www.amazon.co.jp/dp/4873113644/
0009デフォルトの名無しさん
2010/10/08(金) 05:53:590010デフォルトの名無しさん
2010/10/08(金) 06:12:53数学的にいえばどちらもデータ縮約の一種なので似た一つのグループとして扱われる
JPEGの不可逆圧縮も実は機械学習やデータマイニングと同じグループに入る。
0011デフォルトの名無しさん
2010/10/09(土) 07:27:22データマイニングは実データからモデルを構築するための技術群と手法。
機械学習は観測データから外挿的推定をするための技術群。
共通した要素技術は多いが、目的と得られる出力がまるで違う。
0012デフォルトの名無しさん
2010/10/11(月) 05:42:110013デフォルトの名無しさん
2010/10/14(木) 05:50:06http://www.publickey1.jp/blog/10/10_3.html
グーグルやマイクロソフト曰く、
「統計分析こそ次の10年でもっとも魅力的な職業になる」そうです。
いま、大量のデータを指す「Big Data」という言葉が多くの場面で使われるようになってきました。
ITの発展に、さまざまなビジネスの現場で、いままで以上に詳細な販売データ、ネット広告に対する反応、
オンライン上での自社の評判など、ビジネスに関連するデータが詳細かつ膨大になってきたためです。
IBMもデータの分析ができる人材を4000人増やすと記事で触れられています。
これまで、IT分野の中心的な役割は、さまざまな目的に応じたシステムを構築することでした。
ITの専門性とは主に、ソフトウェアとハードウェアを使って構築するためのものでした。
しかし、そうして構築したシステムからどんどんとデータが送られてくるようになってくると、次の時代のITの役割として、
このITによって生成されたデータを活用するために分析、加工することの比重が高くなってくるのでしょう。
そしてITエンジニアに求められる専門性もそれに従って、統計や確率、集合や演算といった数学的な専門性の上で、
それを実装するためのプログラミング技術が重視される時代になるのかもしれません。
0014デフォルトの名無しさん
2010/10/14(木) 22:52:54ttp://www.publickey1.jp/blog/10/post_131.html
グーグル、世界中のショッピングデータから独自の景気動向指数を算出。
カルビーは降雨量や気温からジャガイモの品質を算出。「これがデータの威力」
0015デフォルトの名無しさん
2010/10/16(土) 04:08:38実際やっている人間からするとものすごくよく分かるのだが、
プログラマ かつ 統計の専門教育を受けている人が少ないからなあ。
このスレの過疎っぷりを見てもそうだが。
A4で5枚くらいのパンフレットを書いて分野を盛り上げたほうがいいんだろうか。
0016デフォルトの名無しさん
2010/10/16(土) 04:21:51プログラマの皆さん。
「スパムフィルタの学習」説明できますか?
「google IMEのクローン」ぱっと骨組みだけでも考えられますか?
「天候から品質や売上を予測する」穀物メジャーからコンビニまで使っています。
インターネットを使って日々膨大なデータを低コストで集めることができるようになりました。
そして今、湯水のように溢れるデータから価値のある情報を引き出す技法、
データマイニング、機械学習、各種の統計は一番ホットな分野となっています。
今後10年はこれで戦うことができ、20年後にはただの常識となっているでしょう。
プログラマの皆さん。
統計を覚えて、プログラマからコンサルタントになりませんか。
0017デフォルトの名無しさん
2010/10/16(土) 06:22:57いや、俺はプログラマとして機械学習を応用したプログラムを作り続ける。
つーか、こんな面白い仕事、他人に渡せるかってのw
0018デフォルトの名無しさん
2010/10/23(土) 21:20:07仕事紹介してよ・・・
基礎統計が分かってて
プログラム組めればいいの?
0019デフォルトの名無しさん
2010/10/24(日) 06:35:49やっぱ、ノンパラメトリック・ベイジアンぐらい鼻歌まじりに実装できないと・・・
0020デフォルトの名無しさん
2010/10/24(日) 11:36:580021デフォルトの名無しさん
2010/10/24(日) 18:17:24SASとSPSS必須
0022デフォルトの名無しさん
2010/10/24(日) 18:27:41Rじゃだめですか?
SPSSはともかく、SASは高い。
0023デフォルトの名無しさん
2010/10/24(日) 19:29:20ウチはR(37)、ウチはSPSS、ウチはSAS(18)って感じで。
ウチはMatlab(19)でとかウチはLabViewでみたいに。
0025デフォルトの名無しさん
2010/10/25(月) 02:42:14・SPSS
・SAS
・R
機械学習系
・Octave
・Matlab
・Weka
最近は自分で実装しなくてもツールが沢山あるからねぇ。
使いたい手法の概要とツールの使い方だけ覚えておけばいい。
0026デフォルトの名無しさん
2010/10/25(月) 03:21:52何とか統計で働きたい
0027デフォルトの名無しさん
2010/10/25(月) 06:06:240028デフォルトの名無しさん
2010/10/25(月) 07:54:470029デフォルトの名無しさん
2010/10/25(月) 08:35:270030デフォルトの名無しさん
2010/10/25(月) 08:36:57Rのほうがまし。SPSSはしらない。
0031デフォルトの名無しさん
2010/10/25(月) 18:13:19マイニング屋ならそうだね。あと研究主体の人達。
ML応用系のシステム屋は、地道にシコシコと実装。でも楽しい。
0032遠隔地からの電磁波による思考盗聴は現段階では不可能
2010/10/25(月) 19:23:56�@脳に電極を埋め込む手術が必要である。
�A通信媒体は電波(電磁波)である。
ということが2009年段階で言われているようです。(下記参照)
『脳を読み取る最新技術(前半) 20090209 』
http://www.youtube.com/watch?v=D-8kuZzFKlA
『脳を読み取る最新技術(後半) 20090209 』
http://www.youtube.com/watch?v=mBYWsHsVuKA
したがって、「脳に電極を埋め込まれるような手術を受けていない人」や
「遠隔からの電磁波による思考盗聴を危惧している人」は思考盗聴される
ことはありえないと判断してよいのではないでしょうか。
皆さんの個人情報やプライバシー情報の漏洩・流出と『思考盗聴』とよばれる
現象には関連性があるのではないでしょうか。
『ライフログ集合体と個人情報・プライバシー問題(『思考盗聴』とよばれる現象の一種について)』
http://infowave.at.webry.info/201001/article_2.html
遠隔地から電磁波を送って思考を盗聴する「思考盗聴装置」という機器があるわけではないと思うのですが
どうでしょうか。
0033遠隔地からの電磁波による思考盗聴は現段階では不可能(2)
2010/10/25(月) 19:25:04http://ja.wikipedia.org/wiki/%E3%83%96%E3%83%AC%E3%82%A4%E3%83%B3%E3%83%BB%E3%83%9E%E3%82%B7%E3%83%B3%E3%83%BB%E3%82%A4%E3%83%B3%E3%82%BF%E3%83%BC%E3%83%95%E3%82%A7%E3%83%BC%E3%82%B9
でいう「非侵襲式」という方式です。実用面の説明として(以下引用)
「手軽にセンサーの取り外しが出来ることから実用面でリードしているものの、
頭蓋骨などの影響で脳波が変化してしまい(体積伝導)、侵襲式と同じように正確に情報を読み取れるかどうかは課題として
残っている。」(以上引用)
と述べています。�@脳に電極を埋め込む手術が必要である。ような侵襲式でない場合は正確な脳波を測ることは 現段階では不可能
なようです。脳波を測るのに�A電波(電磁波)を使う。と考えるとして、遠隔地からどのような電波 を対象者(ターゲット)に照射
して脳波を読もうとするのでしょうか。指向性電波でしょうか。対象者だけに電波(電磁波)を照射できる 保証はあるのでしょうか。
携帯電話の電磁波でも長時間浴びると脳に障害がでると言われていますが、どれくらいの間対象者に電波 (電磁波)を照射するので
しょうか。長時間の電磁波照射は人体に有害である可能性が高いですよね。結局、遠隔地からの電磁波照射では対象者の脳波や
脳の血流を正確に読むことはできないと考えられます。
0034遠隔地からの電磁波による思考盗聴は現段階では不可能(3)
2010/10/25(月) 19:26:19http://www.newtonpress.co.jp/science/newton/back/back10/n1003.html
の『脳研究の今』P42〜P43に「fMRI」についての情報がのっています。日本では
>>33で述べられているような脳に電極を埋め込まない「非侵襲式」の研究が盛んなよう
です。興味があれば読んでみてはいかがでしょうか。「fMRI」については下記の
『Wikipedia』の「fMRI」を参照してください。
http://ja.wikipedia.org/wiki/FMRI
脳波を測定するにしても、脳も血流を測定するにしても、遠隔地からの電磁波による
思考盗聴は現段階では不可能なようです。 したがって、>>32で述べているように
「脳に電極を埋め込まれるような手術を受けていない人」や 「遠隔からの電磁波
による思考盗聴を危惧している人」は思考盗聴される ことはありえないと判断して
よいのではないでしょうか。
皆さんの個人情報やプライバシー情報の漏洩・流出と『思考盗聴』とよばれる
現象には関連性があるのではないでしょうか。
『ライフログ集合体と個人情報・プライバシー問題(『思考盗聴』とよばれる現象の一種について)』
http://infowave.at.webry.info/201001/article_2.html
遠隔地から電磁波を送って思考を盗聴する「思考盗聴装置」という機器があるわけではないと思うのですが
どうでしょうか。
0035遠隔地からの電磁波による思考盗聴は現段階では不可能(4)
2010/10/25(月) 19:30:41サイバーワールド『脳波から意志を読み取る装置が実用化へ』(12ページ)の
「持ち運び可能な無線脳波計」の項目に次のような記載があります。
(以下引用)
「これまでの認知型BMIは、装置が大きく高価で、操作もむずかしいなど、
実用性にもとぼしいものが多かった。そんな中、産業技術総合研究所の研究
グループは、認知型BMIシステムを用いた、より実用性の高い意志伝達装置
「ニューロコミュニケーター」を開発した。BMIには、脳に電極を刺して
脳活動を読み取る「侵襲型」と、脳に電極を刺さない「非侵襲型」がある。
ニューロコミュニケーターは、より安全性の高い「非侵襲型」で、ヘッド
キャップをかぶり、頭皮上の脳波(電位変化)から脳活動を計測する方法
を採用している。そして、コア技術の一つとして開発されたのが、持ち運
び可能な「超小型脳波計」である。この脳波計は、コイン型電池で長時間
稼動し、外部機器とは無線で通信するため、ケーブルからのノイズの混入
もなく、ユーザーの動きも制限しない。(以上引用)
『このニューロコミュニケーターでも頭部に脳波を測るヘッドキャップを常時装着しています。
その測定結果を電波で送信するのです。脳波を測定するにしても、脳も血流を測定するにしても、
遠隔地からの電磁波による 思考盗聴は現段階では不可能なようです。 したがって、>>32
で述べて いるように 「脳に電極を埋め込まれるような手術を受けていない人」や 「(自分の意思で脳波測定の
ヘッドキャップをつけていないのに)遠隔からの電磁波 による思考盗聴を危惧している人」は思考盗聴
される ことはありえないと判断して よいのではないでしょうか。
皆さんの個人情報やプライバシー情報の漏洩・流出と『思考盗聴』とよばれる
現象には関連性があるのではないでしょうか。 『ライフログ集合体と個人情報・プライバシー問題
(『思考盗聴』とよばれる現象の一種について)』 http://infowave.at.webry.info/201001/article_2.html
遠隔地から電磁波を送って思考を盗聴する「思考盗聴装置」という機器があるわけではないと思うのですが
どうでしょうか。
0036『アメリカ経由の通信情報ローンダリング手法』の確立可能性あり
2010/10/25(月) 19:34:03http://infowave.at.webry.info/201010/article_2.html
盗聴法改正案が来年提出され、もし成立すれば、基本的に米国のインターネット・サービス
を利用するユーザーは、国の区別なしに米公安機関による通信傍受の対象となる。これは
意外な落とし穴となるだろう。たとえば、東京から大阪までスカイプで電話をした場合、
もしその通話が米国の管理サーバーを経由していれば、理論上、米国公安当局は傍受をできる
ことになる。同様に、日本の知人や友人同士が楽しくフェースブックで交流していても、
そのメールやアップロードした写真、書き残したメモなどが米国のサーバーにある限り、
米国の公安当局が傍受あるいは閲覧することができるようになる。
0037警察の傍聴・撮影に係わる「令状主義」の徹底の必要性に関して
2010/10/25(月) 19:37:35http://infowave.at.webry.info/201010/article_1.htmlの参照お願いします。
0038デフォルトの名無しさん
2010/10/25(月) 19:54:20Webブラウジング履歴やユビキタス/Augmented Realityにおける個人情報データの蓄積に対する抗議文か。
まあその危惧は分からないでもない。
0039デフォルトの名無しさん
2010/10/25(月) 20:37:42google等の情報集積の危険性は同意。。
0040デフォルトの名無しさん
2010/10/25(月) 22:42:58androidでさらに加速するだろうしね
0041デフォルトの名無しさん
2010/10/26(火) 04:58:31日本の総務省はDPIを認める方向で動いているし。
0042デフォルトの名無しさん
2010/10/26(火) 19:16:330043デフォルトの名無しさん
2010/10/27(水) 00:55:360044デフォルトの名無しさん
2010/10/27(水) 12:23:35たまに出てくるGoogle Ads見てみ
見事に最近の検索結果と一致してるから。
まあDPIも危険だろうけど。
歴史上独占が進んでおかしくならなかったケースなんて
ほとんど無いからね。
0045デフォルトの名無しさん
2010/10/27(水) 22:23:550046デフォルトの名無しさん
2010/10/28(木) 20:51:54> たまに出てくるGoogle Ads見てみ
> 見事に最近の検索結果と一致してるから。
それのどこが危険なの?
0047デフォルトの名無しさん
2010/10/29(金) 11:18:230048デフォルトの名無しさん
2010/10/29(金) 18:28:17そういうのが検索結果やアドに反映されてたら怖いけどさ、
ググルで検索した履歴がググルのアドに反映されても何の不思議も怖さもないんだけど。
0049デフォルトの名無しさん
2010/10/30(土) 00:34:030050デフォルトの名無しさん
2010/11/06(土) 06:39:420051デフォルトの名無しさん
2010/11/06(土) 22:47:400052デフォルトの名無しさん
2010/11/07(日) 20:27:440053デフォルトの名無しさん
2010/11/07(日) 21:03:120054デフォルトの名無しさん
2010/11/08(月) 01:06:540055デフォルトの名無しさん
2010/11/08(月) 01:10:52どういう評価方法を採るのが一般的ですか?
0056デフォルトの名無しさん
2010/11/08(月) 03:56:05そもそも教師データが無いので評価できないのでは?
クラスタリングの目的は潜在変数の予測だしね。
評価の基準(教師データ)があるなら教師付き学習を使うだろ。
0057デフォルトの名無しさん
2010/11/08(月) 17:13:590058デフォルトの名無しさん
2010/11/09(火) 04:58:42とある過程の動的計画法(ダイナミックプログラミング)
0059デフォルトの名無しさん
2010/11/09(火) 04:59:53凝集度を計測したり、色々な評価尺度があるが?
0060デフォルトの名無しさん
2010/11/10(水) 00:24:150061デフォルトの名無しさん
2010/11/10(水) 10:41:290062デフォルトの名無しさん
2010/11/10(水) 12:08:14JavaならWekaとかあるよ
ガリガリは書かないだろうけど
0063デフォルトの名無しさん
2010/11/10(水) 15:37:52過去半年の英米圏で発表された科学論文系のプレスリリース約12000件のクラスタリングを
やってみたところ、プログラムがまったく動作しなかった。
元テキストで使われている英単語から辞書を作成したところ、辞書の大きさは約6万件。
これを元に記事ごとの単語頻出度を抽出させたんだが、1記事6万件の単語フィールドだと
普通のプログラムだと処理しきれないみたい。
集合知プログラミングのサンプルデータだとちゃんと処理できたのだが、
http://kiwitobes.com/clusters/blogdata.txt
0064デフォルトの名無しさん
2010/11/10(水) 21:52:51単語頻出度の出現率リストから作り直す必要があるみたいなので、今、元データを見直してみたところ、
全テキストに出現するユニークワードは67769。この内、1度しか出現しないワードは全体の48%。
反対にもっともよく出現するワードはこれ、とりあえず、上と下のワードを削ってみます。
1 6703 research
2 6442 study
3 6297 university
4 5410 researchers
5 4182 journal
6 4071 published
7 4049 found
8 3467 professor
9 3088 years
10 2910 health
11 2862 time
12 2819 results
13 2694 team
14 2688 patients
15 2687 scientists
16 2687 data
17 2635 author
18 2623 disease
19 2581 people
20 2578 findings
0065デフォルトの名無しさん
2010/11/10(水) 23:11:420066デフォルトの名無しさん
2010/11/11(木) 00:45:30日本語のブログ記事もそこそこあるが、ほとんどは、他のサイトでこういうことが紹介されていました、という
伝聞記事で、実際にテキストマイニングをやったことはない人が書いたもの。実際に自分で試して記事は
ベイジアン分類はそこそこあるが、クラスタリングになるとほとんどない。非負値行列因数分類とかになると
そもそも入門レベルでの解説は不可能で、自然言語系の専門教育を受けた人じゃないとかなり難解。
集合知プログラミングの作者のブログによるとこの本(原書)は1500部売れたとか書いてあるけど、
1500部というと多分、初版で終わりのレベル。英米圏でも1500というのはオライリーの専門書のなかでも
かなり専門的な分野だと思う。
0067デフォルトの名無しさん
2010/11/11(木) 01:37:550068デフォルトの名無しさん
2010/11/11(木) 15:22:250069デフォルトの名無しさん
2010/11/11(木) 22:25:58http://www.dl.kuis.kyoto-u.ac.jp/lecture/doc/infosystem02.pdf
0070デフォルトの名無しさん
2010/11/12(金) 01:54:300071デフォルトの名無しさん
2010/11/12(金) 16:23:580072デフォルトの名無しさん
2010/11/12(金) 16:29:20もっと応用に使うべき。
0073デフォルトの名無しさん
2010/11/12(金) 16:30:09どうして?
0074デフォルトの名無しさん
2010/11/12(金) 17:11:05シミュレート板に関連スレがいくつかありました。
しかし9月上旬にkamomeが飛んだ時にログが2ch.netから失われました。
過疎板の上に今は書き込み規制が乱発されているので再建は難しそうです。
http://kamome.2ch.net/sim/
kamome移転前のログが下記ページにあります。
http://www.unkar.org/read/science6.2ch.net/sim
0075デフォルトの名無しさん
2010/11/12(金) 18:15:26あの本で載っているPythonのサンプルはアルゴリズムを説明するため使っているもので、
プログラム例ではないよ。現にそもまま打ち込んでも動かないというか、多分、著者は、
実行系で動かしたものを掲載したんではなく、ワープロでそもまま直感的に打ち込んだもの
を掲載しているんじゃないかと思う。つまり、アルゴリズムの表現としてただ単に平易な言語
を使っただけではないかと思う。
0076デフォルトの名無しさん
2010/11/12(金) 19:25:280077デフォルトの名無しさん
2010/11/12(金) 22:40:37アマゾンのコメントとかには、プログラムを打ち込んでも全然動かないとか、そもそもシンタックスがおかしくおかしいとか、
果ては演算子のxが書籍内ではx(エックス)が使われており、著者は四則演算もできないバカとか、完全に的外れのコメントまで書かれている。
0078デフォルトの名無しさん
2010/11/13(土) 16:21:370079デフォルトの名無しさん
2010/11/16(火) 12:55:310080デフォルトの名無しさん
2010/11/16(火) 13:29:46そうは言うけど、自分の知らないプログラミング言語だとわかりにくいよ
サンプルコードはC系の言語(C,C++,C#,Java)当たりにしとくべき
0081デフォルトの名無しさん
2010/11/16(火) 14:34:35それこそ、向かないでしょう。
0082デフォルトの名無しさん
2010/11/16(火) 14:44:420083デフォルトの名無しさん
2010/11/16(火) 19:33:51データクラスタリングの章は、根本的なところで、テキストから抽出する単語の頻出度データの構造が悪い。
セガランのクラスタリング実装では、Big brown fox jumps over the lazy dogとNow is the time all the good men stand for America.
という2つのテキストがあった場合、出現する全部単語で列を作って
1 -> 1 1 1 1 1 1 1 1 0 0 0 0 0 0 0 0と
2 -> 0 0 1 0 0 0 1 0 1 1 1 1 1 1 1 1
のようなテーブルを作ってクラスタライングを実行することになる。ところが、大量の文章を元にこのデータ
構造を作ろうとなると、それこそ、普通の辞書に載っているだけの単語が出現することになって、
元データの1行の列数が数万とかとんでもないことになって処理が困難になる。
その後でBayonを使ってみてBayonのデータ構造がかなり違っていることに気づいたのだが、Bayonの場合、入力データは
Big 1 brown 1 fox 1 jumps 1 over 1 the 1 lazy 1 dog 1
Now 1 is 1 the 2 time 1 all good 1 men 1 stand 1 for 1 America 1
みたいな記述になっていてデータが単純。あの本の批判には、Pythonのシンタックスがおかしいという他に
Pythonによる実装例だとスケーラブルな処理ができなくなるというのがあるんだけど、まあ、その批判も
実際に試した結果から言っているものではないな。上のデータ構造はセガランはベイジアン分類器でも
使っているが、そもそもスケーラブルな処理をこなすためにはこのデータ構造そのものが問題でPython
云々の問題ではない。ただし、まあ、あのレベルの本だとそこを含めて判って当然なんだろうと思う。
0084デフォルトの名無しさん
2010/11/18(木) 16:14:31データ構造の考え方としては間違えてないと思う。
実際、疎行列に最適化した実装なんていくらでもあるよ。
0085デフォルトの名無しさん
2010/11/19(金) 10:51:52Javaに関してだけのコメントだけど、
「Javaによる知能プログラミング入門」なんかを読んでみると
この手の本にJavaは向かない気がする。プログラムの一単位が
大きく、説明文とコードを1ページに詰めようとすると、文字も
細かくなり読みにくい。やはりこういうレベルのアルゴリズム
記述は記号処理言語だけで構成することが望ましいのではないか。
008685
2010/11/19(金) 12:56:02説明箇所は少ないね。データ構造と実行例ばかり。
0087デフォルトの名無しさん
2010/11/19(金) 17:01:430088デフォルトの名無しさん
2010/11/20(土) 08:05:27集合蜘 in action
0089『尖閣ビデオ』流出問題に垣間見る通信の秘密の法律・傍聴法の無力化
2010/11/22(月) 06:40:29で「警察・盗撮」というキーワードで検索すると、警察官による盗撮事件が複数検索できます。もちろん、盗撮行為をした
警官は逮捕されています。一方、「警察・盗聴」というキーワードで検索すると、警察官による盗聴事件はほとんど検索結果
がでません。これにはいくつかの可能性が考えられると思うのです。
�@本当に警察官は傍聴法にもとづいたと傍聴以外の違法な盗聴を行って
いないから事件にならない。
�A「検察が法的根拠なしでも開示要請すれば、ほいほいと従うという暗黙の慣例」にしたがって、
実は傍聴法にもとづかない違法・越権盗聴を行っているが、日本国内のプロバイダーや通信業者の
協力で問題が表面化せずにごまかせている。
『尖閣ビデオ』流出問題に垣間見る通信の秘密の法律・傍聴法の無力化』(下記参照おねがいします)
http://infowave.at.webry.info/201011/article_2.html
0090デフォルトの名無しさん
2010/11/22(月) 07:40:10既存のどの言語にも平等に似てない擬似言語を使うしかないんじゃないか
いや件の本が良いか悪いかは別として
0091デフォルトの名無しさん
2010/11/29(月) 08:26:36そのアルゴリズムを何を使ってどうやって説明するかは難しいよ。
例えばGoogleのページランクのアルゴリズムを説明するには、最終的には方程式でも示さなければダメになる。
それでもいいけど、そこまでいくともう論文でしょ。
オハイリーで出版できる本じゃなくなる。
0092デフォルトの名無しさん
2010/11/29(月) 10:52:54情報を与えて分類させたらちゃんと動くと思う?
0093デフォルトの名無しさん
2010/11/29(月) 11:27:11プログラムにデータを与えたらちゃんと分類したよ。
これはちょっとおもしろい。
http://d.hatena.ne.jp/aidiary/20091003/1254574041
0094デフォルトの名無しさん
2010/11/29(月) 16:17:360095『2ちゃんねる』:海外からのデータマイニング?
2010/11/29(月) 23:03:28(下記参照)
http://gimpo.2ch.net/test/read.cgi/news4plus/1230860771/
(以下引用)『譲渡先は「PACKET MONSTER INC. 」とされており、これについての詳細な説明はない。・・・(中略)・・・
また、書き込みを保存するサーバー自体はアメリカ合衆国にあり、従来、2ちゃんねる
ガイドに添えられていた「書き込み削除の最終責任は管理人ひろゆきにあります。 」という表現自体も削除されている・・・
(中略)・・・今回の“外国への譲渡”が、
書き込みをめぐる名誉棄損訴訟や法務省、警察庁など“ネットを取り締まる”官庁にも相当の影響を与えると思われる。』
(以上引用)
以上を読んでいただ後、下記を参照してください。
『アメリカ経由の通信情報ローンダリング手法』の確立可能性と傍聴法の無力化』
http://infowave.at.webry.info/201010/article_2.html
盗聴法改正案が来年提出され、もし成立すれば、基本的に米国のインターネット・サービス
を利用するユーザーは、国の区別なしに米公安機関による通信傍受の対象となる。これは
意外な落とし穴となるだろう。たとえば、東京から大阪までスカイプで電話をした場合、
もしその通話が米国の管理サーバーを経由していれば、理論上、米国公安当局は傍受をできる
ことになる。同様に、日本の知人や友人同士が楽しくフェースブックで交流していても、
そのメールやアップロードした写真、書き残したメモなどが米国のサーバーにある限り、
米国の公安当局が傍受あるいは閲覧することができるようになる。
0096デフォルトの名無しさん
2010/12/01(水) 10:59:12あたりまえだけど
色しかみてないのが良くわかるね
0097デフォルトの名無しさん
2010/12/01(水) 12:40:010098デフォルトの名無しさん
2010/12/01(水) 23:04:18できれば日本語で
0099デフォルトの名無しさん
2010/12/02(木) 02:03:08このスレ見てたらまた読みたくなってきた
0100デフォルトの名無しさん
2010/12/02(木) 03:39:030101デフォルトの名無しさん
2010/12/02(木) 07:05:18あそこだと400円ぐらいだろうww
0102デフォルトの名無しさん
2010/12/03(金) 07:06:17【超初心者向け】
集合知プログラミング
http://www.amazon.co.jp/dp/4873113644/
フリーソフトでつくる音声認識システム - パターン認識・機械学習の初歩から対話システムまで
http://www.amazon.co.jp/dp/4627847114/
【初心者向け】
統計的機械学習―生成モデルに基づくパターン認識
http://www.amazon.co.jp/dp/4274502481/
わかりやすいパターン認識
http://www.amazon.co.jp/dp/4274131491/
【中・上級者向け】
パターン認識と機械学習 上 - ベイズ理論による統計的予測
http://www.amazon.co.jp/dp/443110013X/
0103デフォルトの名無しさん
2010/12/06(月) 17:22:200104デフォルトの名無しさん
2010/12/15(水) 03:15:590105デフォルトの名無しさん
2010/12/15(水) 09:51:050106デフォルトの名無しさん
2010/12/15(水) 15:53:22多少かじってる人なら中身をちょっと見れば自分に適してるかどうか判断できるっしょ
0107デフォルトの名無しさん
2010/12/15(水) 16:36:38どうもありがとうございます。
アメリカの尼の評価は非常に高かったしデータマイニングは初学なので読んでみようと思います。
0108デフォルトの名無しさん
2010/12/16(木) 18:23:01良い本だと思いますよ。
題材も、掲載されているアルゴリズムも、わかりやすいと思う。
ただ、プログラム例に怪しいものもあるので
ネットで検索しながら読んだ方がいいかもね。
あと、数学的な背景を知りたければこの本の後に別な本を読むべし。
0109デフォルトの名無しさん
2010/12/16(木) 22:35:37windows版のliblinearのL2正則化付きロジスティック回帰で学習させると、
学習例が10億を超えたくらいからエラーが出ます
(正確にはVisual Studioのデバッガが出る)。
心当たりのある人いますか?
本当は自分でliblinearをコンパイルして調べないといけないのだけど・・・。
0110デフォルトの名無しさん
2010/12/17(金) 05:08:120111デフォルトの名無しさん
2010/12/17(金) 10:22:370112デフォルトの名無しさん
2010/12/17(金) 11:27:210113デフォルトの名無しさん
2010/12/17(金) 14:43:080114デフォルトの名無しさん
2010/12/17(金) 23:10:420115デフォルトの名無しさん
2010/12/20(月) 09:29:050116デフォルトの名無しさん
2010/12/20(月) 15:14:250117デフォルトの名無しさん
2010/12/20(月) 19:39:460118デフォルトの名無しさん
2010/12/21(火) 14:09:100119デフォルトの名無しさん
2010/12/21(火) 15:52:430120デフォルトの名無しさん
2010/12/23(木) 02:37:50皆さんの意見により買わせて頂きました。
とても楽しい本で導入として買って見ましたが非常に良かったと思います。
とりあえず>>102を参考にして順次レベルアップしていこうと思います。
回答頂いた方本当にありがとうございました。
0121デフォルトの名無しさん
2010/12/23(木) 04:55:28そのへんは少し自分で調べて変更が必要だった。
0122デフォルトの名無しさん
2010/12/23(木) 23:10:11アルゴリズムの記述も少ないし内容的にも表面なぞってるだけでなんでこんなに褒められてんだかわからんww
0123デフォルトの名無しさん
2010/12/24(金) 03:05:34どんな問題に適用できるのかさえ知っていればね。
SVMだって使うだけならカーネル法なんか知らなくても問題無い。
0124デフォルトの名無しさん
2010/12/24(金) 06:55:49なら100万件のデータセットを手で打ち込め。
0125デフォルトの名無しさん
2010/12/24(金) 22:38:01車輪の発明しないようにね
0126デフォルトの名無しさん
2010/12/26(日) 23:17:51フリーソフトでつくる音声認識システムの本のほうの利点みたいな所を紹介してもらえないでしょうか。
0127デフォルトの名無しさん
2010/12/26(日) 23:50:39・各手法がどのような問題に適用できるのか
・各手法の長所と短所
とかね。
各手法の詳しいアルゴリズムは載ってないので自分で実装は出来ないけど、
どの問題にはどの手法が適しているとかは分かるようになるし、
WebAPIなどのツールを使って問題を解く事は出来るようになる。
「フリーソフトでつくる音声認識システム」の方は機械学習やパターン認識寄りで、
各手法のアルゴリズムを数式を使って詳しく説明している。
「集合知プログラミング」よりは多少難しいが、
これくらいの内容は理解してないと色々困る。
0128デフォルトの名無しさん
2010/12/27(月) 00:01:32なるほど自分の用途だと後者の本が良かったのでこれで心配せずに買えそうです。
迅速な回答ありがとうございました。
0129デフォルトの名無しさん
2010/12/28(火) 20:55:130130デフォルトの名無しさん
2010/12/29(水) 11:09:260131デフォルトの名無しさん
2010/12/29(水) 11:15:490132デフォルトの名無しさん
2010/12/31(金) 20:23:090133デフォルトの名無しさん
2010/12/31(金) 21:57:35機械学習とはどうやら違うようなので。
0136デフォルトの名無しさん
2011/01/02(日) 01:55:060137デフォルトの名無しさん
2011/01/02(日) 02:38:08>>11
0138デフォルトの名無しさん
2011/01/02(日) 15:17:570139デフォルトの名無しさん
2011/01/02(日) 15:39:08それは違うだろ・・・
0140デフォルトの名無しさん
2011/01/02(日) 18:49:420141デフォルトの名無しさん
2011/01/02(日) 19:06:560142デフォルトの名無しさん
2011/01/02(日) 19:53:520143デフォルトの名無しさん
2011/01/02(日) 21:28:400144デフォルトの名無しさん
2011/01/03(月) 14:56:41機械を使わなくてもデータマイニングはできる
機械で実装できていないデータマイニングがある
0145デフォルトの名無しさん
2011/01/04(火) 01:59:30http://www.tokyo-tosho.co.jp/books/ISBN978-4-489-02045-2.html
0146デフォルトの名無しさん
2011/01/04(火) 18:41:510147デフォルトの名無しさん
2011/01/07(金) 18:11:270148デフォルトの名無しさん
2011/01/10(月) 00:57:17http://kamome.2ch.net/test/read.cgi/math/1294561909/
0149デフォルトの名無しさん
2011/01/10(月) 14:12:350150『2ちゃんねる』:海外からのデータマイニング?
2011/01/21(金) 05:48:32(下記参照)
http://gimpo.2ch.net/test/read.cgi/news4plus/1230860771/
(以下引用)『譲渡先は「PACKET MONSTER INC. 」とされており、これについての詳細な説明はない。・・・(中略)・・・
また、書き込みを保存するサーバー自体はアメリカ合衆国にあり、従来、2ちゃんねる
ガイドに添えられていた「書き込み削除の最終責任は管理人ひろゆきにあります。 」という表現自体も削除されている・・・
(中略)・・・今回の“外国への譲渡”が、
書き込みをめぐる名誉棄損訴訟や法務省、警察庁など“ネットを取り締まる”官庁にも相当の影響を与えると思われる。』
(以上引用)
以上を読んでいただ後、下記を参照してください。
『アメリカ経由の通信情報ローンダリング手法』の確立可能性と傍聴法の無力化』
http://infowave.at.webry.info/201010/article_2.html
盗聴法改正案が来年提出され、もし成立すれば、基本的に米国のインターネット・サービス
を利用するユーザーは、国の区別なしに米公安機関による通信傍受の対象となる。これは
意外な落とし穴となるだろう。たとえば、東京から大阪までスカイプで電話をした場合、
もしその通話が米国の管理サーバーを経由していれば、理論上、米国公安当局は傍受をできる
ことになる。同様に、日本の知人や友人同士が楽しくフェースブックで交流していても、
そのメールやアップロードした写真、書き残したメモなどが米国のサーバーにある限り、
米国の公安当局が傍受あるいは閲覧することができるようになる。
0151遠隔地からの電磁波による思考盗聴は現段階では不可能
2011/01/21(金) 05:58:20�@脳に電極を埋め込む手術が必要である。
�A通信媒体は電波(電磁波)である。
ということが2009年段階で言われているようです。(下記参照)
『脳を読み取る最新技術(前半) 20090209 』
http://www.youtube.com/watch?v=D-8kuZzFKlA
『脳を読み取る最新技術(後半) 20090209 』
http://www.youtube.com/watch?v=mBYWsHsVuKA
したがって、「脳に電極を埋め込まれるような手術を受けていない人」や
「遠隔からの電磁波による思考盗聴を危惧している人」は思考盗聴される
ことはありえないと判断してよいのではないでしょうか。
皆さんの個人情報やプライバシー情報の漏洩・流出と『思考盗聴』とよばれる
現象には関連性があるのではないでしょうか。
『ライフログ集合体と個人情報・プライバシー問題(『思考盗聴』とよばれる現象の一種について)』
http://infowave.at.webry.info/201001/article_2.html
遠隔地から電磁波を送って思考を盗聴する「思考盗聴装置」という機器があるわけではないと思うのですが
どうでしょうか。
0152遠隔地からの電磁波による思考盗聴は現段階では不可能(2)
2011/01/21(金) 05:59:36http://ja.wikipedia.org/wiki/%E3%83%96%E3%83%AC%E3%82%A4%E3%83%B3%E3%83%BB%E3%83%9E%E3%82%B7%E3%83%B3%E3%83%BB%E3%82%A4%E3%83%B3%E3%82%BF%E3%83%BC%E3%83%95%E3%82%A7%E3%83%BC%E3%82%B9
でいう「非侵襲式」という方式です。実用面の説明として(以下引用)
「手軽にセンサーの取り外しが出来ることから実用面でリードしているものの、
頭蓋骨などの影響で脳波が変化してしまい(体積伝導)、侵襲式と同じように正確に情報を読み取れるかどうかは課題として
残っている。」(以上引用)
と述べています。�@脳に電極を埋め込む手術が必要である。ような侵襲式でない場合は正確な脳波を測ることは 現段階では不可能
なようです。脳波を測るのに�A電波(電磁波)を使う。と考えるとして、遠隔地からどのような電波 を対象者(ターゲット)に照射
して脳波を読もうとするのでしょうか。指向性電波でしょうか。対象者だけに電波(電磁波)を照射できる 保証はあるのでしょうか。
携帯電話の電磁波でも長時間浴びると脳に障害がでると言われていますが、どれくらいの間対象者に電波 (電磁波)を照射するので
しょうか。長時間の電磁波照射は人体に有害である可能性が高いですよね。結局、遠隔地からの電磁波照射では対象者の脳波や
脳の血流を正確に読むことはできないと考えられます。
0153遠隔地からの電磁波による思考盗聴は現段階では不可能(3)
2011/01/21(金) 06:01:31http://www.newtonpress.co.jp/science/newton/back/back10/n1003.html
の『脳研究の今』P42〜P43に「fMRI」についての情報がのっています。日本では
>>152で述べられているような脳に電極を埋め込まない「非侵襲式」の研究が盛んなよう
です。興味があれば読んでみてはいかがでしょうか。「fMRI」については下記の
『Wikipedia』の「fMRI」を参照してください。
http://ja.wikipedia.org/wiki/FMRI
脳波を測定するにしても、脳も血流を測定するにしても、遠隔地からの電磁波による
思考盗聴は現段階では不可能なようです。 したがって、>>151で述べているように
「脳に電極を埋め込まれるような手術を受けていない人」や 「遠隔からの電磁波
による思考盗聴を危惧している人」は思考盗聴される ことはありえないと判断して
よいのではないでしょうか。
皆さんの個人情報やプライバシー情報の漏洩・流出と『思考盗聴』とよばれる
現象には関連性があるのではないでしょうか。
『ライフログ集合体と個人情報・プライバシー問題(『思考盗聴』とよばれる現象の一種について)』
http://infowave.at.webry.info/201001/article_2.html
遠隔地から電磁波を送って思考を盗聴する「思考盗聴装置」という機器があるわけではないと思うのですが
どうでしょうか。
0154遠隔地からの電磁波による思考盗聴は現段階では不可能(4)
2011/01/21(金) 06:02:49サイバーワールド『脳波から意志を読み取る装置が実用化へ』(12ページ)の
「持ち運び可能な無線脳波計」の項目に次のような記載があります。
(以下引用)
「これまでの認知型BMIは、装置が大きく高価で、操作もむずかしいなど、
実用性にもとぼしいものが多かった。そんな中、産業技術総合研究所の研究
グループは、認知型BMIシステムを用いた、より実用性の高い意志伝達装置
「ニューロコミュニケーター」を開発した。BMIには、脳に電極を刺して
脳活動を読み取る「侵襲型」と、脳に電極を刺さない「非侵襲型」がある。
ニューロコミュニケーターは、より安全性の高い「非侵襲型」で、ヘッド
キャップをかぶり、頭皮上の脳波(電位変化)から脳活動を計測する方法
を採用している。そして、コア技術の一つとして開発されたのが、持ち運
び可能な「超小型脳波計」である。この脳波計は、コイン型電池で長時間
稼動し、外部機器とは無線で通信するため、ケーブルからのノイズの混入
もなく、ユーザーの動きも制限しない。(以上引用)
『このニューロコミュニケーターでも頭部に脳波を測るヘッドキャップを常時装着しています。
その測定結果を電波で送信するのです。脳波を測定するにしても、脳も血流を測定するにしても、
遠隔地からの電磁波による 思考盗聴は現段階では不可能なようです。 したがって、>>33
で述べて いるように 「脳に電極を埋め込まれるような手術を受けていない人」や 「(自分の意思で脳波測定の
ヘッドキャップをつけていないのに)遠隔からの電磁波 による思考盗聴を危惧している人」は思考盗聴
される ことはありえないと判断して よいのではないでしょうか。
皆さんの個人情報やプライバシー情報の漏洩・流出と『思考盗聴』とよばれる
現象には関連性があるのではないでしょうか。 『ライフログ集合体と個人情報・プライバシー問題
(『思考盗聴』とよばれる現象の一種について)』 http://infowave.at.webry.info/201001/article_2.html
遠隔地から電磁波を送って思考を盗聴する「思考盗聴装置」という機器があるわけではないと思うのですが
どうでしょうか。
0155デフォルトの名無しさん
2011/01/21(金) 06:06:390156デフォルトの名無しさん
2011/01/21(金) 06:27:17池沼か?
0157警察の傍聴・撮影に係わる「令状主義」の徹底の必要性に関して
2011/01/21(金) 07:29:33「池沼」とはどのような意味ですか。池と沼ですか。
0158警察の傍聴・撮影に係わる「令状主義」の徹底の必要性に関して
2011/01/21(金) 07:31:21見当たりません、目立つ事件と言えば『日本共産党幹部宅盗聴事件』くらいです。下記『Wikipedia』
「日本共産党幹部宅盗聴事件」を参照してください。
http://ja.wikipedia.org/wiki/%E6%97%A5%E6%9C%AC%E5%85%B1%E7%94%A3%E5%85%9A%E5%B9%B9%E9%83%A8%E5%AE%85%E7%9B%97%E8%81%B4%E4%BA%8B%E4%BB%B6
一方、「警察・盗撮」で検索すると多くの盗撮事件があることがわかります。これは、警察の盗聴と盗撮に対する
「令状主義」の差がでているのではないかと考えられます。下記参照おねがいします。
『警察の傍聴・撮影に係わる「令状主義」の徹底の必要性に関して(Nシステム運用法律の立法の重要性)』
http://infowave.at.webry.info/201010/article_1.htmlの参照お願いします。
0159警察の傍聴・撮影に係わる「令状主義」の徹底の必要性に関して2
2011/01/21(金) 07:32:38参照してください。
0160『尖閣ビデオ』流出問題に垣間見る通信の秘密の法律・傍聴法の無力化
2011/01/21(金) 07:36:33で「警察・盗撮」というキーワードで検索すると、警察官による盗撮事件が複数検索できます。もちろん、盗撮行為をした
警官は逮捕されています。一方、「警察・盗聴」というキーワードで検索すると、警察官による盗聴事件はほとんど検索結果
がでません。これにはいくつかの可能性が考えられると思うのです。
�@本当に警察官は傍聴法にもとづいたと傍聴以外の違法な盗聴を行って
いないから事件にならない。
�A「検察が法的根拠なしでも開示要請すれば、ほいほいと従うという暗黙の慣例」にしたがって、
実は傍聴法にもとづかない違法・越権盗聴を行っているが、日本国内のプロバイダーや通信業者の
協力で問題が表面化せずにごまかせている。
『尖閣ビデオ』流出問題に垣間見る通信の秘密の法律・傍聴法の無力化』(下記参照おねがいします)
http://infowave.at.webry.info/201011/article_2.html
0161デフォルトの名無しさん
2011/01/21(金) 19:57:10掲示板的には右翼左翼よりもある意味性質が悪い
0162デフォルトの名無しさん
2011/01/21(金) 20:02:040163内閣府HPにおける個人情報保護法
2011/01/21(金) 21:26:40見当たりません、目立つ事件と言えば『日本共産党幹部宅盗聴事件』くらいです。下記『Wikipedia』
「日本共産党幹部宅盗聴事件」を参照してください。
http://ja.wikipedia.org/wiki/%E6%97%A5%E6%9C%AC%E5%85%B1%E7%94%A3%E5%85%9A%E5%B9%B9%E9%83%A8%E5%AE%85%E7%9B%97%E8%81%B4%E4%BA%8B%E4%BB%B6
一方、「警察・盗撮」で検索すると多くの盗撮事件があることがわかります。これは、警察の盗聴と盗撮に対する
「令状主義」の差がでているのではないかと考えられます。下記参照おねがいします。
『警察の傍聴・撮影に係わる「令状主義」の徹底の必要性に関して(Nシステム運用法律の立法の重要性)』
http://infowave.at.webry.info/201010/article_1.htmlの参照お願いします。
『ライフログ集合体と個人情報・プライバシー問題(『思考盗聴』とよばれる現象の一種について)』
http://infowave.at.webry.info/201001/article_2.htmlにも記載させていただきましたが、
内閣府(HP管理は消費者庁に移動したようです。)の『個人情報保護法に関する疑問と回答』
(下記参照してください)http://www.caa.go.jp/seikatsu/kojin/gimon-kaitou.html#1_3
このページのQ1−3には「個人情報保護とはどういうことですか。プライバシー保護とは違うのですか。」
という質問がのっています。
その回答の一部に「個人情報保護法は、個人情報取扱事業者が個人情報の適正な
取扱いのルールを遵守することにより、プライバシーを含む個人の権利利益の侵害を未然に防止することを狙いとしています。」
という内容があることを確認できます。
つまり、内閣府ではプライバシーを含む個人の権利利益の侵害を未然に防止することを
目的にして、 とくに個人特定に関わる情報を個人情報として守るべきであるということを明示しているということです。
0164元総務省顧問の意見
2011/01/21(金) 21:30:56http://infowave.at.webry.info/201001/article_2.htmlにも記載させていただきましたが、
「自己情報コントロール権の銘記」に関しては必要があるという判断をしている元総務省顧問の人がいます。
『個人情報保護法改正の議論を始めよう』(下記参照してください、発言時は現職です。)
http://blog.goo.ne.jp/hosakanobuto/e/e51128c894c86ebef042aaaaa985cd11
(以下引用)
「個人情報保護法とは、その名の通り「国民の個人情報」を保護するのではなくて、
「個人情報」を行政機関(警察・検察など捜査機関を含む)が自由自在に使える状態
となってしまっていて、行政機関がどのように「個人情報」を扱っているのかについては、
当事者である個人がアクセスしようにも、「個人情報だから教えられません」という倒錯が起きている。
「自己情報コントロール権」が銘記されなかったせいだ。」 以上引用)
とにかく、個人情報やプライバシー情報が本人の一回ごとの認証なしに一方的に入手・利用されるような
状況は避けるべきではないでしょうか。
0165『2ちゃんねる』:海外からのデータマイニング?
2011/01/21(金) 21:33:23『【ネット】2ちゃんねる、“言論なき日本”を見捨てた?…2ちゃんねる、ひろゆき氏の手を離れてシンガポール共和国の法人へ譲渡[1/2]』
(下記参照)
http://gimpo.2ch.net/test/read.cgi/news4plus/1230860771/
(以下引用)『譲渡先は「PACKET MONSTER INC. 」とされており、これについての詳細な説明はない。・・・(中略)・・・
また、書き込みを保存するサーバー自体はアメリカ合衆国にあり、従来、2ちゃんねる
ガイドに添えられていた「書き込み削除の最終責任は管理人ひろゆきにあります。 」という表現自体も削除されている・・・
(中略)・・・今回の“外国への譲渡”が、
書き込みをめぐる名誉棄損訴訟や法務省、警察庁など“ネットを取り締まる”官庁にも相当の影響を与えると思われる。』
(以上引用)
以上を読んでいただ後、下記を参照してください。
『アメリカ経由の通信情報ローンダリング手法』の確立可能性と傍聴法の無力化』
http://infowave.at.webry.info/201010/article_2.html
盗聴法改正案が来年提出され、もし成立すれば、基本的に米国のインターネット・サービス
を利用するユーザーは、国の区別なしに米公安機関による通信傍受の対象となる。これは
意外な落とし穴となるだろう。たとえば、東京から大阪までスカイプで電話をした場合、
もしその通話が米国の管理サーバーを経由していれば、理論上、米国公安当局は傍受をできる
ことになる。同様に、日本の知人や友人同士が楽しくフェースブックで交流していても、
そのメールやアップロードした写真、書き残したメモなどが米国のサーバーにある限り、
米国の公安当局が傍受あるいは閲覧することができるようになる。
0166Tea and Coffee Time
2011/01/21(金) 21:46:38漏洩ルートはないのでしょうか。個人情報保護法や「通信の秘密」を守る法律が軽視、無視されて、
掲示板などのインターネット上の匿名性がなくなると、最近話題の集団ストーカー行為等が引き起こされる
可能性があると考えられます。(下記参照)
http://infowave.at.webry.info/200804/article_1.html
掲示板やホームページ、あるいはブログの意見を消去せずに言語統制や集団ストーカー
の関係を調べるよい方法がいくつか考えられると思うのですがどうでしょうか。
0167デフォルトの名無しさん
2011/01/22(土) 03:06:050168デフォルトの名無しさん
2011/01/22(土) 19:51:31【自動】株式トレーディングシステム Part6【売買】
http://hibari.2ch.net/test/read.cgi/tech/1252642575/
0169デフォルトの名無しさん
2011/01/23(日) 13:50:170170デフォルトの名無しさん
2011/02/05(土) 03:31:350171デフォルトの名無しさん
2011/02/05(土) 14:28:21http://toki.2ch.net/test/read.cgi/scienceplus/1296736553/
0172デフォルトの名無しさん
2011/02/12(土) 14:48:46状態数が多すぎて評価値を保存しきれません
何か良い方法はありますか?
0173デフォルトの名無しさん
2011/02/13(日) 22:21:530174デフォルトの名無しさん
2011/02/14(月) 18:13:540175Tea and Coffee Time
2011/02/24(木) 07:12:59.52掲示板等の匿名性は保たれているのでしょうか、暗に言語統制をしようとするための情報
漏洩ルートはないのでしょうか。個人情報保護法や「通信の秘密」を守る法律が軽視、無視されて、
掲示板などのインターネット上の匿名性がなくなると、最近話題の集団ストーカー行為等が引き起こされる
可能性があると考えられます。(下記参照)
http://infowave.at.webry.info/200804/article_1.html
掲示板やホームページ、あるいはブログの意見を消去せずに言語統制や集団ストーカー
の関係を調べるよい方法がいくつか考えられると思うのですがどうでしょうか。
0176『2ちゃんねる』:海外からのデータマイニング?(再)
2011/02/24(木) 07:46:57.50(下記参照)
http://gimpo.2ch.net/test/read.cgi/news4plus/1230860771/
(以下引用)『譲渡先は「PACKET MONSTER INC. 」とされており、これについての詳細な説明はない。・・・(中略)・・・
また、書き込みを保存するサーバー自体はアメリカ合衆国にあり、従来、2ちゃんねる
ガイドに添えられていた「書き込み削除の最終責任は管理人ひろゆきにあります。 」という表現自体も削除されている・・・
(中略)・・・今回の“外国への譲渡”が、
書き込みをめぐる名誉棄損訴訟や法務省、警察庁など“ネットを取り締まる”官庁にも相当の影響を与えると思われる。』
(以上引用)
以上を読んでいただ後、下記を参照してください。
『アメリカ経由の通信情報ローンダリング手法』の確立可能性と傍聴法の無力化』
http://infowave.at.webry.info/201010/article_2.html
盗聴法改正案が来年提出され、もし成立すれば、基本的に米国のインターネット・サービス
を利用するユーザーは、国の区別なしに米公安機関による通信傍受の対象となる。これは
意外な落とし穴となるだろう。たとえば、東京から大阪までスカイプで電話をした場合、
もしその通話が米国の管理サーバーを経由していれば、理論上、米国公安当局は傍受をできる
ことになる。同様に、日本の知人や友人同士が楽しくフェースブックで交流していても、
そのメールやアップロードした写真、書き残したメモなどが米国のサーバーにある限り、
米国の公安当局が傍受あるいは閲覧することができるようになる。
0177デフォルトの名無しさん
2011/02/24(木) 12:20:50.48http://fallabs.com/mikio/tech/promenade.cgi?id=64
なんとかなるかな
0178デフォルトの名無しさん
2011/02/26(土) 12:41:48.45話聞いてておかしいと思ったよ
なんかエキサイト翻訳的な日本語で話しかけられてるから意味が通じないって
言う、ハーフの友人の母なんかエキサイト翻訳の英文の意味が本国では通じな
いって言ってたけどな。
何度も何度も「子供たち」「子供たち」って聞こえて明らかに30過ぎたおっさんが
何言ってんだ?と思ったがな。
0179デフォルトの名無しさん
2011/02/26(土) 14:21:45.10100に1つくらいは使えるネタが作れそう。
0180デフォルトの名無しさん
2011/02/27(日) 09:35:17.93http://www.youtube.com/watch?v=dXXd251N7C8
の13分あたり
0181デフォルトの名無しさん
2011/02/27(日) 09:48:05.76ガンダムはSVMでNT判別するんだぜ?
0182デフォルトの名無しさん
2011/02/28(月) 12:03:48.960183デフォルトの名無しさん
2011/02/28(月) 15:09:44.040184デフォルトの名無しさん
2011/02/28(月) 16:29:55.90作りたいのか拾いたいのかどっちなんだ?
0185デフォルトの名無しさん
2011/02/28(月) 17:45:19.380186デフォルトの名無しさん
2011/02/28(月) 19:30:38.70作れよ。
0187デフォルトの名無しさん
2011/02/28(月) 19:43:50.890188デフォルトの名無しさん
2011/02/28(月) 22:20:08.980189デフォルトの名無しさん
2011/03/01(火) 00:30:57.35そうです。
喋らせる言葉はテキストマイニングで決める予定なので欲しいのは人工有声です。
0190デフォルトの名無しさん
2011/03/01(火) 12:56:32.130191デフォルトの名無しさん
2011/03/01(火) 13:45:39.260192デフォルトの名無しさん
2011/03/01(火) 13:53:37.870193デフォルトの名無しさん
2011/03/01(火) 15:11:23.180194デフォルトの名無しさん
2011/03/01(火) 16:16:24.39だったら書き込まないでください
0195デフォルトの名無しさん
2011/03/01(火) 21:11:40.43じゃ、お前って結局何もする気ないってことじゃん。
帰れよ。
0196デフォルトの名無しさん
2011/03/01(火) 23:17:24.54音声エンジンは作らないけど、AI作るんじゃないのか?
0197デフォルトの名無しさん
2011/03/02(水) 11:19:10.310198デフォルトの名無しさん
2011/03/02(水) 20:05:55.59それとも出力層ニューロンが1つだけのものをいうの?
0199デフォルトの名無しさん
2011/03/03(木) 21:48:14.53層の数は関係ない。
0200デフォルトの名無しさん
2011/03/09(水) 23:51:17.980201デフォルトの名無しさん
2011/03/10(木) 00:44:07.420202デフォルトの名無しさん
2011/03/10(木) 00:45:50.160203デフォルトの名無しさん
2011/03/10(木) 02:01:00.060204デフォルトの名無しさん
2011/03/10(木) 19:44:03.64そこら辺のメーラーにも機械学習が使われているから、
機械学習を使ってない仕事を探す方が難しい。
0205デフォルトの名無しさん
2011/03/10(木) 19:52:49.00SIerは末端パートナーから買い叩いたMLをポンと繋げるだけ
もちろん、SIerのSE様はMLなんて理解できてないから、
使えねえゴミシステムができあがるわけだがw
0206デフォルトの名無しさん
2011/03/10(木) 20:23:15.400207デフォルトの名無しさん
2011/03/20(日) 22:21:37.030208デフォルトの名無しさん
2011/03/21(月) 01:39:02.32批判思考、論理思考(広範囲の可能性から根拠に基づき対策を確定)、
人の気持ちを察する。これが出来なきゃコンサルは無理。
データをインフォメーションに変えるのは人間だからな。
0209デフォルトの名無しさん
2011/04/01(金) 20:07:40.61具体的にどんなことが出来るようになるの
0210デフォルトの名無しさん
2011/04/01(金) 20:19:39.67論文を書ける
0211デフォルトの名無しさん
2011/04/01(金) 21:23:29.19もう結構です
0212デフォルトの名無しさん
2011/04/01(金) 22:13:30.65女にモテる
0213デフォルトの名無しさん
2011/04/01(金) 22:17:02.11ジ ハ ,,ハ
デ (;゚◇゚)z
!?
0214デフォルトの名無しさん
2011/04/02(土) 06:03:59.970215デフォルトの名無しさん
2011/04/02(土) 06:46:22.600216デフォルトの名無しさん
2011/04/02(土) 11:03:44.700217デフォルトの名無しさん
2011/04/02(土) 15:46:18.690218デフォルトの名無しさん
2011/04/03(日) 22:54:49.030219デフォルトの名無しさん
2011/04/04(月) 00:37:16.220220デフォルトの名無しさん
2011/04/04(月) 09:54:07.28統計もあながちスレチではないと思ったんですが関係ないんでしょうか?
0221デフォルトの名無しさん
2011/04/04(月) 16:30:37.69ベイズ統計までくると完全に機械学習と区別できなくなってくる
0222デフォルトの名無しさん
2011/04/04(月) 18:24:54.790223デフォルトの名無しさん
2011/04/04(月) 22:49:09.47エキスパートシステムよりニューラルネットワークスの方が優れている事がわかった時点で
終わってると思ってた
0224デフォルトの名無しさん
2011/04/05(火) 00:58:38.84別に優れているわけじゃないでしょ。
得意分野が違うだけで。
0225デフォルトの名無しさん
2011/04/05(火) 11:19:38.430226デフォルトの名無しさん
2011/04/05(火) 18:36:38.210227デフォルトの名無しさん
2011/04/05(火) 20:01:59.134/7 予測 http://up3.viploader.net/ippan/src/vlippan198234.jpg
発表はドイツ気象庁 http://www.dwd.de/
0228デフォルトの名無しさん
2011/04/05(火) 22:56:27.28スパム分類はほとんどベイズネットが入ってる
0229デフォルトの名無しさん
2011/04/05(火) 23:34:03.69大した性能がでてないけどね。。
因果関係に自分で縛られて過学習を起こしやすいような希ガス
0230デフォルトの名無しさん
2011/04/05(火) 23:41:09.440231デフォルトの名無しさん
2011/04/06(水) 04:37:59.390232デフォルトの名無しさん
2011/04/08(金) 11:43:56.090233デフォルトの名無しさん
2011/04/08(金) 19:39:22.780234デフォルトの名無しさん
2011/04/08(金) 20:27:15.770235デフォルトの名無しさん
2011/04/08(金) 20:31:04.04音声認識であればフーリエ級数は必要だと思うけど。
分野によって必要になる数学は違ってくるよ。
0236デフォルトの名無しさん
2011/04/08(金) 22:37:48.900237デフォルトの名無しさん
2011/04/09(土) 01:59:14.960238デフォルトの名無しさん
2011/04/09(土) 11:07:22.43わかりやすいパターン認識も立ち読みしてみたんですがとりあえず数学の勉強が必須みたいなので最低限どんな分野を勉強したら良いでしょうか?
微積と線形あたりは勉強し直そうかと思ってるんですが
0239デフォルトの名無しさん
2011/04/09(土) 12:31:32.850240デフォルトの名無しさん
2011/04/09(土) 20:33:34.160241デフォルトの名無しさん
2011/04/09(土) 20:39:11.130242デフォルトの名無しさん
2011/04/10(日) 01:37:58.06とりあえずフリーソフトでつくる音声認識システムの分からない所は読み飛ばしながら最後まで読んでみようと思います。
アドバイスありがとうございました。
0243デフォルトの名無しさん
2011/04/13(水) 02:12:55.660244デフォルトの名無しさん
2011/04/13(水) 02:19:50.00だが、そうしたライブラリーも出回っているので、
それなりに勉強すれば、細かいところまで押さえなくても、なんとかなるかも?
0245デフォルトの名無しさん
2011/04/13(水) 23:31:51.13ベイズ理論(事前確率と事後確率の式の理解)
行列・ベクトル演算
指数関数・対数関数
英語
この辺が得意な人なら大抵の本は読めると思う
0246デフォルトの名無しさん
2011/04/14(木) 05:38:16.49偏微分
テイラー展開
ぐらいなもんだね、楽チンだw
0247デフォルトの名無しさん
2011/04/15(金) 12:24:12.120248デフォルトの名無しさん
2011/04/15(金) 12:53:55.30これから始めてみよう
0249デフォルトの名無しさん
2011/04/15(金) 21:00:35.170250デフォルトの名無しさん
2011/04/16(土) 11:11:05.840251デフォルトの名無しさん
2011/04/16(土) 18:38:58.94東大出版の統計学入門読み終わったくらいのレベルなんだけど
0252デフォルトの名無しさん
2011/04/16(土) 22:45:52.32「図解でわかる」レベルの本を読み終えたら、そのまま機械学習の本に入ればいいよ
0253デフォルトの名無しさん
2011/04/16(土) 22:59:52.490254デフォルトの名無しさん
2011/04/17(日) 23:34:57.420255デフォルトの名無しさん
2011/04/17(日) 23:52:10.550256デフォルトの名無しさん
2011/04/18(月) 21:07:31.51国際大会とか学会が金融や交通の架空のコンテスト用のデータを公開してる
あとはWEBサーバのログとか
0257デフォルトの名無しさん
2011/04/18(月) 22:35:53.61いわゆる「お客様の声」とか、評判分析に使えるようなテキスト・データ無いかな?
自動車だと国交省のクレームシステムがあるけど、基本的にネガティブ系に偏ってるし。
件数として100万件オーダーであるとうれしい。2ちゃんのログは勘弁。
0258デフォルトの名無しさん
2011/04/18(月) 22:51:02.80架空のヤツしかない
実在のヤツが欲しければ、企業に就職するか、企業と共同研究してる大学の研究室に入るしかない
0259デフォルトの名無しさん
2011/04/19(火) 19:20:45.54近頃はプライバシー保護がどうので、
なかなか思うように使わせてもらえません。
情報収集時にエンドユーザに見せる文言も
法務がやたらと保守的な文章にするし、
現場がよほど協力的じゃないと難しいっす。
0260デフォルトの名無しさん
2011/04/19(火) 23:22:31.83サンクス。やっぱ難しいみたいだね。自分も口コミ系サイト (kakaku.com等)、オンラインショップの
リコメンド (amazon等)、blog、facebook、twitter、2ch など探してみたけど、ゴミが多くて所望の情報を
選り分けるのが大変という印象。数100件程度ならともかく、それ以上は現実的じゃないと分かりました。
おっしゃるとおり企業に入るか、データを買ってくるしか、大量データをそろえるのは難しい感じですね。
0261デフォルトの名無しさん
2011/04/20(水) 09:50:37.18http://xtori.blogspot.com/2011/04/blog-post.html
お客様の声じゃないけど、データマイニングや機械学習はめっちゃ適用できそう
0262デフォルトの名無しさん
2011/04/20(水) 23:02:53.270263デフォルトの名無しさん
2011/04/20(水) 23:23:46.000264デフォルトの名無しさん
2011/04/21(木) 19:20:29.88そうか?
どうせ比較評価するために学術系公開データを使わざるを得ないから、
特に論文書くためのデータで困ったことはない。
0265デフォルトの名無しさん
2011/04/21(木) 22:05:34.20企業の中の人だが、実際のデータだと迫力が違ってくると思うよ。もっとも、扱いが制限されるので
結果が外に出ることはないのだけど、どうしても見たいとかならインターンシップとかで中に入ればOK。
0266デフォルトの名無しさん
2011/04/21(木) 23:43:52.330267デフォルトの名無しさん
2011/04/21(木) 23:45:42.930268デフォルトの名無しさん
2011/04/21(木) 23:47:09.78入門向けとしてはどう?
0269デフォルトの名無しさん
2011/04/22(金) 04:26:07.85まあ、それはググルだから聞いてもらえるわけだがなw
0270デフォルトの名無しさん
2011/04/24(日) 21:21:50.60http://f.blogos.livedoor.com/opinion/article/5513200/
0271デフォルトの名無しさん
2011/04/25(月) 02:27:15.480272デフォルトの名無しさん
2011/04/26(火) 13:27:29.850273デフォルトの名無しさん
2011/04/26(火) 17:52:28.64マイニング対象、入手可能データ、マイナーの技量、顧客の能力とやる気、そして運による。
0274デフォルトの名無しさん
2011/04/26(火) 21:29:12.320275デフォルトの名無しさん
2011/04/30(土) 17:01:08.53プログラム例がC言語で書かれてるらしいからちょっと興味ある。
0276デフォルトの名無しさん
2011/04/30(土) 19:51:37.780277デフォルトの名無しさん
2011/04/30(土) 23:22:36.99こんなのポイよポイ
0278デフォルトの名無しさん
2011/05/02(月) 11:22:22.60実務家用向けの本というより手法指向の本で
書いてる人もこの分野に長けた人じゃないんで
アルゴリズムの勉強書籍として使ったらいいね。
だったら、確かにCの必要性はないんだけど、
Pythonを知っている人が多いかと言うと、
むずかしいね〜
0279デフォルトの名無しさん
2011/05/04(水) 02:28:37.07どうでしょう?
結構ビンゴな内容だと思うんだけど
0280デフォルトの名無しさん
2011/05/04(水) 06:29:55.07一通り知っていた方が良いけど、機械学習とは直接関係ない。
どうしてビンゴな内容だと思ったのか、わけがわからないよ。
0281デフォルトの名無しさん
2011/05/04(水) 06:43:26.380282デフォルトの名無しさん
2011/05/04(水) 12:35:22.61機械学習から得られた複数の結果から
(その中で)何かを最適化するという時には考えられるけど。
280が行っているように直接関係はない。
もともと最適化できるんなら、機械学習いらないし。
0283デフォルトの名無しさん
2011/05/04(水) 14:56:02.13MLなアルゴリズムには凸最適化を始めとする最適化問題に帰着できるものが多いのは事実だぞ。
0284デフォルトの名無しさん
2011/05/04(水) 15:50:43.080285デフォルトの名無しさん
2011/05/04(水) 16:00:35.030286デフォルトの名無しさん
2011/05/04(水) 16:05:10.410287デフォルトの名無しさん
2011/05/04(水) 21:35:25.93とりあえず一度立ち読みしてから判断しようと思います。
0288デフォルトの名無しさん
2011/05/04(水) 22:10:12.630289デフォルトの名無しさん
2011/05/04(水) 22:45:12.40そだね
応用で考えると、なんでも絡んでくるから。
本質を見失っちゃ意味ないし。
0290「コンピューター監視法案」が閣議決定
2011/05/06(金) 02:55:07.75http://internet.watch.impress.co.jp/docs/news/20110422_441708.html この内容に関連してです。
『データマイニング、マインドコントロールと電波首輪理論の関連性』(下記URL)
http://infowave.at.webry.info/200711/article_1.html
(以下引用)
『通例の携帯電話でも電源を入れている状態では定時的に基地局と通信を続けていることは明らかです。
この定時通信によって携帯電話所持者や基地局(携帯電話会社)は個人位置情報(非固定位置情報)を
把握する事になります。もちろん、データマイニングを使って個人位置情報のような非固定位置情報から
個人の住所などの固定位置情報を入手する事も可能です。さらに、データマイニングから得られた膨大な
データに基づくアルゴリズムがなかったとしても、非固定位置情報のうちの一つである「定期的に長時間
電波を発信している場所」がわかれば、調査員を使って個人の住所・勤め先などを特定する事は簡単なのです。』
(以上引用)
(ライフ)ログの60日保存によって個人の住所・勤め先等の固定位置情報を特定することは比較的容易です。
スマートフォン(PC)に地域情報などを入手するように設定している場合はなおさらのことです。「監視されるのは嫌
だが監視しないと気がすまない人」たちが個人情報保護に関するガイドライン26条を回避しながら入手しようとする魂胆
(こんたん)なのです。
参考: 『ユビキタス・クラウドコンピューティング時代の情報セキュリティと電波首輪理論』(下記URL)
http://infowave.at.webry.info/201001/article_1.html
0291デフォルトの名無しさん
2011/05/06(金) 04:30:43.44RFタグが流行ってたときからある話題だから今さらって感じ
0292デフォルトの名無しさん
2011/05/07(土) 02:25:41.573クラス以上になったらどうなるの?
g(x)=g1(x)-g2(x)=WX>0 || WX<0の判定が出来なくないですか?
多分とんちんかんなことを言ってると思いますが(^_^;)
0293デフォルトの名無しさん
2011/05/07(土) 09:41:32.12出力のセルを3つ(log_2 3以上の整数)にすればいいだけじゃね?
0294デフォルトの名無しさん
2011/05/07(土) 18:13:30.94まだ修行不足でした。
もうちょっと考えて見ます
0295デフォルトの名無しさん
2011/05/07(土) 20:30:14.990296デフォルトの名無しさん
2011/05/10(火) 02:00:19.960297デフォルトの名無しさん
2011/05/10(火) 14:48:28.400298デフォルトの名無しさん
2011/05/10(火) 19:32:43.280299デフォルトの名無しさん
2011/05/10(火) 19:41:18.060300デフォルトの名無しさん
2011/05/10(火) 21:42:29.35ありがとうございます。
データマイニングに興味があるのでデータマイニングの基礎買おうと思います
0301とうとうばれた「美しくない国」日本・・・安倍元首相の嘘
2011/05/15(日) 11:44:58.59下記URLを参照おねがいします。http://infowave.at.webry.info/200609/article_1.html
量子暗号化技術が実用化されることによって、通信回路に介在して行う技術的な盗聴行為
は理論上不可能であると想定できます。通信回路上の盗聴可能性が皆無であるということは
位置情報を含めた通信情報を盗聴できないということです。一般的に、通信者に探知されず
に盗聴をすることは10年(2006年段階)のうちに不可能になるということが予測されて
いました。今後は「人的漏洩」の危険性が注目されていきます。実際に、警視庁でもテロ情報が
「人的漏洩」されています。下記『テロ情報流出経緯に関する考察』の参照おねがいします。
http://infowave.at.webry.info/201011/article_1.html 漏洩されたと考えられる情報の現状と
調査経緯に関してはコメント欄に記載されています。
0302「コンピューター監視法案」内閣決議は菅内閣統合失調症の表れ
2011/05/15(日) 11:46:28.19のがわかってきていたにもかかわらず、小泉元首相とともに「個人情報保護法案」
を可決し、小泉路線と言われた安倍元首相が日本を「美しい国」を主張しながら
「インテリジェンスという横文字を使った諜報能力の向上」を狙った時点で一般
庶民の私にもわかりました。つまり、安部元首相が「美しい国」発言をした時点で、
「人的漏洩」と「監視社会」がどんどん問題化する「美しくない国」になることを
証明することになっていたのです。今後も「人的情報漏洩」と「監視社会」、成文化
した情報保護を無視した「違法・越権調査」、「情報漏洩現象」の再現性がどんどん出
てきます。そのような「人的情報漏えい」を一種の『世間』と考えるならはじめから
「国民の情報を守ったふりの八百長」である個人情報保護法(場合によっては通信の秘密の法律も)
成文化しなければよかったののです。「成文化」するから調査がやりにくくなるのです。
いままで個人情報保護法違反で摘発された会社は「八百長法律」と自分の秘密情報も守らない、
冤罪も行いそうな「いかさま(警察??)調査隊の犠牲」になったといえます。 内閣府のHP
『個人情報保護法に関する疑問と回答』』(下記URL)
http://www.caa.go.jp/seikatsu/kojin/gimon-kaitou.html#1_2
などは完全に内閣府からの国民に対するガセ回答になってしまっていることになります。
また、国会で2回も否決された「コンピューター監視法案」の菅内閣における内閣決議は
内閣が過去の国会における重大事項との整合性を認めずに一方的に「監視法案」決めて
しまう「内閣統合失調症」の表れであると考えられます。
0303デフォルトの名無しさん
2011/05/15(日) 19:51:14.640304デフォルトの名無しさん
2011/05/21(土) 16:55:14.87特定の単語が含まれるドキュメント数/全ドキュメント数で確立求めるより
特定の単語数/全単語数のほうが感覚的にも正確にも出るんじゃなかろうか?
0305デフォルトの名無しさん
2011/06/06(月) 01:34:48.23多分日本語でおkって言われそうなんですがググッても出なかったのでお願いします。
0306デフォルトの名無しさん
2011/06/06(月) 09:56:14.94http://diary.overlasting.net/2011-06-01-1.html
機械学習 はじめよう
http://gihyo.jp/dev/serial/01/machine-learning
機械学習の勉強を始めるには
http://blog.broomie.net/index.cgi?id=41
0307デフォルトの名無しさん
2011/06/06(月) 11:17:30.72http://diary.overlasting.net/2011-06-01-1.html
よりもechizen_tmさん本人の解説を直接読む方が良いと思います。
機械学習超入門 〜そろそろナイーブベイズについてひとこと言っておくか〜
http://d.hatena.ne.jp/echizen_tm/20110114/1295030258
これからはじめる人のための機械学習の教科書まとめ
http://d.hatena.ne.jp/echizen_tm/20110209/1297272686
0308デフォルトの名無しさん
2011/06/06(月) 22:16:24.22非常にありがたいです。願わくば、現場で行われているテキストマイニングによる
大量データの活用での場面のような、実践的な話題を紹介してくれるとうれしいです。
自分が読んだ範囲では那須川 哲哉 氏による「テキストマイニングを使う技術/作る技術」
が実践で培われたノウハウに富んでいて役立ちました。
0309デフォルトの名無しさん
2011/06/10(金) 21:46:39.090310デフォルトの名無しさん
2011/06/11(土) 23:39:07.950311デフォルトの名無しさん
2011/06/12(日) 08:56:19.860312デフォルトの名無しさん
2011/06/12(日) 09:11:07.720313デフォルトの名無しさん
2011/06/12(日) 10:28:10.020314デフォルトの名無しさん
2011/06/12(日) 10:39:19.690315デフォルトの名無しさん
2011/06/13(月) 11:33:59.340316312
2011/06/13(月) 18:17:39.500317デフォルトの名無しさん
2011/06/14(火) 04:40:20.970318デフォルトの名無しさん
2011/06/14(火) 17:00:03.380319デフォルトの名無しさん
2011/06/14(火) 17:24:27.960320デフォルトの名無しさん
2011/06/16(木) 18:17:14.470321デフォルトの名無しさん
2011/06/20(月) 00:03:44.470322デフォルトの名無しさん
2011/06/22(水) 17:22:24.470323デフォルトの名無しさん
2011/06/22(水) 17:22:57.880324デフォルトの名無しさん
2011/06/22(水) 18:27:29.25人間の予想は最低の回帰分析にすら劣る、みたいな感じ
0325デフォルトの名無しさん
2011/06/22(水) 18:52:27.460326デフォルトの名無しさん
2011/06/22(水) 23:04:19.09状態遷移もつし、この分野はhaskellやocamlで書けんよね?
0327デフォルトの名無しさん
2011/06/22(水) 23:14:39.230328デフォルトの名無しさん
2011/06/22(水) 23:55:27.68意見が分かれてくれたら面白そうなんだがなー
0329デフォルトの名無しさん
2011/06/23(木) 00:25:53.87Incanter: Statistical Computing and Graphics Environment for Clojure
http://incanter.org/
ScalaLab: Matlab-like scientific computing in Scala
http://code.google.com/p/scalalab/
0330デフォルトの名無しさん
2011/06/23(木) 00:49:40.00速度は出るのかな?
この分野、cpuやメモリがまだまだ非力だと実感する場面が多いし。
0331デフォルトの名無しさん
2011/06/23(木) 00:54:47.730332デフォルトの名無しさん
2011/06/23(木) 01:01:44.29http://swik.net/scalalab
>The scripting code is extremely fast, close to Java,
>and about 20-40 times faster from equivalent Matlab .m scripts!
ScalaLab(ScalaSci) は、Javaと同等でMatlab mスクリプトより 20〜40倍速いそうです。
これはScalaがJavaと同等の速さだから当たり前ですね。
Incanterは動的型付言語のClojureで書かれているので
Rには勝てても静的型付言語には太刀打ちできないでしょう。
0333デフォルトの名無しさん
2011/06/23(木) 01:58:33.82数理計算得意だし分かりやすい
0334デフォルトの名無しさん
2011/06/23(木) 02:28:49.47ポインタ周りのバグ取りに疲れたので、
型推論してくれるocamlを試してみたいといった銀の弾丸を探しをしたい気分
pythonなんて、統計処理専門のRともoctaveともつかない
半端モノのグルー言語で、しかも遅いだろうから使ってみようという意欲がわかない
0335デフォルトの名無しさん
2011/06/23(木) 12:29:46.780336デフォルトの名無しさん
2011/06/23(木) 12:37:55.970337デフォルトの名無しさん
2011/06/23(木) 21:38:51.28matplotlibやnumpyだったり、あれこれライブラリ入れないとダメで面倒だし
特別に速いわけでもなく行列演算に特化したリテラルがあるわけでもないし、
この領域がpythonの得意な分野だなんて、釣りにしか聞こえない
0338デフォルトの名無しさん
2011/06/23(木) 21:42:03.610339デフォルトの名無しさん
2011/06/23(木) 21:45:28.60javaなら、まだwekaだとかcoltだとか、
数値計算周りのライブラリが充実してた気がするけど
0340デフォルトの名無しさん
2011/06/23(木) 22:28:07.540341デフォルトの名無しさん
2011/06/23(木) 22:29:23.340342デフォルトの名無しさん
2011/06/23(木) 23:33:20.80.Netに、機械学習もあるよ
0343デフォルトの名無しさん
2011/06/24(金) 01:51:27.780344デフォルトの名無しさん
2011/06/24(金) 03:33:28.60外国人研究者のPython好きは異常(俺の周りだけか?)
0345デフォルトの名無しさん
2011/06/24(金) 09:20:25.85windows なら pythonxyとかあるのにね
0346デフォルトの名無しさん
2011/06/24(金) 09:28:05.640347デフォルトの名無しさん
2011/06/24(金) 21:22:58.54http://msdn.microsoft.com/ja-jp/sqlserver/cc511476
0348デフォルトの名無しさん
2011/06/24(金) 22:12:43.150349デフォルトの名無しさん
2011/06/24(金) 22:19:46.93理由はドキュメントが貧弱だし、技術サポート情報も手に入れづらく障害切り分けに難儀する。
基幹系に乗せるのにも苦労する。実験室ならいいかもしれんが。
0350デフォルトの名無しさん
2011/06/24(金) 22:31:35.21昔、PM8:00にメール投げても、AM2:00に回答メールが返ってきたぞ。
0351デフォルトの名無しさん
2011/06/24(金) 22:39:32.32MS以上に技術ドキュメント公開してるところなんてないだろ。
0352デフォルトの名無しさん
2011/06/24(金) 23:05:37.61F#流の文化が浸透するのを待っている。
0353デフォルトの名無しさん
2011/06/24(金) 23:24:17.06質問したら犬板みたいにソース嫁って言われるのやだし。
0354デフォルトの名無しさん
2011/06/24(金) 23:38:07.190355デフォルトの名無しさん
2011/06/24(金) 23:52:53.47MSDNに書かれてないことや、書かれてる仕様外の動きをしたときに質問するんだよ。
0356デフォルトの名無しさん
2011/06/25(土) 09:09:21.13に突き当たって後にも先にも進めなくなる。 MSDN を利用すれば解決するのかな?
自分の経験の範囲でいえば Oracle の技術情報が一番マシだったと思う。興味があれば読んで
見て欲しい。
たとえば、機能仕様はリファレンスマニュアルとして無償で参照できるし、
開発者向けのライセンス制度を使えば製品と同じソフトウェアやマニュアルをダウンロードして、
実機で評価したりアプリケーション開発することもできる。
無償でこれだけできるのは個人ととしては助かる。
有償のサポート契約を前提になるが、技術ノウハウ、未解決のバグ情報、修正ソフト、バージョン
アップ版が参照できる。 インシデントは何件でもサポート契約内に含まれるのは開発者は助かる。
しかしOracleは高いのが難点。保守料金はライセンス料の一定額 (たとえば22%) が毎年かかる。
全てのパッチもバージョンアップもサポート依頼も有償でないと入手できない。 研修もかなり高額。
それでも金さえ払っていればメインストリームから落ちても最低限のサポート (=回避策) が
得られるのは企業としては助かる。
余談だが、Oracle製品については日本語の対応にばらつきがあるので十分に検証した方がいい。
主力のデータベース製品や、買収した会社に由来する製品はいいが、Oracle由来のソフトは
日本語の下ではタコなものもあるし、突然ターミネートしたりとリスキ−。
ドキュメントを日本語訳してくれることは評価するが、翻訳の品質のばらつきは大きい。
0357デフォルトの名無しさん
2011/06/25(土) 09:34:45.170358デフォルトの名無しさん
2011/06/26(日) 11:14:20.910359デフォルトの名無しさん
2011/06/26(日) 11:27:46.402chのログでなんかやる
0360デフォルトの名無しさん
2011/06/26(日) 15:54:38.840361デフォルトの名無しさん
2011/06/26(日) 15:56:50.730362デフォルトの名無しさん
2011/06/26(日) 16:02:04.190363デフォルトの名無しさん
2011/06/26(日) 23:03:03.89機械学習は結論よりも方法論の方が重要だから、結論が分かってることから始めるべき
0364デフォルトの名無しさん
2011/06/26(日) 23:49:42.90非線形SVMを10倍速くする
0365デフォルトの名無しさん
2011/06/27(月) 01:32:07.070366デフォルトの名無しさん
2011/06/27(月) 02:20:52.380367デフォルトの名無しさん
2011/06/27(月) 23:35:43.41サポートベクターマシンは計算に時間がかかるとの話ですが、
確かに最初に訓練データを使って分類モデルを構築する際は、
計算時間がかかると思うのですが、
一度構築した分類モデルを使ってなにかを認識する際はそこまで
時間がかからない気がするのですが、、、
この認識って間違ってますか?
0368デフォルトの名無しさん
2011/06/27(月) 23:49:09.290369デフォルトの名無しさん
2011/06/28(火) 12:12:50.63特徴量選択(SFS, SBS, SFFS)というのと主成分分析は、
どちらも特徴量を減らすことを目的にしているのですが、
2つの違い(メリット、デメリット)を
教えていただけないでしょうか?
0370デフォルトの名無しさん
2011/06/29(水) 16:30:13.170371デフォルトの名無しさん
2011/06/30(木) 06:44:53.77>パターン認識の話になると思うのですが、
>特徴量選択でSFS、SBS、SFFSについてご存知の方いらっしゃらないでしょうか?
>これらのアルゴリズムについて簡単に説明してほしいのですが、、、
公知のアルゴリズムの説明は、検索した方が早いです。
「SFS、SBS、SFFS」でググるとこんなページが見つかりました。
『多クラスサポートベクターマシンにおける各SVMモジュールの独立特徴選択』
http://asnugroho.net/papers/nctrdec2005.pdf
「3.特徴選択」でSFSとSBSのアルゴリズムを簡単に説明、
SFFSとSFBSより計算量が少ないSBSを選択
『時間構造分割特徴量に基づく感情発声の自動分類』
http://www.slp.k.hosei.ac.jp/~itou/doc/2010/09t0012_2.pdf
「3 多クラスSVMによる分類器の構築」でSFFSのアルゴリズムを簡単に説明、
SFSとSBSより性能が優れているSFFSを選択
Feature Selection using Matlab
http://www.mathworks.de/matlabcentral/fileexchange/22970-feature-selection-using-matlab
>Code covered by the BSD License
>The DEMO includes 5 feature selection algorithms:
> Sequential Forward Selection (SFS)
> Sequential Floating Forward Selection (SFFS)
> Sequential Backward Selection (SBS)
> Sequential Floating Backward Selection (SFBS)
> ReliefF
ForwSel_main.mがSFSとSFFSのコード、
BackSel_main.mがSBSとSFBSのコードです。
0372デフォルトの名無しさん
2011/06/30(木) 22:49:58.74テキストマイニングハンドブック
著者: ローネンフェルドマン,ジェイムズサンガー
ttp://books.google.co.jp/books?id=niuu3xMClMYC&dq=%E3%83%86%E3%82%AD%E3%82%B9%E3%83%88%E3%83%9E%E3%82%A4%E3%83%8B%E3%83%B3%E3%82%B0+%E3%83%97%E3%83%AC%E3%82%BC%E3%83%B3&source=gbs_navlinks_s
0373デフォルトの名無しさん
2011/07/02(土) 01:23:28.59Wekaのニューラルネットワークって、複数の入力に対して複数のアウトプットを
設定することってできないんですか。
0375デフォルトの名無しさん
2011/07/02(土) 13:40:50.300376デフォルトの名無しさん
2011/07/02(土) 13:43:43.700378デフォルトの名無しさん
2011/07/11(月) 12:42:13.24データセットいちいち手入力じゃ死んじゃうしかといって仮想データで予測しても仕方なくて困ってるんだよね、、
0379デフォルトの名無しさん
2011/07/12(火) 10:42:05.140380デフォルトの名無しさん
2011/07/12(火) 12:11:45.200381デフォルトの名無しさん
2011/07/12(火) 12:52:23.65午後ティー買ってこい
0382デフォルトの名無しさん
2011/07/12(火) 12:57:27.00Webからデータを集める方法を知りたいのなら、
「スクレイピング」でググってください。
0383デフォルトの名無しさん
2011/07/13(水) 04:02:29.330384デフォルトの名無しさん
2011/07/13(水) 06:12:07.340385デフォルトの名無しさん
2011/07/13(水) 07:02:30.35こんな単純で定型的で基本的なプログラムは1日もかからないだろうに。
0386デフォルトの名無しさん
2011/07/14(木) 20:40:17.51実装はpythonとポスグレで1時間かからんだろ。
あとはどれだけ偏りなくクローリングさせるかが勝負。
0387デフォルトの名無しさん
2011/07/17(日) 03:44:39.45みんな真似しないでね
0388デフォルトの名無しさん
2011/07/17(日) 06:32:43.990389デフォルトの名無しさん
2011/07/21(木) 00:50:53.77複雑な交互作用を持つ現象をどう要素毎に分解して、更に説明変数に加工するか、
ということで途方に暮れています。
紀伊国屋みたいな大きな本屋へ行っても、機械学習絡みの本は原理を解説するか、
エンドユーザー向けにSPSSやRの操作を解説するような本ばかりで、実際に説明変数を
どう作るか、どう複雑な現象を解析するか、といった実践向けの本が見つかりません。
洋書でも良いので、良い本があればどなた様か教えていただけないでしょうか。
0390デフォルトの名無しさん
2011/07/21(木) 04:47:33.16Rで学ぶデータサイエンス
http://www.kyoritsu-pub.co.jp/series/arudemanabu.html
データ解析に関してはこのシリーズが詳しいです。
ところで「特にNNやSVM」というのが腑に落ちません。
機械学習を大別すると識別関数、識別モデル、生成モデルの3種類です。
説明変数への加工とはすなわち生成モデルの推定です。
NNやSVMなどの識別関数の学習結果を見ても説明変数はわかりません。
そこはナイーブベイズなどの生成モデルを用いるべきではないでしょうか。
上記シリーズなら「3.ベイズ統計データ解析」です。
0391デフォルトの名無しさん
2011/07/21(木) 09:20:28.10早速のご回答、感謝いたします。
特に分析手法までありがとうございます。
ご紹介いただいた本を調べてみますね。
丁寧な回答、重ねて感謝申し上げます。
0392デフォルトの名無しさん
2011/07/21(木) 11:02:48.43違いってどうなの?
0393デフォルトの名無しさん
2011/07/31(日) 20:51:05.17回帰分析なり判別分析なり
0394デフォルトの名無しさん
2011/08/01(月) 11:44:09.420395デフォルトの名無しさん
2011/08/02(火) 11:12:46.59目的や取得可能なサンプルデータ数、計算速度等いろいろな条件があるしな
適当な論文書くだけなら、一番新しそうな手法選んでちょっと変わったことやるだけで良いけども
0396デフォルトの名無しさん
2011/08/02(火) 21:19:54.39Thx!
ちゃんと勉強します
0397デフォルトの名無しさん
2011/08/02(火) 23:08:49.32データセットを整備することがある。
2ちゃんでも、AmazonやRakutenでの評判でもいいが
研究の素材として使えるだけの素性ををもっていればその
努力を買うよ。
0398デフォルトの名無しさん
2011/08/05(金) 20:18:07.130399デフォルトの名無しさん
2011/08/07(日) 07:50:24.280400デフォルトの名無しさん
2011/08/08(月) 02:44:27.28今はとりあえず勉強した手法をPythonでプログラミング化してみたりとしているのですがwekaなどのソフトがあり無駄なことをしている気がします。
学んだ手法を用いてサンプルデータを解析してみたり、ブログの分類などの応用事例に手を付けたほうが良いんでしょうか?
0401デフォルトの名無しさん
2011/08/09(火) 00:49:42.450402デフォルトの名無しさん
2011/08/09(火) 09:40:34.79初学者が引用もされないレベルの研究論文を見つけてそれを参考にしたら
とんでもない遠回りをすることになる。
0403デフォルトの名無しさん
2011/08/09(火) 18:13:56.97アルゴリズム自体の研究をしたいのか、応用の研究をしたいのか、でしょ。
アルゴリズム自体の研究するなら自分で実装して一杯データ喰わせて体感したほうがいいし、
応用の研究したいなら筋がいいライブラリ使ったらいいんじゃね?
いずれにせよ、色んなデータ喰わせた経験積んでナンボの世界だわな。
0404デフォルトの名無しさん
2011/08/09(火) 20:18:00.02難のために勉強してるのか文面を読んでも分からないよ。まず自分の活動する目的を
ハッキリさせた方がいいと思う。
先生のもとについてるなら基礎研究なのか応用なのか相談しては?
0405デフォルトの名無しさん
2011/08/09(火) 20:47:31.98早速論文を漁ってみたのですが協調フィルタリングを使った観光地推薦などとても興味深くて自分のやりたいことが分かったような気がします。
なかなか難解な論文が多くて大変で学生の卒論レベルのものがちょっと見てみたかったり。。。
>>403-404
やりたいことは応用事例なので何らかの手法を用いた応用事例を考えて実装できるように頑張ります。
それで手法の勉強が必要だったら手法の勉強をする。
自分の中で目的が明確になってなかったのが問題だったと思いました。
皆さんありがとうございました!
0406デフォルトの名無しさん
2011/08/09(火) 22:19:37.13場合によるけど、学会に出ると、卒論レベルの発表に遭遇することがあるよ。
ポスターの説明員などをつかまえて、研究手法などを聞き込んだりすると良いかも。
0407デフォルトの名無しさん
2011/08/10(水) 21:03:59.14> やりたいことは応用事例なので何らかの手法を用いた応用事例を考えて実装できるように頑張ります。
ありがちな間違いだけど、
使いたい技術のために応用事例を考えるんじゃなくて、
現状困難な問題を解決するためにその技術がどう役に立つかを考えるんだ。
そうすると先行研究がわかり、君の研究の貢献を位置付けることができる。
0408デフォルトの名無しさん
2011/08/11(木) 01:38:47.72君、彼に何がいいたのかよくわかんないよ。
彼は、問題の解決のために、手法を模索してるんでしょ?
0409デフォルトの名無しさん
2011/08/11(木) 05:40:04.48>>406「応用事例を考えて」
0410デフォルトの名無しさん
2011/08/11(木) 21:36:23.91自分は >>405 氏はまだ、問題がまだ見えていないと思う。
0411デフォルトの名無しさん
2011/08/12(金) 02:20:35.96やりたい目的の為に手段を勉強していることを忘れないようにしたいです。
後一度学会に出てこの分野の研究者の話を聴いてみたいなと思いました。
重ね重ねになりますが皆さんありがとうございました!
0412デフォルトの名無しさん
2011/08/12(金) 14:58:56.040413デフォルトの名無しさん
2011/08/12(金) 20:02:51.540414デフォルトの名無しさん
2011/08/12(金) 20:14:49.97そうみたいだったね。スマン
0415デフォルトの名無しさん
2011/08/13(土) 21:03:56.83良いアプローチ方法thx!
0416デフォルトの名無しさん
2011/08/14(日) 01:16:05.280417デフォルトの名無しさん
2011/08/15(月) 10:41:11.04全くをもってイミフなんだが。
まだまだ勉強が足りんか・・・
0418デフォルトの名無しさん
2011/08/16(火) 07:29:01.160419デフォルトの名無しさん
2011/08/18(木) 01:28:40.03報告は大変そうだけどw
0420「位置ゲー」による個人情報の流出に気をつけよう
2011/08/19(金) 03:25:56.84個人情報漏洩の流出について』(下記URL)の参照お願いします。
http://infowave.at.webry.info/201108/article_1.html
0421デフォルトの名無しさん
2011/08/19(金) 11:19:39.75R、python, matlab, mathmatica ← こいつらプログラミング言語としてはゴミレベルww
なんとかしろよ。
0422デフォルトの名無しさん
2011/08/19(金) 11:24:15.430423デフォルトの名無しさん
2011/08/19(金) 11:26:16.670424デフォルトの名無しさん
2011/08/19(金) 11:35:40.030425デフォルトの名無しさん
2011/08/19(金) 13:11:12.370426片山博文MZ
2011/08/19(金) 14:24:07.530427デフォルトの名無しさん
2011/08/19(金) 17:57:56.25なんかセンスがないな。言語やライブラリとしては素人くさい。使ってて恥ずかしくなるレベル。
0428デフォルトの名無しさん
2011/08/19(金) 18:02:59.620429デフォルトの名無しさん
2011/08/19(金) 18:03:13.420430デフォルトの名無しさん
2011/08/19(金) 18:21:32.450431デフォルトの名無しさん
2011/08/19(金) 18:23:38.02使ってて恥ずかしい言語ってJavaとかだな。
あんな糞遅い言語を数値計算で使うとかあり得ないよ。
0432デフォルトの名無しさん
2011/08/19(金) 18:27:03.930433デフォルトの名無しさん
2011/08/19(金) 18:27:11.490434デフォルトの名無しさん
2011/08/19(金) 18:33:47.41行列すら a = b +c って書けないんだろ?
0435デフォルトの名無しさん
2011/08/19(金) 20:15:24.220436デフォルトの名無しさん
2011/08/19(金) 20:19:17.750437デフォルトの名無しさん
2011/08/19(金) 20:59:36.71何と比べてどんな所がゴミと思ったのか具体的に書いてください。
実行速度?オブジェクト指向でないから?関数型でないから?
何が不満なのか書かないと他人には意味不明です。
>>431
数値計算の話だから、起動時間やGUIライブラリは関係ないですよね。
Javaはプログラミング言語を実行速度別に分類すると
トップグループに入るのですが、何と比べて糞遅いのですか?
0438デフォルトの名無しさん
2011/08/19(金) 21:33:33.110439デフォルトの名無しさん
2011/08/19(金) 22:19:58.62>トップグループに入るのですが、何と比べて糞遅いのですか?
ここ笑うところ?
0440デフォルトの名無しさん
2011/08/19(金) 22:20:42.830441デフォルトの名無しさん
2011/08/19(金) 22:34:01.050442デフォルトの名無しさん
2011/08/19(金) 22:43:56.020443デフォルトの名無しさん
2011/08/19(金) 23:02:30.79http://shootout.alioth.debian.org/u32/which-programming-languages-are-fastest.php
Javaより遅い言語はたくさんあります。
0444デフォルトの名無しさん
2011/08/19(金) 23:02:41.46スクリプト系は全部Javaより遅いんだが。
0445デフォルトの名無しさん
2011/08/19(金) 23:34:29.26新世代のコンピュータチップを開発したことを発表しました。
高度なアルゴリズムとシリコン回路を使用して、
人間のように経験から学習し、相関関係を発見し、
仮設を立て、成果を記憶する「認知コンピュータ」をIBMは構想しているとのこと。今回の発表では、すでにそのプロトタイプのチップ2つが作成され、現在テストを受けていることが明らかにされています。
0446デフォルトの名無しさん
2011/08/20(土) 01:58:40.550447デフォルトの名無しさん
2011/08/20(土) 05:54:46.96ギャグで言ってるんですか?
0448デフォルトの名無しさん
2011/08/20(土) 10:50:13.91レスがひとりよがりすぎて頭の悪い煽りにしか見えません。
どう間違っていると思うのか具体的に書いてください。
もしかしてJavaの起動時間より短い時間で実行できるような
数値計算しか考えていないのですか?
0449デフォルトの名無しさん
2011/08/20(土) 11:04:34.560450デフォルトの名無しさん
2011/08/20(土) 14:38:31.76R,Python,Matlab,Mathmatica, こいつ等が言語としてゴミレベルじゃないと思ってないやつなんていないだろ。
素人がドヤが押して発言してるのが目に浮かぶww ま、わらわせんなwwってとこだねww
0451デフォルトの名無しさん
2011/08/20(土) 15:46:05.11遅すぎてあらゆる分野で使い物にならず、
サーバーサイドでしか使われてない現実を未だに受け入れられないとかw
0452デフォルトの名無しさん
2011/08/20(土) 15:54:07.440453デフォルトの名無しさん
2011/08/20(土) 16:13:16.810454デフォルトの名無しさん
2011/08/20(土) 16:35:30.970455デフォルトの名無しさん
2011/08/20(土) 16:45:23.200456デフォルトの名無しさん
2011/08/20(土) 16:54:48.06一方、言語理論とかは一部の専門のやつ以外はまったくやらない
この非対称性がこういう問題を生じさせるのかもしれませんね。
0457デフォルトの名無しさん
2011/08/20(土) 16:55:49.93精々、大学生活最後の夏休みを満喫してなw
0458デフォルトの名無しさん
2011/08/20(土) 16:57:34.950459デフォルトの名無しさん
2011/08/20(土) 16:59:19.510460デフォルトの名無しさん
2011/08/20(土) 17:03:28.10は?ノンパラベイズの応用研究の結構な割合が自然言語系だろw
さっさとゼミの予習でもしてろ
0461デフォルトの名無しさん
2011/08/20(土) 17:06:13.25言語理論と自然言語処理は違いますwwww
まじでもぐりだわこいつらwww
0463デフォルトの名無しさん
2011/08/20(土) 17:12:35.43まじで学部レベルかよ…
0464デフォルトの名無しさん
2011/08/20(土) 17:14:51.410465デフォルトの名無しさん
2011/08/20(土) 17:16:51.27統計処理系言語のごみっぷりを非難されて、この発狂振りww
わらわせんなwww
0466デフォルトの名無しさん
2011/08/20(土) 17:24:27.88で、統計的統語論は勉強した?
まだだったら、いまのうちに統計の復習してなw
0467デフォルトの名無しさん
2011/08/20(土) 17:27:28.65あとは形式的な統語論さえわかってれば誰でも理解できるだろ。
こんなところにわざわざドヤ顔してだしてきてんじゃねーよw
そもそも、自分らが使ってる統計処理言語のくそっぷりにどんだけむじかくなんだwww
俺は使い始めてからイラ付いてイラ付いてしょうがないねwww
こんなごみをつくってるやつは、まず、ゲーテルの完全性定理くらい理解してからにしてほしいねwww
わらわせんなwwwww
0468デフォルトの名無しさん
2011/08/20(土) 17:34:01.55高校生か学部生か知らんが、時間を大切になw
0469デフォルトの名無しさん
2011/08/20(土) 17:37:15.49統計処理言語のゴミップリを指摘されて発狂して、統計的統語論なんていう恥ずかしい用語を持ち出して得意げになってる暇があれば
自分の勘違いをただしたほうがいいよwwww
まじでわらわれてるだけだからさwwww
0470デフォルトの名無しさん
2011/08/20(土) 17:40:47.670471デフォルトの名無しさん
2011/08/20(土) 18:40:06.060472デフォルトの名無しさん
2011/08/20(土) 19:27:24.760473デフォルトの名無しさん
2011/08/20(土) 19:34:18.22でも、代りにどんな言語が良いか質問しても答え返ってこないよね
まあ、煽るのだけが目的の最底辺の低能だから
答えなんて持ってないだろうけどね
0474デフォルトの名無しさん
2011/08/20(土) 19:38:30.850475デフォルトの名無しさん
2011/08/20(土) 19:46:03.32ま、javaやpythonの数値解析系のライブラリはだめだめだとおもうけどね。
0476デフォルトの名無しさん
2011/08/20(土) 19:47:27.64同じ奴が自演してんのか?
0477デフォルトの名無しさん
2011/08/20(土) 19:48:46.920478デフォルトの名無しさん
2011/08/20(土) 21:00:52.190479デフォルトの名無しさん
2011/08/21(日) 02:59:52.16ここにいるのは、大学教養を過ぎた連中が多いと思うんだが、
もう少し精神年齢の高い書き込みしようぜ。
中身のあることについてだけ話して、あとはスルーでいいよ。
0480デフォルトの名無しさん
2011/08/21(日) 03:04:04.28ここの住人は8ビット時代から機械語でバリバリコード書いてた奴ばかりだよ。
0481デフォルトの名無しさん
2011/08/21(日) 08:03:11.660482デフォルトの名無しさん
2011/08/21(日) 08:30:58.42と仮定すればExcelが良い
0483デフォルトの名無しさん
2011/08/21(日) 08:34:47.26やったことないのがバレバレ
0484デフォルトの名無しさん
2011/08/21(日) 08:44:24.900485デフォルトの名無しさん
2011/08/21(日) 08:56:58.35使うかどうかじゃなくて、典型的な言語として話題に挙げないよ普通は
0486デフォルトの名無しさん
2011/08/21(日) 13:25:50.74具体的にどんな学習アルゴリズムを実装したか言ってみろw
0487デフォルトの名無しさん
2011/08/21(日) 20:12:18.16数式をしらない幼児が学習できないとでも思ってるのか
ああそうか、君がそうだったんだね
これは失礼
0488デフォルトの名無しさん
2011/08/21(日) 20:14:24.990489デフォルトの名無しさん
2011/08/21(日) 20:16:33.780490デフォルトの名無しさん
2011/08/21(日) 21:08:18.220491デフォルトの名無しさん
2011/08/21(日) 23:27:13.32私は言語設計やライブラリ設計のどこがいけてないのか素直に気になります。
もちろん統計解析とかやってる人は言語のプロではないので、だめな部分はあると思う、
そこがどこかが気になる。
0492デフォルトの名無しさん
2011/08/21(日) 23:35:57.280493デフォルトの名無しさん
2011/08/21(日) 23:38:09.870494デフォルトの名無しさん
2011/08/21(日) 23:40:26.78ハードウェアの仕様で決めるけどな
0495デフォルトの名無しさん
2011/08/21(日) 23:44:39.41コンパイルを電力食いのパソでするより携帯でやってしまうほうがイィ!
っていう要望があってなwww
0496デフォルトの名無しさん
2011/08/21(日) 23:47:56.090497デフォルトの名無しさん
2011/08/22(月) 00:25:59.03まあスタックポインタずらすだけだし関係ないやw
0498デフォルトの名無しさん
2011/08/22(月) 00:26:31.920499デフォルトの名無しさん
2011/08/22(月) 00:33:03.680500デフォルトの名無しさん
2011/08/22(月) 01:07:25.930501デフォルトの名無しさん
2011/08/22(月) 01:15:46.80自転車に乗ろうと自動車に乗ろうが、乗る人間が変わるものじゃない
そんなことで得意になったり恥ずかしがる理由があるものかね?
言語に振り回される程度のレベルか・・・
0502デフォルトの名無しさん
2011/08/22(月) 01:19:07.45自分で新しい言語を作ればすむ話だろ
0503デフォルトの名無しさん
2011/08/22(月) 01:22:00.93機械学習も道具、統計処理も道具、何でもかんでも道具wwww
でもその道具の良し悪しで、結局のところいろんなことが決まってくるんだよwwww
0504デフォルトの名無しさん
2011/08/22(月) 01:22:23.66公開したところでオナニーにしかならないのでね・・・
0505デフォルトの名無しさん
2011/08/22(月) 01:23:30.37お前等みたいなニートとはちげーーーんだよwwww
まじでまともなのないの、使ってていらついてんだけどwwwwwww
0506デフォルトの名無しさん
2011/08/22(月) 01:23:46.57だから作れよ、道具を
0507デフォルトの名無しさん
2011/08/22(月) 01:28:02.43ここに書き込む時間を削れば多分作れると思うよ
0508デフォルトの名無しさん
2011/08/22(月) 01:37:51.020509デフォルトの名無しさん
2011/08/22(月) 01:39:59.730510デフォルトの名無しさん
2011/08/22(月) 01:43:08.05R,Python,Matlab,Mathematicaがゴミだと思う理由を書いてください。
あなたが判断基準を一切書かない以上、
誰もあなたの基準でまともな物を紹介できません。
0511デフォルトの名無しさん
2011/08/22(月) 01:45:48.330512デフォルトの名無しさん
2011/08/22(月) 01:46:54.32それより、誰かPL/SQLでRPN系の言語系のパーサーを作ってくれ。
FORTHでもいい。
Oracle上にあるテキストデータの解析やマイニングの手続きを記述する。
0513デフォルトの名無しさん
2011/08/22(月) 01:51:31.03ってかふりーんだよwwwwふりそのものがさwwwww
R使ってていらつかないのか???????????
Weka使ってていらつかないのか??????????
python,SciPy使ってていらつかないのか??????
Maxima使ってていらつかないのか?????????
どんだけ、どMなんだよwwwwwwwwwwwww
0514デフォルトの名無しさん
2011/08/22(月) 02:01:53.81返答ありがとうございます。やっと状況がつかめました。
つまりR,Python,Matlab,Mathematicaに固有の欠陥があるのではなく、
どのプログラミング言語もうまく使えなくていらついていただけなのですね。
0515デフォルトの名無しさん
2011/08/22(月) 02:03:18.670516デフォルトの名無しさん
2011/08/22(月) 02:09:20.57あふぉかwwwwwwwwwwwwwwwwwwwwwwwwwwwww
てめぇwwwwwwwwwwwwwwwwwwwwwwwwwwwwww
自分のどMっぷりを棚に上げてとんだ言い草だなwwwwwwwwwww
ワラワサセサンナwwwwwwwwwwwwwwwwwwwwwwwwwwww
0517デフォルトの名無しさん
2011/08/22(月) 02:17:46.47月曜の朝は近い
締め切りが・・・
0518デフォルトの名無しさん
2011/08/22(月) 02:26:37.95こいつは、行列の各要素に対しての操作が終わってる。まじ面倒。
というか、もうデータフレームというオブジェクトの設計がそもそもめちゃくちゃwwww
関数を適用すること以上のちょっと複雑なことを使用とするともう最悪wwwwwww
まじアセンブラレベルwwwwwww お前等いつの時代に生きてんだよwwわらわせんなwwってかんじww
0519デフォルトの名無しさん
2011/08/22(月) 03:23:56.080520デフォルトの名無しさん
2011/08/22(月) 03:39:34.87こんなときには人間の本性が表にでてくるんだろうな
自滅は時間の問題だが、餞別がわりにしばらく付き合ってやれよ。
0521デフォルトの名無しさん
2011/08/22(月) 04:10:32.54これくらいで追い詰められてると思うお前の精神状態の方が心配だよwww
0522デフォルトの名無しさん
2011/08/22(月) 06:04:13.780523デフォルトの名無しさん
2011/08/22(月) 06:45:42.560524デフォルトの名無しさん
2011/08/22(月) 11:13:30.53道具を満足に満足に使いこなせないことを道具のせいにしたり
これほど自分の無知と無能をドヤ顔して晒すヤツを、自分はuy以外には知らないな
0525デフォルトの名無しさん
2011/08/22(月) 11:22:03.330526デフォルトの名無しさん
2011/08/22(月) 11:31:05.590527デフォルトの名無しさん
2011/08/22(月) 21:33:28.48どうしょうもねーよwwwwwwwwwwwwwww
0528デフォルトの名無しさん
2011/08/22(月) 22:11:37.170529デフォルトの名無しさん
2011/08/22(月) 23:57:16.54つーか、ゴミクズはさっさとうせろよ。
0530デフォルトの名無しさん
2011/08/23(火) 00:53:17.24あながち外れてないな。
0531デフォルトの名無しさん
2011/08/23(火) 01:16:05.91例えばOSとか
http://hibari.2ch.net/test/read.cgi/prog/1185848195/l50
0532デフォルトの名無しさん
2011/08/23(火) 06:14:22.350533デフォルトの名無しさん
2011/08/23(火) 09:45:21.940534デフォルトの名無しさん
2011/08/23(火) 12:37:59.670535デフォルトの名無しさん
2011/08/23(火) 12:39:38.68生成モデルは料理人
0536デフォルトの名無しさん
2011/08/23(火) 13:11:42.820537デフォルトの名無しさん
2011/08/23(火) 23:11:14.70誤植指摘して調子こいてるのは2ch素人だけじゃなくて院生にもゴミのようにいますwww
0538デフォルトの名無しさん
2011/08/23(火) 23:21:19.30邪魔
0539デフォルトの名無しさん
2011/08/23(火) 23:22:39.060540デフォルトの名無しさん
2011/08/23(火) 23:24:21.460541デフォルトの名無しさん
2011/08/23(火) 23:24:54.900542デフォルトの名無しさん
2011/08/23(火) 23:35:40.70丁度>>537のように
0543デフォルトの名無しさん
2011/08/23(火) 23:36:35.22わらたwww
0544デフォルトの名無しさん
2011/08/23(火) 23:40:40.340545デフォルトの名無しさん
2011/08/23(火) 23:41:10.640546デフォルトの名無しさん
2011/08/23(火) 23:42:57.980547デフォルトの名無しさん
2011/08/23(火) 23:44:02.460548デフォルトの名無しさん
2011/08/23(火) 23:45:06.99俺はRについてかいてやっただろ、お前は何も書いてないw
ど素人だなw
0549デフォルトの名無しさん
2011/08/23(火) 23:47:39.120550デフォルトの名無しさん
2011/08/23(火) 23:51:55.36あ、そうか、普通に考えてそれはお前の臭いだろwwwおめーがくせーんだよww
自分が悪臭はなってるから臭うにきまってだっろ。
くせーーーーーーーーーーーーーーーーーーー
0551デフォルトの名無しさん
2011/08/23(火) 23:56:02.69もちろん、正常な精神を持ち合わせてたら、の話だが。
0552デフォルトの名無しさん
2011/08/23(火) 23:59:17.240553デフォルトの名無しさん
2011/08/24(水) 00:01:00.73それこそコンプの証拠wwwいったいお前をそこまで発狂させるのは何なんだよw
おれは、Rとかがゴミだなっていっただけだろwwww
0554デフォルトの名無しさん
2011/08/24(水) 00:02:22.930555デフォルトの名無しさん
2011/08/24(水) 00:05:07.44ネガティブな感情をぶちまけることしかできない、知的水準の低い可哀想なやつだな。
0556デフォルトの名無しさん
2011/08/24(水) 00:09:13.090557デフォルトの名無しさん
2011/08/24(水) 00:10:25.180558デフォルトの名無しさん
2011/08/24(水) 00:11:22.54にもかかわらず、院にコンプを持ってるって言う発言が出る時点で、
おまえ(図星で院生wwだった)は院が特別だと思ってんだよwwww
どんだけ低レベルなんだよwww
0559デフォルトの名無しさん
2011/08/24(水) 00:11:58.82きちんと自己分析ができている。精神病院生とは失礼だぞ!
0560デフォルトの名無しさん
2011/08/24(水) 00:17:11.750561デフォルトの名無しさん
2011/08/24(水) 00:18:08.52w=草っとか言ってる時点で同類だろwwwwwww
0562デフォルトの名無しさん
2011/08/24(水) 00:21:51.24唐突に誰でも行ける院生を叩いているから、
変な人じゃないかと思われてるんだろ
0563デフォルトの名無しさん
2011/08/24(水) 00:24:59.68誤植指摘して得意げになってる院生がリアルにも2chにもいたから指摘してあげただけです。
ゲーデルとゲーテルの違いくらいで得意げになるのは2chだけにしなさいよwwwww
0564デフォルトの名無しさん
2011/08/24(水) 00:25:18.730565デフォルトの名無しさん
2011/08/24(水) 00:29:25.250566デフォルトの名無しさん
2011/08/24(水) 00:31:13.11察してやれ。
0567デフォルトの名無しさん
2011/08/24(水) 00:32:02.820568デフォルトの名無しさん
2011/08/24(水) 00:33:11.25今はゲーデルの方が圧倒的だろうけど。完全な誤植とは言い切れない。
それとも誤植と言うことでゲーデルに統一されたのかもしれない。
0569デフォルトの名無しさん
2011/08/24(水) 00:34:32.160570デフォルトの名無しさん
2011/08/24(水) 00:36:23.99Rがゴミって言われて、大発狂してるのはおまえだろwwwwwwwwwww
ゲーテルは普通に誤植だろw
0571デフォルトの名無しさん
2011/08/24(水) 00:39:06.17自分が弱み(誤植した等)見せてるときに草生やして煽っても
相手は少しも悔しく無いんだぜw
0572デフォルトの名無しさん
2011/08/24(水) 00:41:32.18ワラワセンナwwww
おまえもっと気持ちを強く持って生きたほうがいいよ。この先さw
0573デフォルトの名無しさん
2011/08/24(水) 00:43:51.800574デフォルトの名無しさん
2011/08/24(水) 00:45:46.180575デフォルトの名無しさん
2011/08/24(水) 00:49:42.50多分・・・
0576デフォルトの名無しさん
2011/08/24(水) 00:51:34.330577デフォルトの名無しさん
2011/08/24(水) 00:52:51.280578デフォルトの名無しさん
2011/08/24(水) 00:53:48.22線形伝達関数を sigmoid(s) = 1.0 / (1.0 + e^-1.0*s)で計算を行ったところ
sの値が30程度になってしまい常に値が1.0となってしまいます。
e^-1.0*sの値が小さすぎることからだと思うのですが解決策分かりましたらお願いします。
0579デフォルトの名無しさん
2011/08/24(水) 00:56:54.47大学なんていまどきだれでもいけんだよwww
大学いってないっていうのがあおりになってると思ってる時点でOUTwww
そもそも大学も行ってないやつがこんなスレッドに書き込むかよ。本気で頭悪いなおまえ。
0580デフォルトの名無しさん
2011/08/24(水) 00:56:55.160581デフォルトの名無しさん
2011/08/24(水) 01:01:36.07ってことは、Fラン万年助教なの?
0582デフォルトの名無しさん
2011/08/24(水) 01:03:49.56ゲーテル閣下が、機知に富んだ回答をしてくださいます。
しばしお待ちを。
0583デフォルトの名無しさん
2011/08/24(水) 01:06:46.46>レベル間違えてるから、そもそも大学いってないよコイツは
>多分・・・
「コイツ」としかいってないのに、自分のことだと分かるということは・・・
白状乙(笑)
0584デフォルトの名無しさん
2011/08/24(水) 01:14:04.020585デフォルトの名無しさん
2011/08/24(水) 01:15:19.41俺は使う側だから、学習とか統計解析とか、だからRとかいじってんだろーが
お前Rなみにひでーな
0586デフォルトの名無しさん
2011/08/24(水) 01:18:38.90精度上げるしかないだろ
256ビット浮動小数点ライブラリ使えよ
0587デフォルトの名無しさん
2011/08/24(水) 01:20:09.580588デフォルトの名無しさん
2011/08/24(水) 01:21:14.450589デフォルトの名無しさん
2011/08/24(水) 01:22:20.280590デフォルトの名無しさん
2011/08/24(水) 01:24:45.46ほんとあたまわりーなwおまえwwwwwwwwww
しらないものにドヤ顔して答えるわけにはいかないだろ、ま、お前みたいな馬鹿は
どこいっても、物知り顔で知ったかぶってるからそんな発言がでるんだろうけどwww
そんな態度は2chだけにしとけwww
0591デフォルトの名無しさん
2011/08/24(水) 01:26:31.590592デフォルトの名無しさん
2011/08/24(水) 01:27:57.64>>お前みたいな馬鹿はどこいっても、物知り顔で知ったかぶってるからそんな発言がでるんだろうけどwww
>>そんな態度は2chだけにしとけwww
>>お前みたいな馬鹿はどこいっても、物知り顔で知ったかぶってるからそんな発言がでるんだろうけどwww
>>そんな態度は2chだけにしとけwww
>>お前みたいな馬鹿はどこいっても、物知り顔で知ったかぶってるからそんな発言がでるんだろうけどwww
>>そんな態度は2chだけにしとけwww
>>お前みたいな馬鹿はどこいっても、物知り顔で知ったかぶってるからそんな発言がでるんだろうけどwww
>>そんな態度は2chだけにしとけwww
>>お前みたいな馬鹿はどこいっても、物知り顔で知ったかぶってるからそんな発言がでるんだろうけどwww
>>そんな態度は2chだけにしとけwww
0593デフォルトの名無しさん
2011/08/24(水) 01:29:22.250594デフォルトの名無しさん
2011/08/24(水) 01:29:30.87述語論理の完全性定理くらい理解して言語設計しろとはいったけどwwww
ゲーテルってゲーデルのこと??その誤植にまだこだわってるのwwwww
詐称がばれてまた発狂かよwwwww
0595デフォルトの名無しさん
2011/08/24(水) 01:31:44.200596デフォルトの名無しさん
2011/08/24(水) 01:33:16.46精度を上げるしかないんですね
解答ありがとうございます。
0597デフォルトの名無しさん
2011/08/24(水) 01:34:57.83こんな状況で申し訳ない、次回から他スレで質問をお願いします
0598デフォルトの名無しさん
2011/08/24(水) 01:35:42.72簡単な数学ができてからにしようね
0599デフォルトの名無しさん
2011/08/24(水) 01:37:59.880600デフォルトの名無しさん
2011/08/24(水) 01:38:11.66どんだけお前のせかいせまいんだよwww
さらに、専門用語wwwwww
まじで意味わからんwwwwどこのことを指しているのかまったく不明wwww
ニューラルネットワークは専門用語でなくて完全性定理(<--ここかな?)が専門用語?????
まじお前院生病だわwwwwww
0601デフォルトの名無しさん
2011/08/24(水) 01:39:35.760602デフォルトの名無しさん
2011/08/24(水) 04:57:04.63荒れるのは望みませんが、これだけは言わせてください。
「鬼の兜とった」は「鬼の首とった」が正しいです。
0603デフォルトの名無しさん
2011/08/24(水) 05:54:45.990604デフォルトの名無しさん
2011/08/24(水) 10:47:46.38たとえ本人でなくとも草生えてるレスにはろくなものがないから
0605デフォルトの名無しさん
2011/08/25(木) 00:09:26.010606デフォルトの名無しさん
2011/08/25(木) 00:30:34.89これが止まったというのか
推定の手順を示せ
0607デフォルトの名無しさん
2011/08/25(木) 00:53:26.330608デフォルトの名無しさん
2011/08/25(木) 04:29:42.39中間層が180個もあるので一つの中間層の値が0.5として全ての重みを0.5としても180*0.5*0.5=45でこれをシグモイド関数で計算するとe^-1.0*45は限りなく0になるので値が1になってしまいます。
0609デフォルトの名無しさん
2011/08/25(木) 06:43:34.78教師データと合うように重みを変えていくわけだから
それができないってことは学習アルゴリズムがバグっているか
教師データが間違っているのでは。
>中間層の値が0.5として全ての重みを0.5として
0.5というのはどこから出てきたの?
0610デフォルトの名無しさん
2011/08/25(木) 09:49:45.92日付ごとのレス数を棒グラフにしたら止まったかどうかわかるんじゃないかな
0611デフォルトの名無しさん
2011/08/25(木) 14:54:55.21初期では重みをランダムで[0,1]の範囲で与えているので入力層:60、中間層:180とすると入力層で与える値が全て0.1だとして重みの平均は0.5なので一つの中間層の値はΣx•w = 0.1•0.5•60=3
sigmoid(3) = 0.99..となり
次の出力層の値はΣx•w = 0.99•0.5•180=90
sigmoid(90) = 1.0 になる始末です。
入力層、中間層の数を少なくすれば機能することは確認済みなのですがやはり数を多くすると上記の不具合が出てしまいます。
大人しくwekaでも使ったほうが良いですかね...
0612デフォルトの名無しさん
2011/08/25(木) 23:29:38.67ご迷惑おかけしました
0613デフォルトの名無しさん
2011/08/26(金) 12:46:56.47入力がなんだろうと重みを調節すれば出力値はどうにでもなる。
中間層の数が増えれば、各ユニットの重みが減るというだけで、
それができないというのは学習の処理がバグっているのでは。
解決したならいいけど。
0614片山博文MZ
2011/08/26(金) 13:27:39.74日本語で分かるやつ頼む。
0615デフォルトの名無しさん
2011/08/26(金) 14:30:26.62http://d.hatena.ne.jp/kaiseh/20080609/1212980260
0616デフォルトの名無しさん
2011/08/26(金) 16:02:32.900617デフォルトの名無しさん
2011/08/26(金) 23:36:36.90これはみた?
ttp://newsmap.jp/
0618デフォルトの名無しさん
2011/08/27(土) 04:14:58.32今いちいち手入力でデータセット打ち込んでるわ・・・
0619デフォルトの名無しさん
2011/08/27(土) 06:35:53.930620デフォルトの名無しさん
2011/08/27(土) 11:46:10.680621デフォルトの名無しさん
2011/08/28(日) 02:11:16.740622デフォルトの名無しさん
2011/08/28(日) 06:54:08.13なぜならお前がゴミだから。
0623デフォルトの名無しさん
2011/08/28(日) 12:03:55.450624デフォルトの名無しさん
2011/08/28(日) 13:29:06.48SMAP が新しくなった?
0625デフォルトの名無しさん
2011/09/02(金) 08:52:25.06将来の成績やタイムや順位を予測するモデルを考えているのですが、
分からないことがありますので、ご存知でしたらどなたか教えて下さい。
まず、競馬にしろ野球にしろ過去成績データを説明変数として重回帰分析等の
モデルを作ろうとした場合、どの期間をデータとして使用するか、手掛かりが
掴めないのです。
0626625
2011/09/02(金) 08:57:46.26具体的に どの位の期間を取れば良いか分かりません。
また長期間の成績データを使うと、最近調子が上がった馬や選手等の
直近の成績は活かせないし、長期間の過去データが存在しない新人や
新馬はどう予測するのか途方に暮れています。
野球なら新人を分析データから外せば良いかも知れませんが、競馬なら
新馬もレースに参加するので無視できないし、新馬の扱いが分かりません
0627625
2011/09/02(金) 09:13:54.48野球の打率やら出塁率やらは、相手のレベルが違いますし、
競馬のタイムも走った場所や馬場の条件等が違います。
背景が違うものを比較するのに、多変量解析でファクター毎に
線形に分解して影響度を比較しようと考えています。
0628625
2011/09/02(金) 09:19:51.56毎に分解して、他の条件が同じならダートの方が芝より○秒早い、
と言った感じで分析したいな、と思います。
これは例えば競馬場ごとのタイム差が有意かどうか検定を行い、
2元配置分散分析等で交互作用を分析し、ダミー変数や交互作用項を
利用して、重回帰分析の偏回帰係数をファクター毎の影響度と見なして、
分析するのが良いでしょうか。恐れ入りますがお知恵をお貸し下さい。
0629625
2011/09/02(金) 09:26:24.63絡みの本が少ないですね。
Sabermetricsは「メジャーリーグの数理科学」他数冊しかなく、
「メジャーリーグの数理科学」は上巻が絶版で図書館には無いし、
競馬は「実践データマイニング―金融・競馬予測の科学」位しか
無いです。
英語が苦手でも、やはり洋書で高い専門書籍を買うしかないですかね。
0630デフォルトの名無しさん
2011/09/02(金) 09:47:23.99野球の新人ならドラフトにかかるまでの成長曲線
競馬の新馬なら血統から求めれば良いかと
その後の成長なんて指導者や調教師や怪我次第だから、
重回帰でも主成分分析でも、あくまで肉体的な統計を取るくらいしか出来ん
0631デフォルトの名無しさん
2011/09/02(金) 12:37:46.710632デフォルトの名無しさん
2011/09/02(金) 15:24:39.73データマイニングに向いてないよね
0633デフォルトの名無しさん
2011/09/02(金) 18:09:31.560634デフォルトの名無しさん
2011/09/02(金) 18:31:35.72この論文の楽曲推薦システムってなかなか面白そうだけど
楽曲の特徴の抽出に何を用いるかってなかなか難しいよね。
データマイニングを行う場合は対象についても勉強しないといけないし大変。
0635デフォルトの名無しさん
2011/09/02(金) 23:13:36.51本よりも論文探したほうがいいよ
0636デフォルトの名無しさん
2011/09/03(土) 16:38:14.15むしろ研究の本筋は特徴量の方だろうね。機械学習自体は定番のライブラリそのまま使うのがおおいと思う。
0637625
2011/09/03(土) 18:34:44.44>>630-631
>>635
アドバイス本当にありがとうございました!!色々と試してみます。
>>632-633
どうもごめんなさい。とても耳が痛いです…。
0638デフォルトの名無しさん
2011/09/03(土) 19:05:02.310639デフォルトの名無しさん
2011/09/03(土) 19:16:36.270640デフォルトの名無しさん
2011/09/05(月) 10:25:57.850641デフォルトの名無しさん
2011/09/05(月) 10:28:41.730642デフォルトの名無しさん
2011/09/05(月) 11:18:37.080643デフォルトの名無しさん
2011/09/05(月) 11:35:01.100644デフォルトの名無しさん
2011/09/05(月) 11:47:06.590645デフォルトの名無しさん
2011/09/05(月) 13:03:43.77あれは犯人に安心感を与える為の罠なんだよっ(キリッ
0646デフォルトの名無しさん
2011/09/05(月) 13:05:26.57多分最適化もできないと思うので
0647デフォルトの名無しさん
2011/09/05(月) 16:22:40.59メリットとデメリットをそれぞれ教えて下さい!
0648デフォルトの名無しさん
2011/09/05(月) 16:27:44.040649デフォルトの名無しさん
2011/09/05(月) 17:02:16.56多分木のほうが処理が速いとかいったメリットってないんですか?
0650デフォルトの名無しさん
2011/09/05(月) 17:33:59.140651デフォルトの名無しさん
2011/09/06(火) 04:42:17.97答えになってないな
>>649
2分木は林、多分木はジャングルと表現できる
0652デフォルトの名無しさん
2011/09/06(火) 04:43:41.34知らないならエラそう言わなきゃいいのにw
0653デフォルトの名無しさん
2011/09/06(火) 05:00:15.52後は映画の脚本で興行収入を予測したりとか
0654デフォルトの名無しさん
2011/09/06(火) 08:00:30.130655デフォルトの名無しさん
2011/09/06(火) 09:41:39.06その辺りは選球眼や、いやらしい球をカットする技術を持っているかの指標だね
でも、長打力や肩や足は、生まれ持った素質でしか無いから、メジャーのトップクラスになるには両方大事
0656デフォルトの名無しさん
2011/09/06(火) 09:59:21.24立てろという話なんだが。セイバーメトリクスでググれ。
0657デフォルトの名無しさん
2011/09/06(火) 10:22:35.17http://ci.nii.ac.jp/els/110001186623.pdf?id=ART0001520064&type=pdf&lang=jp&host=cinii&order_no=&ppv_type=0&lang_sw=&no=1315272044&cp=
0658デフォルトの名無しさん
2011/09/06(火) 11:52:03.24ところで良い統計的決定をするには>>655みたいな
ビリーフモデルがあった方がいいんじゃないのか?
人間に解釈しやすい(事前確率を作りやすい)という意味でも
0659デフォルトの名無しさん
2011/09/06(火) 16:32:49.10株価予測のやり方の方は実践してみた?
あの天井と底を決めるやり方が書いてないんだよね
0660デフォルトの名無しさん
2011/09/06(火) 17:48:52.090661デフォルトの名無しさん
2011/09/07(水) 09:31:35.310662デフォルトの名無しさん
2011/09/07(水) 21:15:59.46なるべく最短で見つけるためのNP困難で工夫してるんだろうけど
0663デフォルトの名無しさん
2011/09/10(土) 02:22:42.140664デフォルトの名無しさん
2011/09/12(月) 06:23:40.19最短であることは要求されていない。
なんとなく、思ったより早く絞れればいい。
0665デフォルトの名無しさん
2011/09/12(月) 16:18:36.850666デフォルトの名無しさん
2011/09/15(木) 09:35:43.82変数にはガウシアンネットワークなどを除くと、基本的にカテゴリーデータ
しか使えないようですね。
そのため、数量データを等間隔に分割してカテゴリ化したり、
順序尺度に変換して分析しようとしていますが、カテゴリーデータに置き換える
客観的な指標や方法論などはございますでしょうか。
各種論文にはカテゴリーデータに置き換えるテクニックの記載がなかったもので。
それとも案外アナログに決めているんですかね?
0667デフォルトの名無しさん
2011/09/15(木) 13:25:19.030668デフォルトの名無しさん
2011/09/15(木) 17:37:03.39クラスタを分割する条件が悪くて使い物にならないだろ
Wakeのx-meansも論文とは違う実装だし
0669デフォルトの名無しさん
2011/09/15(木) 22:22:27.980670デフォルトの名無しさん
2011/09/15(木) 22:47:31.660671デフォルトの名無しさん
2011/09/16(金) 00:09:41.28有難う御座います!!とても助かりました…。
0672デフォルトの名無しさん
2011/09/18(日) 16:12:52.800673デフォルトの名無しさん
2011/09/18(日) 16:37:14.200674デフォルトの名無しさん
2011/09/23(金) 22:20:46.96遺伝的プログラミングでコードを自己書き換えしてセキュリティに引っかからないようにするみたいな
0675デフォルトの名無しさん
2011/09/23(金) 23:17:38.865年前くらいから存在してないっけ?
どこかのカンファレンスで、そういったウィルスの対応方法を聞いたことがある。
0676デフォルトの名無しさん
2011/09/23(金) 23:28:52.850677デフォルトの名無しさん
2011/09/24(土) 01:05:55.36でもこれを研究するのも面白そうだね
ただ発表することは出来なさそうだけど
0678デフォルトの名無しさん
2011/09/24(土) 01:59:39.63まともな子孫作る程度の人口が確保できないよな。
そういうやり方じゃないのかな?
0679デフォルトの名無しさん
2011/09/24(土) 04:56:46.89ウィルスのデータベースにヒットしないようにしてるだけだろ
0680デフォルトの名無しさん
2011/09/24(土) 09:49:26.83たまーに他の生き物のウイルス達と混ざるわけだよな。
なんかいかにもGAの並列計算で考えつきそうなネタだな
0681デフォルトの名無しさん
2011/09/24(土) 10:44:36.40機能そのものも変化できたら面白いのに
0682デフォルトの名無しさん
2011/09/24(土) 11:50:12.750683デフォルトの名無しさん
2011/09/25(日) 13:07:44.180684デフォルトの名無しさん
2011/09/26(月) 00:13:29.350685デフォルトの名無しさん
2011/09/26(月) 01:16:17.85集合K [ 2, 4, 5 ]
集合1 [ 3, 4, 5 ]
集合2 [ 1, 2, 4, 3 ]
集合3 [ 2, 4, 5, 1 ]
集合1〜3のうち集合Kを全て含む集合を
高速に特定するにはどうしたらいいだろうか。
現実には集合は大量に存在するのでビットマスクは避ける方向で。
何かいい方法はない?
0686デフォルトの名無しさん
2011/09/26(月) 03:50:12.78今のところPhp(Vogooライブラリ)+SQLを利用しようと考えています
0687デフォルトの名無しさん
2011/09/26(月) 04:51:38.71転置しろ
0688デフォルトの名無しさん
2011/09/26(月) 09:44:17.56VIP待遇を受けて、韓国の粗悪なメカ工場視察イベントに招待された。
後、韓国はそのメーカーに対し、
「我々は貴様らに工場視察をさせてやったのだから、日本の工場を見せろ!」
と、言いがかりをつけてきて、日本の工場へずかずかと入り込んだ。
後、韓国の工場が日本の工場の技術を盗んで、そっくりな工場を作っていたことが発覚した。
日本の技術を賞賛し、工場を視察しに行くタイプの番組が増えているな。。。
0689デフォルトの名無しさん
2011/10/01(土) 23:18:13.97ずかずかと工場に入り込んだだけで技術を盗めるなんて韓国人ってすごいんですね
0690デフォルトの名無しさん
2011/10/02(日) 01:11:00.750691デフォルトの名無しさん
2011/10/02(日) 01:20:24.280692デフォルトの名無しさん
2011/10/02(日) 22:18:06.85だから韓国製品は日本製と品質が大して変わらない。ネトウヨはアホすぎる。
0693デフォルトの名無しさん
2011/10/02(日) 23:34:04.580694デフォルトの名無しさん
2011/10/03(月) 05:46:07.190695デフォルトの名無しさん
2011/10/04(火) 01:33:09.230696デフォルトの名無しさん
2011/10/04(火) 08:59:12.530697デフォルトの名無しさん
2011/10/04(火) 22:29:09.33サポートベクトル回帰ならある
0698デフォルトの名無しさん
2011/10/05(水) 17:04:01.240699デフォルトの名無しさん
2011/10/05(水) 17:29:28.93データを生み出すモデルが想定できる → パラメトリック
モデルが想定できない → ノンパラメトリック
0700デフォルトの名無しさん
2011/10/06(木) 01:12:16.130701デフォルトの名無しさん
2011/10/21(金) 23:13:04.190702デフォルトの名無しさん
2011/10/22(土) 17:56:40.450703デフォルトの名無しさん
2011/10/23(日) 02:31:01.43巷ではRがいいと聞きましたが、そっち系の本買った方がいいのでしょうか?
0704デフォルトの名無しさん
2011/10/23(日) 13:23:53.44俺はそれぞれ別に本を買う派
0705デフォルトの名無しさん
2011/10/24(月) 01:56:17.500706デフォルトの名無しさん
2011/10/24(月) 17:36:06.52S もいいよ
0707位置情報と検証令状(2)
2011/10/24(月) 18:37:47.36『位置情報に関わる個人情報保護法の問題と「検証令状」現状は?(第156回法務委員会第11号を参照して)』
http://infowave.at.webry.info/201110/article_1.htmlの参照おねがいします。
0708デフォルトの名無しさん
2011/10/25(火) 00:53:01.300709デフォルトの名無しさん
2011/10/25(火) 09:16:43.87パッケージ"e1071"でサポートベクターマシンを利用してマイニングしています。
-1から1の範囲で基準化した10の説明変数で判別と回帰を行いました。
説明変数の元データと-1から1で基準化したものを被説明変数として
学習し、学習データに回帰を行うと全くデタラメな数値が出力されます。
しかし、被説明変数を正の値と負の値の2値に変換したものを被説明変数と
して学習し、学習データに判別を行うと65%の精度で正しく判別できます。
なぜ回帰だとデタラメな数値が出力され、同じデータをバイナリ化したものに
判別をかけるとある程度正確な数値が出力されるのか、回帰と判別で結果が
全く異なることに首をかしげています。
こういう場合はどのような原因が考えられますでしょうか。
このスレッドは凄腕のデータマイナーがひしめいていると思いますので、
なにとぞお優しい方がいらっしゃいましたらご教示いただけないでしょうか。
0710デフォルトの名無しさん
2011/10/25(火) 09:48:44.43クロスバリデーションしてみろ
0711709
2011/10/25(火) 22:34:49.48有難うございます。"e1071"パッケージの「svm」の関数にて、
学習する際にクロスバリューデーションの回数を引数として
渡せるので、10回指定して学習させたのですが、うまく行きませんでした。
特に異常値と言えるほど大きな正・負値も無かったので、
外れ値の除去を行わなかったのですが、それがまずかったのでしょうか?
0712デフォルトの名無しさん
2011/10/26(水) 01:26:25.70学習データに対してうまくいっていないと言ってるし
オーバーフィッティングしてないと思うけど
>>709
回帰がニューラルネットワークで判別にSVMを使っているの?
全体的になに言っているか分かりにくいけど
データ数はどれくらいなの
ニューラルネットの中間層のユニット数とイテレーション数はどうなっているの
デタラメとはRMSEなどを計算してから言っているの
0713709
2011/10/27(木) 22:49:35.06返信が遅くなってもうわけございません。
WEKAを使用したらなぜか解決いたしました。
お騒がせして大変申し訳ございませんでした。
0714デフォルトの名無しさん
2011/10/28(金) 09:47:57.82データとやりたいことはあっててRの使い方が間違ってたんだろ
0716デフォルトの名無しさん
2011/11/08(火) 01:07:43.220717デフォルトの名無しさん
2011/11/08(火) 01:12:30.320718デフォルトの名無しさん
2011/11/08(火) 19:48:53.06今ならタダでダウンロードできます。
http://www.msi.co.jp/tmstudio/TMStudioForPatent2011/tmstudio2011.zip
是非みなさんに使ってもらいたい。
史上最強のデータマイニング専用ソフトですから。
一部使用制限はありますが、本当にタダでいいの?ってなくらい凄い機能です。
0719デフォルトの名無しさん
2011/11/08(火) 20:10:28.290720デフォルトの名無しさん
2011/11/08(火) 20:42:21.40http://www.msi.co.jp/tmstudio/movies/TMStudioMovie1.wmv
というデモがあるそうですね。
0721デフォルトの名無しさん
2011/11/09(水) 07:12:14.270722デフォルトの名無しさん
2011/11/09(水) 22:10:54.26遺伝的アルゴリズムで1〜5の範囲で並びの順番を表そうとしているのですが
染色体A:1 2 3 4 5
染色体B:5 4 3 2 1
を用意してこれを適当なところで一点交叉させると
染色体C:1 2 3 2 1となり順番の値が重複してしまい困っています。
質問の意図が分からないと思いますがエスパーの方いましたらお願いします。
0723デフォルトの名無しさん
2011/11/09(水) 22:59:28.34前者なら1-4の範囲の気がするから後者?
0724デフォルトの名無しさん
2011/11/09(水) 23:35:47.47TSPで皆がどうエンコードしてるか検索すれば解る
0725デフォルトの名無しさん
2011/11/10(木) 20:57:33.46構わずphenomeと1対1対応。基本。
0726デフォルトの名無しさん
2011/11/10(木) 23:22:43.78返信遅くなりましたが回答ありがとうございました。
特に>>724の方の巡回セールス問題に対する遺伝子の表現の仕方の工夫で上手くいくことが出来ました。
0727デフォルトの名無しさん
2011/11/22(火) 10:04:30.68短距離や長距離などの陸上競技の選手間のタイムなどを説明変数、
順位を目的変数とし、重回帰分析を行おうと考えております。
そのために、タイムなどを集めたサンプル全体で標準化したのですが、
当然陸上競技は相対的に順位が決まります。
弱い選手と当たればブッチギリで勝てる選手も、猛者と闘えば、
ビリッケツになるかもしれません。
そのため、サンプル全体の標準化に加え、更に各レースごとのタイムなどで
標準化を行ない、両者を足した説明変数を使用しております。
しかしながら、データを各レースで標準化しただけの基準値だと、
平均からどの位飛び抜けているかという情報は分かりますが、
どれ位の順位にあるかという順位の情報が入っておりません。
もし、ご存知でしたら、基準値に代わる、バラつきや平均のみならず、
順位の情報を含む距離を図る尺度をご教示いただいても宜しいでしょうか。
(ユークリッド距離のような抽象的な空間内で距離を測る指標など)
また、ブラッドリー・テリーモデルについてですが、相撲やチェスなどの
直接対戦が豊富にあるゲームにしか適用は難しいですよね?
お忙しいところ、申し訳ございませんでした。
0728デフォルトの名無しさん
2011/11/22(火) 10:59:21.99順位:相対値
この時点で相関出しにくいんだよね・・・
しかも短距離と長距離混ぜると、順位データとしては全くの別物になるし
理想はプロットにした時、短距離と長距離で集合が出来れば良いんだけども
0729デフォルトの名無しさん
2011/11/22(火) 18:20:42.130730デフォルトの名無しさん
2011/11/23(水) 07:01:15.24まずは既存のやり方をしらみつぶしに試せ。
0731デフォルトの名無しさん
2011/11/23(水) 10:27:16.100732デフォルトの名無しさん
2011/11/23(水) 17:54:05.69普通の質疑応答だったらもっと容易いだろうしどんなアルゴで動いてるんだろ
0733デフォルトの名無しさん
2011/11/23(水) 18:03:17.71#!/bin/sh
wget http://www.google.com/?q=$1
0734デフォルトの名無しさん
2011/11/23(水) 21:56:27.500735デフォルトの名無しさん
2011/11/24(木) 03:35:13.81因みに説明変数は、筋神経パワー,無酸素運動容量,VO2MAX, LT-Power
この中には短距離スピードと負の相関のものがある
プロファイル形状とレベルが重要になる。てかそれで説明出来る
0736デフォルトの名無しさん
2011/11/24(木) 13:20:36.89誰も使ったことないのか?
俺も使ったことないけどsing(x)みたいな-1,1の値じゃないの
0738デフォルトの名無しさん
2011/11/25(金) 12:44:31.56データによってもっと変わるかもだけど、-5から5くらいの実数値だった
予測ラベルと相関ありそうなんだけど、よくわからん
0739デフォルトの名無しさん
2011/11/25(金) 20:06:44.540740デフォルトの名無しさん
2011/11/25(金) 20:12:15.95たぶん決定関数の値だと思うから
符号とって正か負かでラベルに属するか属さないか2値分類するものじゃないかな
libsvmはラベルと確率を返す関数があるようなので
そっち使ったほうがいいのでは
0741デフォルトの名無しさん
2011/11/26(土) 00:16:04.15そういうことか!
ありがと!
0742デフォルトの名無しさん
2011/11/26(土) 10:22:55.710743デフォルトの名無しさん
2011/11/26(土) 10:52:30.150744デフォルトの名無しさん
2011/11/26(土) 11:06:13.600745デフォルトの名無しさん
2011/11/26(土) 11:10:46.867章の前半のGoogle Buzzは閉鎖されちゃって残念だけど、
実際には「入門 自然言語処理」で詳しく解説されている NLTK を、試しに使ってみよう、的な章になっているので、
ほとんど問題ないし、7章後半の Gmail に関する記事は内容に遜色は無いです。なので、「Google Buzz が閉鎖されたので本書はオワコン」は的な過剰な反応は無用だと思います。
0746デフォルトの名無しさん
2011/11/26(土) 13:27:08.500747デフォルトの名無しさん
2011/11/26(土) 15:20:30.10線形代数と解析学、統計学の基礎だろ
0748デフォルトの名無しさん
2011/11/26(土) 18:38:43.13あ、専卒さんでしたか?
0749デフォルトの名無しさん
2011/11/27(日) 09:28:35.06http://d.hatena.ne.jp/isseing333/20111123/1322053940
0750デフォルトの名無しさん
2011/11/27(日) 12:25:58.370751デフォルトの名無しさん
2011/11/28(月) 20:24:29.44またpythonか、、、
0752デフォルトの名無しさん
2011/11/28(月) 22:15:13.11自然言語処理の本もPythonだし
0753デフォルトの名無しさん
2011/12/03(土) 16:38:20.03ニューラルネットワークで強化学習と教師あり学習をMixしたようなモデルと作りたいと考えています。
各入力ノードの入力値に重みを付けて、中間層を介して、出力層より1か0を出力します。
通常の教師あり学習では、教師信号と出力の誤差を取り、誤差を最小にするように、
デルタ則を用いて最急降下法などで重みを決めると思います。
しかし、作りたいモデルでは教師信号が強化学習のように存在しませんが、
1を出力した場合に当たりなら報酬を貰い、外れたら-1の報酬ペナルティ、
0を出力した場合には報酬0となるようにし、学習データの報酬の総和が
最大になるように各入力ノードと中間層のノードの重みを決定したいのですが、
報酬の総和の関数を作り、数値微分で重みを決めようとしても、
恐らくやり方が悪く収束しません。
下手の考え休むに似たり、の諺の通り、アホの自分では上手く行きませんでした。
どなたか、そのようなニーズを満たすアルゴリズムやコード、ツールなどを
ご存知でしたらご教示願えませんでしょうか。
0754デフォルトの名無しさん
2011/12/04(日) 00:36:38.700755デフォルトの名無しさん
2011/12/08(木) 14:54:47.66データマイニングや機械学習って他にも色々な分野と関連してるじゃん
パターン認識と合わせたWEBマイニングや自然言語処理と合わせたテキストマイニングや人工知能はスレ違い?
0756デフォルトの名無しさん
2011/12/08(木) 20:20:22.600757デフォルトの名無しさん
2011/12/09(金) 03:38:35.79他人の過去の検索履歴も使ってるみたいだけど
自分のが出てくると恥ずかしいので
自分のだけは除外するようにするにはどうすればよいですか?
0758デフォルトの名無しさん
2011/12/09(金) 07:16:29.350759デフォルトの名無しさん
2011/12/09(金) 22:38:10.95恥ずかしいのぐらいがまんしたら?
それより、スレ違い
0760デフォルトの名無しさん
2011/12/10(土) 02:29:57.22Googleが出しているならアカウントをログアウトするしかないんじゃね
0761デフォルトの名無しさん
2011/12/10(土) 07:56:47.90でもそんなに簡単に個人のモノがGoogleに反映されるものかな?
ブラウザ自身 (含む検索用のプラグイン) が記憶して、それを候補として挙げてるってことはない?
ページ上に最初から自分の検索語が堂々と表示されているか、それとも検索語を入力するための
テキスト枠に候補としてプルダウンメニューから出るかで大きく違うと思う。
前者はみんなが見られるし、後者はログインした個人毎にカスタマイズした内容。みな推測だけど。
0762デフォルトの名無しさん
2011/12/12(月) 23:59:20.47ってことは他人の環境でも自分の使った単語がそのひとのところに出てるかもしれない訳ですよね
0763デフォルトの名無しさん
2011/12/13(火) 00:00:57.360764デフォルトの名無しさん
2011/12/13(火) 01:14:34.81おまえと同じ検索ワードをたくさんの人が入力していないと出ないし
たくさんの人が入力しているワードなら出てもいいだろ
0765デフォルトの名無しさん
2012/01/04(水) 02:02:19.73今アソシエーション分析を行っているのですが、
条件部となるアイテム集合をAprioriアルゴを用いて抽出したのは良いのですが
その後のルール抽出作業において結論部となるアイテム集合のパターンが膨大で計算に時間が掛かってしまいます。
結論部に関しては全ての単語の組み合わせを計算しているのですが
Aprioriアルゴリズムのように良い解決方法はないでしょうか?
0766デフォルトの名無しさん
2012/01/07(土) 11:19:46.240767やらせ商売としての『2ちゃんねる』の煽動者ありか?
2012/01/10(火) 17:59:30.92下記URL:『第七章・2chの秘密工作員たち』を参照しました。
http://resistance333.web.fc2.com/newpage7.htm
さて、そのような煽動集団がいるかどうか検証することは可能なのでしょうか・・・。
最近ではカカクドットコムという会社が『食べログ』における「やらせ行為」で問題に
なりました。下記『日本経済新聞』の『「食べログ」にやらせ投稿コカクコムが法的措置も』URL↓
http://www.nikkei.com/news/headline/article/g=96958A9C93819695E2E6E2E19F8DE2E6E2E3E0E2E3E09180EAE2E2E2
を参照しました。『2ちゃんねる』における「やらせ行為」がある可能性もありますね。検証方法はあるのでしょうか。
どう思いますか。
0768デフォルトの名無しさん
2012/01/10(火) 18:01:31.200769デフォルトの名無しさん
2012/01/10(火) 18:06:19.810770デフォルトの名無しさん
2012/01/13(金) 12:58:34.41あれは、Googleが作った検索ワードの辞書にそって、ユーザーが入力したワードに近い辞書ワードを
検索上位のワードのウェイトを付けて表示している。
この辞書の2次派生物がGoogle JapanがリリースしたIME
だたし、フロント側の表示メカニズムはAjaxによるサーバークライアント型のアプリケーションで組んでるので
ブラウザのjavascriptの機能をoffにすると働かなくなる。
もっとも、Googleはユーザーが入力した検索ワードは全て記録しているので、機能をoffってもサーバーサイドでは
記録は残される。
0771デフォルトの名無しさん
2012/01/13(金) 13:07:24.48前、Amazonで表示される「この商品を買った人はこんな商品もかっています」というのと同じメカニズムを組み込もうとして
ログ解析をしたことがあるが、やはり、順列組み合わせでユーザーごとのページ遷移を全て追跡すると計算量が膨大に
なって処理ができなくなって辞めた。
前、Yahoo Jのなんかの記事で、YJではこの処理を組むため専用のクラスターコンピューターを購入したとかあって、
順当に処理をこなすには専用の処理系が必要かな、と思った。
専用の処理系が調達できない場合は、ヒューリスティックなルーチンを組み込んで不必要な枝を削除する必要がある。
これはチェスの処理系とかでやってる。
0772デフォルトの名無しさん
2012/01/13(金) 18:30:49.390773デフォルトの名無しさん
2012/01/16(月) 13:47:25.00納得したら使う
納得出来なかったら研究する
0774デフォルトの名無しさん
2012/01/17(火) 07:59:53.86そのクラスタってのはHadoopなんじゃないかな
最近はHadoopで何でも力技でやる傾向にあるみたい
0775デフォルトの名無しさん
2012/01/19(木) 00:24:53.100776デフォルトの名無しさん
2012/01/21(土) 18:07:44.11配列(array)に入っているデータを比較するとします
array1 = [ 1,2,3 ]
array2 = [ 1,2,4 ]
array3 = [ 5,6,7 ]
この場合、array1とarray2の関係は、arrayとarray3よりも「近い」と判断したいです
機械学習的に解けるような問題なのでしょうか?そういうアルゴリズムがあれば教えて頂きたいです
0777デフォルトの名無しさん
2012/01/21(土) 22:15:33.010778デフォルトの名無しさん
2012/01/22(日) 00:31:50.85776じゃないが、そんなクソの役にも立たない意見ならレスすんなよ馬鹿か。
答えられないくせにレスするなら分からないのと同じだ。
0779デフォルトの名無しさん
2012/01/22(日) 01:36:47.12質問への反応は回答でなければならないなんて決まってるわけじゃない。
そもそも近いの定義すら明らかにしない質問じゃあね……
0780デフォルトの名無しさん
2012/01/22(日) 01:56:46.55バカはだまってろ
0781デフォルトの名無しさん
2012/01/22(日) 04:13:25.020782デフォルトの名無しさん
2012/01/22(日) 05:37:21.750783デフォルトの名無しさん
2012/01/22(日) 06:20:54.22分類する クラスタリング あたりで頑張ってください
0784デフォルトの名無しさん
2012/01/22(日) 07:01:57.340785デフォルトの名無しさん
2012/01/22(日) 12:12:18.310786デフォルトの名無しさん
2012/01/22(日) 12:20:22.74そこが機械学習の厄介な点であり面白い所でもある
0787デフォルトの名無しさん
2012/01/22(日) 12:39:22.720788デフォルトの名無しさん
2012/01/22(日) 13:55:53.230789デフォルトの名無しさん
2012/01/22(日) 14:07:12.000790デフォルトの名無しさん
2012/01/22(日) 16:05:25.53単にユークリッド距離でいいのでは
その配列をx,y,z座標として点の近さをはかる
0791デフォルトの名無しさん
2012/01/22(日) 16:15:34.570792デフォルトの名無しさん
2012/01/22(日) 17:13:02.10これが正解で他のレスは的外れだと思います。
機械学習とはデータから評価関数を逆算する処理であり、
距離定義が最初から決まっているなら機械学習は不要です。
>>790
質問者が示したデータは座標ではなく文字列で
1,3,4より1,2,9の方が1,2,3に近いのかもしれません。
0793デフォルトの名無しさん
2012/01/22(日) 17:28:05.64残念ながら、正解は>>783-784だ。理由はスレタイに書いてある。
0794デフォルトの名無しさん
2012/01/22(日) 18:12:50.02>array1とarray2の関係は、arrayとarray3よりも「近い」と判断したい
とかしか書いていないので、これが教師データだろ
妄想でデータ作って近いのかもしれないって馬鹿なの?
0795デフォルトの名無しさん
2012/01/22(日) 19:49:40.140796デフォルトの名無しさん
2012/01/22(日) 19:56:38.02>>776が評価関数の求め方を質問しているのならそうですね。
>>794
演習問題なら教師データさえ正しく判定できればOKですが、
実用なら「ユークリッド距離」が目的に合うとは限りません。
それを具体的な例で説明しただけです。
0797デフォルトの名無しさん
2012/01/23(月) 00:13:51.39まず質問者に質問の詳細を問うのが正解です
0798デフォルトの名無しさん
2012/01/23(月) 11:17:17.980799デフォルトの名無しさん
2012/01/23(月) 14:48:12.44そこまで肩肘張らなくても
0800デフォルトの名無しさん
2012/01/23(月) 21:52:43.20社会人になっても研究とかしたいし
0801デフォルトの名無しさん
2012/01/23(月) 22:20:20.59極めたいならツールベンダーか、コンサル会社じゃないかな。両方兼ね備えてるところが多いけど。
あるいは立場をユーザー企業に向ければもちろん VOCとか、特許とか、様々な技術文書等の
本物のデータがあるよ。 ただ民間は決められた時間内で成果を出さないとならず、学術的な
仕事をするなら研究所をもってる所に行かないと厳しいだろうけどね。研究所とはいえ民間だから
成果の評価順は 製品への展開(技術移管)、特許活動、学会発表の順に低くなる。
0802デフォルトの名無しさん
2012/01/23(月) 23:42:09.66近似計算になるけどLSH.
0803デフォルトの名無しさん
2012/01/24(火) 00:49:26.84そっか〜やっぱり大学卒業すると厳しそうだね
アドバイスありがとう。
0804デフォルトの名無しさん
2012/01/24(火) 11:32:02.18会社の研究所は学校では無いからねぇ
金にならない特許なんて不良資産だし
0805デフォルトの名無しさん
2012/01/26(木) 06:37:55.39大量のデータ用意して自分が学習するしかない。
「したい」ということは教師役も自分でやる。
0806デフォルトの名無しさん
2012/02/03(金) 22:19:14.45ちゃんと事前確率P(class)も掛け合わせて是正しているんですがP(class|words)の計算で既に差がつきすぎてるようで・・・
何か良い解決策はないでしょうか、よろしくお願いします
0807デフォルトの名無しさん
2012/02/03(金) 22:41:28.32P(class|word)じゃなくてP(word|class)だろ?
0808デフォルトの名無しさん
2012/02/04(土) 01:19:37.36そうです、訂正ありがとうございます
0809デフォルトの名無しさん
2012/02/04(土) 02:35:21.47補集合のやつ(Complement Nyve Bayes)使ってみたら?
2クラス分類なら意味ないけど.
0810デフォルトの名無しさん
2012/02/04(土) 02:49:50.530811デフォルトの名無しさん
2012/02/04(土) 06:04:33.970812デフォルトの名無しさん
2012/02/04(土) 06:06:47.89それだと丸まって0.0になるから同点になるだけで、
小さなクラスが勝つことはないんじゃ?
0813デフォルトの名無しさん
2012/02/04(土) 12:50:49.86今回やっていることは文章から性別を判定させるという事で、
取り合えずデータの数を合わせると納得がいかない方法ですが一応偏った判定はしなくなりました。
>>809
2クラス分類なので使えなさそうですね・・・
でも一度読んでみますありがとう。
>>810
値も常に確認しているのでそれはないと思われます。
一応つたないコードですが間違いがありましたらご指摘いただくと嬉しいです。
http://codepad.org/BsdTrv9t
0814デフォルトの名無しさん
2012/02/04(土) 21:31:49.62add one smoothingで、+len(male) や +len(female)が小さいほうが有利になっている。
v = len(set(male.keys()+femail.keys()))
としておいて、+len(male)や+len(female)を+vに置き換えてみたら?
0815デフォルトの名無しさん
2012/02/05(日) 14:04:54.80修正しました、ありがとうございます。
一度データの数が少ない辞書を用意して確認してみます
0816デフォルトの名無しさん
2012/02/06(月) 12:20:00.19wordsでforを二回回してるのが気持ち悪い
0817デフォルトの名無しさん
2012/02/11(土) 19:21:09.78Excelファイルのデータクリーニングをしているのですが、名前の入力間違い(仲村と中村など)や入力形式が違う電話番号といったレコードが多く、データの紐づけに手間がかかっています。
機械学習を用いて解決できないでしょうか?
何か参考になるツールやサイトがあれば教えて頂けないでしょうか?
0818デフォルトの名無しさん
2012/02/11(土) 20:14:34.380819デフォルトの名無しさん
2012/02/11(土) 20:21:15.23正規表現使う場面では?
0820デフォルトの名無しさん
2012/02/11(土) 20:27:05.12泥臭く正規表現でやれるはず
0822デフォルトの名無しさん
2012/02/11(土) 21:02:52.10仲村と中村の正解をどうやってするんだ?
本人の正しい漢字を知らなかったら無理。
紙のカードなどに書き出してデータにミスないか本人に確認して貰うとか手動が確実にいる。
すでに確認済の正しいデータがあればそれ使え。
0823デフォルトの名無しさん
2012/02/11(土) 21:51:45.600824デフォルトの名無しさん
2012/02/11(土) 22:25:06.29そういえば年金記録が損なわれたとき、修復は人手で行ったそうだし、
信頼性が必要ならそうするしかないのでは? 何したかを参考にするなら次のページ。
http://ja.wikipedia.org/wiki/%E5%B9%B4%E9%87%91%E8%A8%98%E9%8C%B2%E5%95%8F%E9%A1%8C
0825デフォルトの名無しさん
2012/02/11(土) 22:55:22.7003(0000-0000)
0300000000
これを同一判定したいなら泥臭く正規表現でいけるじゃないかな
中村まさお
仲村まさお
萬田次郎
万田次郎
これを同一判定するなら人手でhttp://ja.wikipedia.org/wiki/%E4%BA%BA%E5%90%8D%E7%94%A8%E6%BC%A2%E5%AD%97みたいな感じのデータを整備してマッピングするしかない
いずれにせよ「機械学習」に対して質問者が抱いているボンヤリとしたブラックボックスにデータを投げて解決する問題では無いと思います
0826デフォルトの名無しさん
2012/02/12(日) 10:59:15.530827817
2012/02/12(日) 11:08:48.17的外れな質問だったのに、ありがとうございます。
0828デフォルトの名無しさん
2012/02/12(日) 11:27:05.230829『2ちゃんねる』:海外からのデータマイニング?(2)
2012/02/23(木) 19:50:19.59『Wikipedia』の「2ちゃんねる」を参照しました。
(以下一部引用)
『運営:2011年現在、主としてアメリカ合衆国カリフォルニア州
サンフランシスコ365 Main社運営のデータセンターにある、
Pacific Internet Exchange所有スペースにある約60台のサーバ群で運営されている。
OSにはFreeBSDを用い、数年にわたって改良が続けられてきた投稿を受け付ける掲示板システム群
(各ユーザはこれらの入っているサーバにアクセスする)と、各種ロギングや投稿チェック、
そして「実況」と呼ばれる最大で秒間数百以上にのぼる大量投稿を捌く…などの役割を与えられた
バックエンドシステムによって構成されている。』(以上引用)
>>95に関連して、下記を参照してください。
『アメリカ経由の通信情報ローンダリング手法』の確立可能性と傍聴法の無力化』
http://infowave.at.webry.info/201010/article_2.html
盗聴法改正案が2011年に提出され、もし成立していれば、基本的に米国のインターネット・サービス
を利用するユーザーは、国の区別なしに米公安機関による通信傍受の対象となる。これは
意外な落とし穴となるだろう。たとえば、東京から大阪までスカイプで電話をした場合、
もしその通話が米国の管理サーバーを経由していれば、理論上、米国公安当局は傍受をできる
ことになる。同様に、日本の知人や友人同士が楽しくフェースブックで交流していても、
そのメールやアップロードした写真、書き残したメモなどが米国のサーバーにある限り、
米国の公安当局が傍受あるいは閲覧することができるようになる。
さて、ひろゆき氏がトラブル回避のために『2ちゃんねる』サーバーを手放したことは
日本国内『2ちゃんねる』ユーザーにとっていい影響がでているのか、それとも・・・?
0830インターネットで個人情報の追跡ビジネスが急成長=WSJ調査
2012/02/24(金) 07:46:07.10『インターネットで個人情報の追跡ビジネスが急成長=WSJ調査』(下記)
http://headlines.yahoo.co.jp/hl?a=20100803-00000007-wsj-int
(以下引用)
「本紙が独自に調査を行った結果、インターネットで最も急速に成長している
ビジネスのひとつが、インターネット・ユーザーのスパイ事業であることが判明した。
(中略)
o消費者の追跡は一般に認識されているよりもはるかに広範囲かつ徹底的に行われている
ことが明らかになった。具体的には、以下の点が確認された。
o米国の上位50のウェブサイトが平均して64の追跡テクノロジーを、訪問者のコンピュータ
にインストールしている。ほとんどの場合、警告は行われていない。
追跡テクノロジーは、以前よりも高機能化し、深く入り込むようになっている。これまで
モニター行為には、ユーザーが訪問したウェブサイトを記録する「クッキー」ファイルが使用
されることがほとんどだった。本紙の調査によって、ウェブページ上でのユーザーの行動を
リアルタイムでスキャンし、アクセス場所、所得、買い物の嗜好(しこう)、さらには健康状態
までを即座に算定する新しいツールが使われていることが明らかになった。一部にはユーザーが
削除を試みても後で密かに復活するツールもある。
o これらの個人情報のプロファイルは、常に更新され、1年半ほど前に誕生した、株式市場の
ような取引所で売買されている。』(以上引用)
ライフログが売買されるようになると、個人情報保護法も無力化しますし、本来の目的も
失われます。下記参照してください。
『ライフログ集合体と個人情報・プライバシー問題(『思考盗聴』とよばれる現象の一種について)』
http://infowave.at.webry.info/201001/article_2.html
また、警察官や自衛官もプライバシーを無視してよいとは考えていないと判断してよいようです。
『ユビキタス・クラウドコンピューティング時代の情報セキュリティと電波首輪理論』
http://infowave.at.webry.info/201001/article_1.html
0831デフォルトの名無しさん
2012/02/24(金) 08:07:14.520832デフォルトの名無しさん
2012/02/25(土) 06:46:42.630833デフォルトの名無しさん
2012/02/25(土) 11:55:55.34TargetURL=0
TargetURLBody="2ch.net/test/read.cgi/tech/1286200810/"
Name=1
NameBody="デフォルトの名無しさん"
Mail=4
MailBody="^$"
Msg=0
MsgBody="http"
0834【実証】つぶやきだけで個人の特定は可能
2012/03/21(水) 20:04:08.26http://r25.yahoo.co.jp/fushigi/jikenbo_detail/?id=20120319-00023177-r25&vos=nr25nn0000001
(以下概要)
�@お笑いサイトの「オモコロ」が、「つぶやきだけで個人を特定できるのか?」という企画に挑戦!!
↓
�A「渋谷なう」とつぶやいているアカウントを検索し、そのなかからさらに詳しい個人情報をつぶやいているユーザーを追跡。
↓
�B居場所、ファッション、持ち物などから「この人だ!」との確信を持ったら、「○○さん(アカウント名)ですよね?」と声をかける。
↓
�Cわずか1時間半で2人のツイッターユーザーを捕捉することに成功!!
0835Twittwr Facebook Mixiと集団ストーカー
2012/03/21(水) 20:05:03.98http://infowave.at.webry.info/201108/article_1.htmlの参照おねがいします。
※重要※ 「GPSを使った携帯を用いた場合」
携帯で撮った写真を携帯からMixiなどに投稿→写真に位置情報が記載されているので、自宅や職場から写真投稿すると
「職場」や「自宅」という個人情報(固定位置情報)が流出しているのと同じ行為になる。
※重要※ 「GPSを使った携帯を用いた場合」
Twittwerで自宅や職場から「自宅なう」とか「職場なう」とツイートしたり、それに類似する自宅や職場にいる内容の
ツイート(つぶやき)をしてしまう。→「職場」や「自宅」という個人情報(固定位置情報)が流出しているのと同じ行為になる。
※重要※ 「TwittwerとFacebookやMixiを連携している場合」
Twittwerで自宅や職場から「自宅なう」とか「職場なう」とツイートしたり、それに類似する自宅や職場にいる内容の
ツイート(つぶやき)をしてしまう。→「職場」や「自宅」という個人情報(固定位置情報)を流出させているだけで
なく、Facebookを通じてプロフィール等の情報も流出してしまう。
↓
↓
「集団ストーカー」の原因である個人のライフログ情報(プライバシー情報)流出の大きな
原因となってしまっている。
参考:『ライフログ集合体と個人情報・プライバシー問題(『思考盗聴』とよばれる現象の一種について)』
http://infowave.at.webry.info/201001/article_2.html
2011年9月20日にも同様の警告がされています。
『スマートフォンで自分の居場所がバレるサービス&アプリに気を付けろ!』
http://r25.yahoo.co.jp/fushigi/wxr_detail/?id=20110920-00021515-r25
個人的には現状Facebook Twittwer Mixiはしていません・・・。
0836Facebookに内在する危険性が顕在化している
2012/03/21(水) 20:06:10.75http://headlines.yahoo.co.jp/hl?a=20120225-00000405-yom-sociを参照しました。
(以下一部引用、個人名は****にしてあります。)
『「初期設定では、個人情報の公開範囲が『すべてのユーザー』となっている項目が多く、知らない間に自分の情報を
世界中にさらしてしまう人もいる」。日本IBMのシニア・セキュリティ・アナリスト****さん(38)はこう警鐘を鳴らす。
****さん自身も、昨年12月、過去の投稿や活動状況を簡単に時系列で閲覧できるサービス「タイムライン」を使い始めたところ、
これまで書き込みや写真投稿の際に登録した約500件の位置情報が地図上に一覧表示されてしまった。「いつ、どこで何をしたか簡単
にチェックできる。滞在回数の多さから自宅や勤務地域が予想できるので、ストーカーに悪用されかねない」海外ではフェイスブックの
情報が、就職前の学生の素行調査や、交際相手の浮気調査に使われたりしているという。「利用者は一度、自分のプライバシー設定を
見直した方がいい」と****さんは指摘する。「実名や所属、関心事などの様々な情報が入手できるため、特定の個人や組織を狙う標的型
のサイバー攻撃の『下調べ』に使われる恐れがある」と警戒するのは、情報処理推進機構・セキュリティセンターの****調査役だ。』
(以上引用)
『位置情報とソーシャルネットワーキングサービスを利用したストーキングの実例と個人情報漏洩の流出について 』
http://infowave.at.webry.info/201108/article_1.htmlの参照おねがいします。
個人的には現状Twitter Facebook Mixiは使用していません。
0837デフォルトの名無しさん
2012/03/22(木) 14:05:03.300838デフォルトの名無しさん
2012/03/23(金) 03:06:23.27その情報が持つ価値なんて、すごく低いはずなんだけど
0839デフォルトの名無しさん
2012/03/23(金) 08:54:14.380840デフォルトの名無しさん
2012/03/23(金) 11:06:08.230841デフォルトの名無しさん
2012/03/23(金) 11:26:16.420842デフォルトの名無しさん
2012/03/28(水) 21:27:37.97ttp://sourceforge.net/projects/shark-project/files/Shark%20Core/Shark%202.3.4/
のwin32.exeをインストールしてvisual studio2010で
使用しようとしてもinternal errorが出ます.
shark.libはきちんと読み込めてるようなのですが.
なんのでしょう?
0843デフォルトの名無しさん
2012/03/28(水) 23:20:12.53ここをみるとVSでのtempファイルを削除しろとかサービスパック入れろとか書いてありますが
うまくいきません
0844デフォルトの名無しさん
2012/03/28(水) 23:29:24.280845営利利用に関するLR審議中@詳細は自治スレへ
2012/04/08(日) 23:57:59.67http://wikiwiki.jp/cattail/?%CE%E0%BB%F7%C5%D9%A4%C8%B5%F7%CE%A5
のような形で解くものだと自己解決しました。
0846営利利用に関するLR審議中@詳細は自治スレへ
2012/04/09(月) 20:09:15.71一般的なプログラミングに関する質問なら「はてな人力検索」でかなり適切な回答を頂けるようですが、機械学習のような専門ジャンルとなると厳しい模様です。
実際機械学習に関する質問は10年でたったの4件のみで、しかも回答は「門外漢なのでよくわかりませんが〜」といった具合です。
全くの門外漢の文系卒社会人が機械学習を学ぶには独学でコツコツとテキストを読むしか無いのでしょうか。
0847営利利用に関するLR審議中@詳細は自治スレへ
2012/04/10(火) 02:03:52.710848営利利用に関するLR審議中@詳細は自治スレへ
2012/04/10(火) 02:45:30.87大学に行くか独習できる程度に基礎を積むのがいいと思うけど
ヤフー知恵袋だったら答えてくれる人はいるかもね
0849デフォルトの名無しさん
2012/04/13(金) 17:02:11.86英語ができるならQuoraがいいんじゃない?
0850デフォルトの名無しさん
2012/05/17(木) 23:08:13.94該当する学術分野としては自然言語処理と機会学習という認識でよろしいでしょうか
また日本語の情報源があれば教えて頂きたいです
0851デフォルトの名無しさん
2012/06/01(金) 20:13:28.00サポートベクターマシンの、マージン最大化ってところで、分からないところがあるのですがどなたか分かりやすく教えていただけませんか?
マージンとは、分離平面をwx-b=0として、
min_i |wx_i -b| / ||w||
と定義するそうで、ここまではおkです。
本ではこの後、
「分離平面は全体を定数倍しても変わらないのでmin_i 1/ ||w||とできる」
とあります。
何でこんな式変形ができるのか分かりません。なんで全体を定数倍しても変わらなく、1になってしまうのでしょうか?
0852デフォルトの名無しさん
2012/06/02(土) 02:17:04.04> min_i |wx_i -b| / ||w||
のwと
>min_i 1/ ||w||
のwは定数倍された別物ね。
|wx_i -b| = 1
となるように、w , b を定数倍すると、
1/ ||w|| となる。
分かりにくかったらスマン
このページ見れば分かるかな
http://www.neuro.sfc.keio.ac.jp/~masato/study/SVM/SVM_2_2.htm
0853hf
2012/06/06(水) 13:48:51.630854デフォルトの名無しさん
2012/06/10(日) 17:07:47.960855hf
2012/06/13(水) 17:24:05.82そんな自分が機械学習を速習するには、どういう方法がいいんだろうね?
ちなみに英語力はかなりあると自負してるので、Bishop本を読み始めた。だけど、すぐに
確率統計・行列演算の基本的なところでつまづいて、そっち方面の日本の大学の
教科書を読み始めた。機械系って、微積はかなりやるんだけど、確率統計・行列ベクトル
なんかは、あまりやらないんだよね。
なんか、お勧めの本とかあったら教えて。
ちなみに、興味の中心は、ウェブからの情報抽出と整理(aggregation)。
0856デフォルトの名無しさん
2012/06/13(水) 18:00:07.840857デフォルトの名無しさん
2012/06/13(水) 18:01:15.66確率統計や行列ベクトルの習得には時間が掛かりすぎる。
それらを完全にマスターし終えたころには10年くらいたっているだろうね。
だからすぐ分かるとかやさしいとか書いてある奴がいいと思うよ
0858デフォルトの名無しさん
2012/06/13(水) 18:38:07.64これのループでいいんじゃないかと。
0859デフォルトの名無しさん
2012/06/13(水) 21:32:32.03- これなら分かる応用数学教室
- これなら分かる最適化数学
- ニューメリカルレシピ・イン・シー
- はじめての統計学
- わかりやすいパターン認識
- 情報検索と言語処理
- 言語と計算 (4) 確率的言語モデル
- PRML
- 言語処理のための機械学習入門
- 日本語入力を支える技術
0860デフォルトの名無しさん
2012/06/13(水) 23:35:01.91個々の手法や知識なんていきなり網羅しようとせずに必要に応じて逐次勉強すればいいのに。
0861デフォルトの名無しさん
2012/06/14(木) 10:47:28.09機械学習に入れないでしょ
0862hf
2012/06/14(木) 11:26:51.58ありがとうございます。「わかりやすいパターン認識」は買いましたよ。
読んだのは途中までですけど。
確かに数学の基礎は必要なんで、復習してます。いくら大学が機械系っていっても、
高校は理系だから、確率統計なら検定、行列なら逆行列や固有値の計算ぐらい
まではやりましたよ。もう殆ど忘れちゃったけど。
0863デフォルトの名無しさん
2012/06/14(木) 13:37:26.72確率もルベーグ積分から理解しないといけないし、
線形代数も抽象代数の立場から理解しないといけない。
結論をいうとお前には無理
0864デフォルトの名無しさん
2012/06/14(木) 14:19:41.24一流研究者を目指すと言っているわけではないし
0865デフォルトの名無しさん
2012/06/14(木) 14:25:12.61君はそのどれも理解していないことはよくわかった。がんばれ。
0866デフォルトの名無しさん
2012/06/14(木) 14:28:08.99本気で殺りに来てる確率論の基礎本で勉強すべき
0867デフォルトの名無しさん
2012/06/14(木) 14:40:43.480868デフォルトの名無しさん
2012/06/14(木) 14:55:00.06てか、あれこれ言ってるのってバカな連中。
0869デフォルトの名無しさん
2012/06/14(木) 15:52:16.38無駄にハードル上げて「無理」連呼とかちょっと意味がわからん
>>855
半構造化データからの情報抽出に機械学習が必要だけど、あくまで要素技術の一つにしか過ぎない
情報系の学科卒じゃないのなら機械学習よりも情報検索(IR)系の基礎を先に学んだ方がいいかと
あと英語できるなら http://www.amazon.co.jp/dp/3642194591/ がお勧めですね
webからの情報抽出に特化した本で機械学習についても一通り触れられている
0870デフォルトの名無しさん
2012/06/14(木) 21:03:45.08効率や収束速度や他の機械学習との比較を議論するときに数学が必要になる
0871デフォルトの名無しさん
2012/06/14(木) 23:04:34.11それは言いすぎだろ
0872デフォルトの名無しさん
2012/06/14(木) 23:20:17.86適切な学習機が選択できれば十分
あとは素性をなめらかにするためにsqrtするとかlogとるとかそういうノウハウで十分
0873デフォルトの名無しさん
2012/06/15(金) 01:44:06.890874hf
2012/06/15(金) 14:26:47.53>>半構造化データからの情報抽出に機械学習が必要だけど、あくまで要素技術の一つにしか過ぎない
確かにその通りで、一般的な機械学習の教科書に書いてある方法だけでは、半構造化データからの
情報抽出は、できないですよね。機械学習の上に、Information retrievalのひと工夫が必要と言うか。
初めは"information retrieval"とか"information extraction from semi-structured data"とかの
キーワードで、Google Scholarで論文検索して読んでました。ただ、こういうのを読んでても、
やっぱり機械学習とかパターン認識の話は出てくるんで、基礎の数学のところからやり直してます。
道のりは長いなあ…
0875デフォルトの名無しさん
2012/06/15(金) 17:32:53.49どういうデータを投げるとどういう成果が出るのか、実際に機械学習ライブラリを使って遊んでみる。
そうするとHTMLのような半構造化データをそのまま機械学習に投げられないことに当然気がつく。
つまりどういう「前処理」をしなければならないかがボンヤリ見えてくる。
この前処理には色々な要素技術が絡んできて、機械学習を使う前の段階でかなりの労力が必要だと愕然とするはずです。
なのでビショップ本などで機械学習の本質の勉強を先にやるより、まず他にどういう技術が必要なのかという全体像を把握することをお勧めします。
その上で機械学習が重要だと思ったらそこを掘り下げるとか、自然言語処理をメインでやるとか、道が色々と開けてくるのではないでしょうか。
0876デフォルトの名無しさん
2012/06/16(土) 13:37:45.88おそらく最初に考えた人も手順だけ考えて数学は使ってなかったと思われる
数学がなければできない機械学習はベイズ分類機とサポートベクトルマシンとカーネルメソッドくらいではなかろうか
0877デフォルトの名無しさん
2012/06/16(土) 13:40:24.11適用するだけでも本気で数学が要るのはノンパラベイズぐらいだ。
0878デフォルトの名無しさん
2012/06/16(土) 14:08:51.87最初のやつが研究と利用をごっちゃにして語っただけだったのだろうが。
0879デフォルトの名無しさん
2012/06/16(土) 14:11:03.09同じ意味だろうな。
でもそれじゃあ本当の自分の描きたい絵は掛けないだろう。
0880デフォルトの名無しさん
2012/06/16(土) 14:12:17.050881デフォルトの名無しさん
2012/06/16(土) 14:21:11.690882デフォルトの名無しさん
2012/06/16(土) 14:22:32.01一番はじめに手続きを提案するだけなら、数学は必要ない
0883デフォルトの名無しさん
2012/06/16(土) 14:52:52.59使い方は違うことがよくあるね。
0884デフォルトの名無しさん
2012/06/16(土) 17:26:28.94>>879にキッチリ語ってもらおうかw
0885デフォルトの名無しさん
2012/06/16(土) 17:34:59.430886デフォルトの名無しさん
2012/06/16(土) 22:04:48.75微分積分が分かってないと無理だろ
0887デフォルトの名無しさん
2012/06/17(日) 07:22:55.320888デフォルトの名無しさん
2012/06/17(日) 11:09:33.51>>886 >>876
はどう見ても使うだけの話ではないが
まだ使うだけの話をしていたのか
0889デフォルトの名無しさん
2012/06/17(日) 11:48:12.21理解できない程度の頭脳を持つ>>888がニューラルネットを理解でいているか
非常に疑問である。
0890デフォルトの名無しさん
2012/06/17(日) 16:03:20.96ベタなニューラルネットで数学が必須なのは、使う場合だけ
単に作るだけなら数学は必要ない
そもそもニューラルネットは脳をモデル化したモノなんだから
使う場合には、解空間の構造から次元の呪いまで理解してなければ解が出てこなくて、その理解には数学が必要
0891デフォルトの名無しさん
2012/06/17(日) 16:08:10.58アホ?
0892デフォルトの名無しさん
2012/06/17(日) 16:48:19.29多層パーセプトロンはBackpropagationに微分がいるし
自己組織化マップはベクトル空間上で距離が計算できないといけないだろ
どこまでが数学と言っているのか分からないが
0893デフォルトの名無しさん
2012/06/17(日) 16:53:23.42次元の呪いは、数学と直感がかなり異なる部分
実時間で使える解を求めようと思ったら絶対に数学が必要
0894デフォルトの名無しさん
2012/06/17(日) 16:58:16.520895デフォルトの名無しさん
2012/06/17(日) 17:05:19.50Backpropagationの微分は、極小値に効率よく落ちる方向を見つけるために使ってるだけだから、微分が必須というわけではない
自己組織化マップで必須なのは距離の計算ではなく、衝突判定
距離ε以下を衝突と定義したときに実用上有益なら距離の計算をする
男子便所で隙間をあけて便器を使うときに距離の計算をしているわけではない
距離を使わずに If-Then ルールだけでも自己組織化マップを構成できる
0896デフォルトの名無しさん
2012/06/17(日) 17:10:42.25次元の呪いが影響するのは、計算コスト(時間、空間)と収束性(必要なサンプル数)と解の形(解の頑強性)
0897デフォルトの名無しさん
2012/06/17(日) 17:30:32.04コンピュータで計算する場合に必要だろ
0898デフォルトの名無しさん
2012/06/17(日) 17:43:23.500899デフォルトの名無しさん
2012/06/17(日) 17:43:28.91代入以外の算術演算子が一切ないPrologのソースファイルをコンパイルしてそれを実行することを数学と呼ぶのなら、確かに数学は必要ですけど
0900デフォルトの名無しさん
2012/06/17(日) 17:47:37.62むしろ学習対象の知識を使ってどうやって従属因子を減らすか
そっちのほうがずっと大事だ。
0901デフォルトの名無しさん
2012/06/17(日) 18:04:18.42ならそれを書いてうpしてみてよ
既に存在するならその情報でもいいよ
0902デフォルトの名無しさん
2012/06/17(日) 18:24:33.01ニューラルネットなら、配列アクセスで次の要素にアクセスするために +1 が必要です
== や配列の次の要素を取り出すための +1 が必要なので機械学習には数学が必要です
0903デフォルトの名無しさん
2012/06/17(日) 19:38:01.170904デフォルトの名無しさん
2012/06/17(日) 19:44:50.970905デフォルトの名無しさん
2012/06/17(日) 20:21:15.16その方法が有効であることを説明したり、
よりよい方法が無いかを探るために数学的表現に直して解析する段で初めて数学が必要となる。
0906デフォルトの名無しさん
2012/06/17(日) 22:08:39.230907デフォルトの名無しさん
2012/06/17(日) 22:56:07.75「使うだけ」にどこまで含まれているの?
数学を使わずに機械学習を使う手順を具体的に示してみて
0908デフォルトの名無しさん
2012/06/17(日) 23:03:52.520909デフォルトの名無しさん
2012/06/17(日) 23:55:13.82次に、機械学習ぐらいしか能のない馬鹿が数学は必須であり、今更上記人物は無理であると唱えた
その後使うだけなら対して数学の知識を必要としないとなった。
この時点で、数学の知識はどの程度は必要で、その場合どこまでできるとか議論ががないんだがな。
西暦何年卒の高校レベルならとか大学でこれこれこういう科目を理解してるのを前提とかさ。
0910デフォルトの名無しさん
2012/06/18(月) 00:41:32.25例えばlibsvmを使って分類する場合
・素性と教師データを用意します
・svm_trainで学習してモデルを作ります
・サンプルとモデルを使って分類します
おしまい
分類機の使い方を知っている必要があるけど
少なくとも数式を頭に浮かべる必要は全くない
これが「使うだけ」
よりよく使うなら素性を0〜1にスケーリングしたり
平坦になるようにlogをとったりするけど、数学と言うよりノウハウだな
数字を使ったものはすべて数学だというなら、まぁそうなんだろうなw
0911デフォルトの名無しさん
2012/06/18(月) 02:59:30.53「作るだけ」なら不要と言っている人と違うのか
0912デフォルトの名無しさん
2012/06/18(月) 11:55:56.89何が知りたいのかよくわからないけど
OSの知識がなくてもWindowsは使えるでしょ?
必要なのはWindowsの使い方だけ
数学の知識がなくても機械学習は使えるのよ
必要なのは機械学習の使い方だけ
同じだと思うよ
0913デフォルトの名無しさん
2012/06/18(月) 13:22:11.020914デフォルトの名無しさん
2012/06/18(月) 13:42:46.21>結局どんなものが出てきても文句言ってるっていう気がする。
だよな。
もう、自分や自分の会社で文句でないの作れだよな
0915デフォルトの名無しさん
2012/06/18(月) 15:38:57.03マウスがクリックできればどんなボタンも押せるよな
0916デフォルトの名無しさん
2012/06/18(月) 16:44:31.51どんなに機械学習させても運に頼る部分が出てくる。
機械学習しなくても確率は計算できるけど。
0917デフォルトの名無しさん
2012/06/18(月) 17:23:29.590918デフォルトの名無しさん
2012/06/18(月) 19:02:07.24麻雀は心理の面が大きく、ラプラスの原理では計れない。
人間は状況によってリスクを過小評価したり、過大評価したりする。
統計を取れば必ず似たような心理的傾向が炙り出されるはず。
機械学習でアカギレベルまで相手の捨配が読めるかもしれない。
0919デフォルトの名無しさん
2012/06/18(月) 19:54:05.35使うだけなら数学は必要ない → 学習にかかる時間や解の妥当性をガン無視するなら、頭からっぽにしてググッて出てきたプログラムをサイコロ振って選んで使えばいい
0920デフォルトの名無しさん
2012/06/18(月) 20:27:46.66現実の学習モデルって何
0921デフォルトの名無しさん
2012/06/18(月) 20:32:14.38全然違うw
おまえ、MLド初心者だろ。
作るだけなら数学は必要ない:
性能評価せずに単にメモリベースに毛が生えた程度のオレオレ学習器を実装するだけなら数学は必要ない
使うだけなら数学は必要ない:
実績のあるライブラリを使って学習するだけなら、とりあえずの使い方と素性選択ができれば十分。
使い方を理解するのに数学は必要ないし、素性選択は学習対象に関する知識と試行錯誤のノウハウだけ。
0922デフォルトの名無しさん
2012/06/18(月) 20:35:58.83例
現実の学習モデル: 脳のパーセプトロンのネットワーク、 提示するモデル: ニューラルネット
0923デフォルトの名無しさん
2012/06/18(月) 20:43:16.47作るときには、性能評価もメモリベースのような実装も提示する必要はない
学習理論ではないが、これの一番極端な例がクイックソートを提案した論文
使うとはただ単に動かすということではなくて、解(汎関数)を求めるということだから、解の妥当性を検証するには学習対象に関する知識と試行錯誤のノウハウだけでは無理
0924デフォルトの名無しさん
2012/06/18(月) 22:47:28.56使用者の目的が満たされれば、それば十分使えていると言えると思う
万人が厳密に解の妥当性にこだわっているわけではない
感覚的にだいたい8割くらいあっていてくれれば十分という人だっているんだよ
たぶん研究者なんだろうけど、誰もが自分と同じものを求めているとは考えない方が無難かと
0925デフォルトの名無しさん
2012/06/18(月) 23:38:37.78数学わからないし学習器の仕組みもよくわからない人でもライブラリを使って機械学習使えるようになった
両者とも似た構図だと思うし、どちらも好ましいことだと思う
0926デフォルトの名無しさん
2012/06/19(火) 00:38:07.12脳は機械ではないし脳とニューラルネットワークの差は大きすぎだろ
工学モデルとしてのニューラルネットワークを提示する必要があると思うが
0927デフォルトの名無しさん
2012/06/19(火) 01:39:09.050928デフォルトの名無しさん
2012/06/19(火) 03:18:27.90メモリベースでもベクトルの距離や類似度が必要だろ
0929デフォルトの名無しさん
2012/06/19(火) 19:47:26.08モデル=単純化して注目したい部分のみを抽象化して分かりやすくしたもの だから現実のモデルと実装とどんなに差が大きくても問題ない
0930デフォルトの名無しさん
2012/06/19(火) 21:09:27.340931デフォルトの名無しさん
2012/06/19(火) 23:58:07.79汎関数化が必要なのは研究屋かマイニング屋ぐらい。
機械学習の応用のうち極一部だよ。
ほとんどの応用では、およそそれっぽい推定ができれば十分。
0932デフォルトの名無しさん
2012/06/19(火) 23:59:45.85たかがベクトルの内積を求めるのに、>>861のうちどれだけが必要よ?
0933デフォルトの名無しさん
2012/06/20(水) 13:44:36.89なら全く関係ないものを提示してもいいのか
0934デフォルトの名無しさん
2012/06/20(水) 21:41:31.58機械学習の出力はほとんどすべてか汎関数
ルールベースシステムのif-thenルールも汎関数
0935デフォルトの名無しさん
2012/06/21(木) 19:12:09.17ほとんどの応用は推定した汎関数を評価できればいいの。アホ?
0936デフォルトの名無しさん
2012/06/21(木) 21:13:58.54逆に聞きたいけど、学習結果が汎関数じゃない機械学習って何があるの?
0937デフォルトの名無しさん
2012/06/21(木) 22:12:00.43これは汎関数とみなせるの?
0938デフォルトの名無しさん
2012/06/21(木) 22:33:22.69SVMの学習結果は、入力に対して出力(の集合、T or F)を出す関数、またはその関数を表現する関数だから、汎関数
0939デフォルトの名無しさん
2012/06/21(木) 22:38:28.07> >>937
> SVMの学習結果は、入力に対して出力(の集合、T or F)を出す関数
これはわかる。
> またはその関数を表現する関数だから、汎関数
これはよくわからない。
「関数を表現する関数」ってどういうこと?
「汎関数」は「関数を引数に取る関数」だけど、それと同じもの?
0940デフォルトの名無しさん
2012/06/21(木) 22:53:29.28「表現する」とは、何かを何かに対応(変換、写像、写像、射、ただの対応)させること
exp関数を定義域R値域{T,F}の関数に表現する対応は、exp関数を受け取り定義域R値域{T,F}の関数を出力する汎関数
0941デフォルトの名無しさん
2012/06/21(木) 23:01:39.84というか、関数はすべて汎関数
sin(x) = sin(id(x))
id(x)=1*x
0942デフォルトの名無しさん
2012/06/21(木) 23:28:40.030943デフォルトの名無しさん
2012/06/22(金) 00:57:51.21あらゆるものは汎関数とみなせる。
0944デフォルトの名無しさん
2012/06/22(金) 01:32:00.99おいおい、焦るなよ。
俺じゃないだろ。
0945デフォルトの名無しさん
2012/06/22(金) 22:10:04.91F(y) = {T : y >= c, F : y < c}
y = -x+c
0946デフォルトの名無しさん
2012/06/23(土) 17:23:53.610947デフォルトの名無しさん
2012/06/25(月) 12:41:52.46本は皆無だな。
そうゆうものなんですねで終わらせる人ばっかなんだろうな。
0948デフォルトの名無しさん
2012/06/25(月) 13:23:04.09尤度の定義から考えれば当たり前だからだろ
0949デフォルトの名無しさん
2012/06/25(月) 21:21:22.93その定義で尤もらしいと思わなければ、別の尤度を定義しろってことじゃないの?
0950デフォルトの名無しさん
2012/06/25(月) 21:36:00.70最尤推定の本読めば
0951デフォルトの名無しさん
2012/06/26(火) 03:04:49.790952デフォルトの名無しさん
2012/06/28(木) 11:28:12.720953デフォルトの名無しさん
2012/06/28(木) 17:40:04.950954デフォルトの名無しさん
2012/06/28(木) 18:12:45.780955デフォルトの名無しさん
2012/06/28(木) 18:13:41.340956デフォルトの名無しさん
2012/06/28(木) 18:26:16.590957デフォルトの名無しさん
2012/06/28(木) 21:34:02.190958デフォルトの名無しさん
2012/06/29(金) 09:46:38.440959デフォルトの名無しさん
2012/06/29(金) 10:44:51.900960デフォルトの名無しさん
2012/06/29(金) 13:25:00.12ガッ
0961デフォルトの名無しさん
2012/07/01(日) 09:01:15.12事前分布が一様ならそのモデルから生成されるサンプルで最も多いのが最尤推定値のもの
0962デフォルトの名無しさん
2012/07/01(日) 14:17:38.64サンプル数が最も多いとは限らない
まったく同じサンプルがいくつも入ってる場合を考えれば分かる
0963デフォルトの名無しさん
2012/07/01(日) 22:55:06.08じゃもっと分かりやすく説明してくれ
0964デフォルトの名無しさん
2012/07/02(月) 02:33:56.77だから、事前分布が一様って前提つけてるんでしょ
0965デフォルトの名無しさん
2012/07/02(月) 12:12:23.820966デフォルトの名無しさん
2012/07/02(月) 17:34:19.900967デフォルトの名無しさん
2012/07/06(金) 13:32:20.10必要条件だったのね。
無駄な時間をすごした。
0968デフォルトの名無しさん
2012/07/15(日) 01:29:58.65なんとなく周りみてるとPython/Javaが多い気がする
0969デフォルトの名無しさん
2012/07/15(日) 12:37:40.930970デフォルトの名無しさん
2012/07/15(日) 13:01:15.92バインディングの豊富さも優れる。自分はメインはOracle RDBMS上での開発なので
そういう部分はネイティブなPL/SQL や 慣れているPerl を使う。
今後 Apache Hadoop の枠組みを使う方向なので Java を勉強したい。
0971デフォルトの名無しさん
2012/07/15(日) 13:45:41.61俺はC/SIMD/OpenMPで書いてる
NumPyのRuby版があればRubyで書きたい
0972デフォルトの名無しさん
2012/07/15(日) 22:59:00.20計算科学専門の人からなんでPython?とかたまに言われてモヤモヤしてた
0973デフォルトの名無しさん
2012/07/16(月) 08:40:39.900974デフォルトの名無しさん
2012/07/16(月) 22:21:11.23一般向けの機械学習の本のサンプルコードがPythonばっかりだから、「なんでPython?」といつも思う
Pythonが機械学習に不向きという意味ではなく、「Python以外じゃダメだったの?」という意味
0975デフォルトの名無しさん
2012/07/17(火) 00:14:46.76当然、ライブラリ以外の部分もネイティブの方が速いけど
0976デフォルトの名無しさん
2012/07/17(火) 07:57:19.82ライブラリの充実でほぼ既成事実化してきたからなあ
0977デフォルトの名無しさん
2012/07/17(火) 10:27:02.68Matlabが多くない?
0978デフォルトの名無しさん
2012/07/17(火) 12:55:55.03NumPyもMATLABも行列計算などをよく最適化されたネイティブなライブラリで実装しているから
呼び出す側が遅くても全体的には遅くならない
ただMATLABは実験以外で使えないだろ
0979デフォルトの名無しさん
2012/07/19(木) 19:18:47.14゙'. '.;`i i、 ノ .、″
゙'. ,ト `i、 `i、 .、″
| .,.:/"" ゙‐,. ` /
` .,-''ヽ"` ヽ,,,、 !
、,、‐'゙l‐、 .丿 : ':、
、/ヽヽ‐ヽ、;,,,,,,,,,-.ッ:''` .,"-、
,r"ツぃ丶 `````` ../ `i、
,.イ:、ヽ/ー`-、-ヽヽヽ、−´ .l゙`-、
_,,l゙-:ヽ,;、、 、、丶 ゙i、,,、
,<_ l_ヽ冫`'`-、;,,,、、、、.............,,,,、.-`": │ `i、
、、::|、、、ヽ,、、. ```: : : ``` 、.、'` .|丶、
.l","ヽ、,"、,"'、ぃ、、,、、、、.、、、.、、、_、.,,.ヽ´ l゙ ゙).._
,、':゙l:、、`:ヽ、`:、 : `"```¬――'''"`゙^` : ..、丶 .l゙ `ヽ
,i´.、ヽ".、".、"'ヽヽ;,:、........、 、、...,,,、−‘` 、‐ |゙゙:‐,
,.-l,i´.、".`ヽ,,,.".` `゙゙'"`'-ー"``"``r-ー`'": _.‐′ 丿 ,!
j".、'ヽ,".、".、"`''`ー、._、、、 、._,、..-‐:'''′ .、,:" 丿
゙l,"`"`''ヽヽ"`"` ```゙'''"ヽ∠、、、、ぃ-`''''": ` 、._./` ._/`
`'i`ヽヽヽ`''ーi、、、: : 、.,-‐'` 、/`
``ヽン'`"` : `~``―ヽ::,,,,,,,,,,.....................,,,,.ー'``^ ,、‐'"`
`"'゙―-、,,,,..、、 : ..,、ー'"'`
: `‘"`―---------‐ヽ``"''''''""
0980デフォルトの名無しさん
2012/07/19(木) 21:38:33.88pythonも充実してるならpythonを使いたい
0981デフォルトの名無しさん
2012/07/19(木) 22:34:36.18大学文系なんてうんこだったなあて思う
理系いけばよかった
0982デフォルトの名無しさん
2012/07/20(金) 01:33:10.78レス数が950を超えています。1000を超えると書き込みができなくなります。