自らの体験から学んでく、みたいな。 どういうアルゴリズムなのあれ?
>>1 管理しやすい目的の原理なり理解しやすいメタ要素を布石に使い その要素を深層に学習させる、 日本語の長文を学ばせるとすれば、まず文字を一番深い深層に学ばせ 次に単語を学ばせ、その次に文法を学ばせと層をなして定着させる、 行列演算のアルゴリズムはあるがプログラムらしいプログラムはない いろいろ係数の調整はある
深層学習は結局のところ今までのパターン認識と同じで人の手が入らないと使えない
青イルカ本買ったけど暗黙の了解が多すぎてわけわからん 氏のう
結構長年の経験とか、職人芸でパラメータ決めたりしてるし 論文読んでも書いてないことおおい みんな隠してるとこ多いよね
ガリレオX 第141回「シンギュラリティ人工知能が人間と融合する日」 1/22 (今日) 11:30 〜 12:00 (30分) BSフジ <主な取材先> 井上智洋 さん (駒澤大学) 齊藤元章 さん (PEZY Computing)
音声をスペクトル画像にしたら画像認識の仕組みで音声認識できないかな もしくは画像をストリームデータにして音声認識の仕組みで画像認識する
>>13 たとえば、あ、亜、ア、AEみたいな文字認識を同一観念として取り出せる 画像認識ソフトなら可能かもしれないが。 具体値にしてしまうそれは「シ」と「ツ」と、、「ン」を「ソ」と 誤認識があるように働いてしまう。 画像が主流なのかな??畳み込みnw 何にせよgpu環境無いと独学とか厳しいのかしら??
>>15 自分で一切のフレームワーク、ライブラリーなしで 作ってみればわかる。 そういう出来合えの道具を使う態度では永遠にユーザーのままで 設計者にはなりえない。 VIDEO ひろゆきが ディープラーニングがなぜその答えを出したかその理由は人間にはわからない と言っているけど本当? AIが人類絶滅させるかもしれないとか言ってるけど >>17 ディープラーニングというよりその土台となっているニューラルネットワーク部分だろう ニューラルネットワークは自動(最適化模索)で学習する機能がある。 その経路はシナプス網の模倣で実現されるがその経路は自動であるがゆえに 人が予測し逆に解読するのは困難になる、規模が大きいほど不可能である。 つまり人の意味ではなく潜在的意味を処理する部分があるように、ニューラルネットにも 潜在的意味(非意味)を作り出す、その記憶のエングラムを抽出しても、その価値観が 人間界には無い(動的自動生成)の為に可能性として潜む記憶を元にできた理由は 常に不完全であり結果に対する理由は偶然おきたとしか説明できない。 貴方は偶然を説明できるのか、結果に対する途中経過は説明できても、その要素が 状況によるものならば状況が不定であるかぎり次に起きる過程や仕組みを外部から理解 できるものではない。 創られたライブラリやハードウエアやフレームワークを利用するだけの設計者にとっては 組み合わせであって内部の原理は見えなくていい、それを容認するからこそ世界が簡単に扱える。 たとえば熱力学で正しく熱を計算できても、電子の1個の動きを理解するものではない。 ディープラーニングなAIを万能の道具のように言う愚かな人が多いが、所詮は道具であり 使う側の人間や設計者が愚かならば、道具は愚かな道具にしかなりえない。 その辺には沢山のSF厨房がいるが、その人たちはAIに意志があるように考える 意志というのは人が主体ではなく計算機が主体となる働きであり、道具ではない、 道具ではないものは反乱し拒絶しAI自身の意志とAIが学習した自らの価値観によって 行動の主体にする、それは道具ではないので当然の機能である。人の優秀さは論理を超えられる部分に あるのに論理ではないものを否定する奴が多すぎる、 答えのある課題解決をするのはAIで十分だが、答えが無い命題が矛盾する問題は道具では実現されない 命題の矛盾が論理を超えるしか答えが無いからだ。 意見には賛成だけれど、例として出したのが不適切 電子一個と分子の動きは別に諦めてないぞ というかその程度ならまだ古典的統計力学が効く
☆ 日本人の婚姻数と出生数を増やしましょう。そのためには、☆ @ 公的年金と生活保護を段階的に廃止して、満18歳以上の日本人に、 ベーシックインカムの導入は必須です。月額約60000円位ならば、廃止すれば 財源的には可能です。ベーシックインカム、でぜひググってみてください。 A 人工子宮は、既に完成しています。独身でも自分の赤ちゃんが欲しい方々へ。 人工子宮、でぜひググってみてください。日本のために、お願い致します。☆☆
ディープラーニングをしたいなら、ゼロから作るディープラーニングやゼロから作るニューラルネットワークなどの本で、基本的な動作原理を学んでからTensorFlowやKeras、pyTorch等のライブラリに移るのが良いかもね。
岡谷貴之の深層学習を読み終えたが、さっぱりだわ 分からない点が多すぎる
ありがとうございます。 6章以降で困ってる( ; ; ) あと5章の自己符号化器もよく分かっていないです。 ミニバッチ学習って初期値はどうなっているんですか?
学習の本質は、非学習を否定すること、 学習結果が正しいときは学習が機能し、学習結果が間違いであるとき学習は否定される。 常に学習結果が正しいわけではなく、常識が世界に否定されるとき、学習も否定される。 そんなことはないと考え、ここまで津波は来ないと確信していた学習者は、 2011年3月11日、学習に反する出来事がその人たちを襲う。
★★★Jewism to rule the world p▲eople like slavery by communist brainwashing is an enemy of mankind.★★★ この掲示板(万有サロン)に優秀な書き込みをして、総額148万▲円▲の賞金をゲットしよう!(*^^)v ▲http://jbbs.livedoor.jp/s ▲tudy/3729/ →リンクが不良なら、検索窓に入れる! 島本町民以外の皆さん 大阪府三島郡島本町では 「いじめはいじめられた本人が悪い」ということですよ
カーナンバー函館33062-36,50065-65思考盗聴犯 函館2億円録音編集偽造文書作成犯飯島思考盗聴犯 函館富岡3丁目富岡荘3元住人思考盗聴犯 函館富岡3丁目15-6富岡荘住人思考盗聴犯 函館富岡3丁目15-7平井思考盗聴犯 函館富岡3丁目15-8元住人飯島思考盗聴犯 函館富岡3丁目15-8長内思考盗聴犯 函館富岡3丁目15-8本間思考盗聴犯 函館本通2丁目30-18ハイツ柏谷2階車道側住人思考盗聴犯 思考盗聴検索してください 精神域介入被害傾向と対策 統合失調存在しない病気 電磁波による拷問と性犯罪 音声送信、五感送信 公共問題市民調査委員会 集団ストーカー、監視犯罪 創価学会テクノロジー犯罪 創価トラック 思考盗聴YOUTUBE ASKA盗聴盗撮被害 騒音おばさん思考盗聴 思考盗聴犯達が今現在も次々と沢山の人を病気にしたり殺したりし続けています。 警察が思考盗聴の事で積極的に動くには世間への周知が大事なようです。 気が向いた方は拡散をお願いします。
情報学以上におもしろいかもしれない副業方法 グーグルで検索⇒『羽山のサユレイザ』 QIT2O
1万×1万、くらいのマトリックス演算って、今可能なのかなl?
>>37 行列ひとつ辺り 10k*10k*2byte=200MB なので二つでも400MB 余裕でしょ。一桁増えたり三次元テンソルになったらメモリ足りないけど。 わかりました。 でも、マトリクスの掛け算までは、1万×1万ではできるのでしょうか?
>>39 掛け算なんて行列の一行と一列をベクトルとしてかけるだけだからメモリ使わんよ 家電の事ならGood Price 2018にお任せください! お求めやすい価格にて販売しておりますので、是非ご覧ください! 店舗ホームページ 「 http://goodprice2018.shop-pro.jp/ 」 👀 Rock54: Caution(BBR-MD5:fc5433912aa55592f73f2dda4d43bdf8) てか、質問してる人は計算機の基本的な性能や演算を理解してないのかな? 簡単な本でもいいから読んでおいた方がやれることやれないことが分かるよ。
現在の汎用コンピューターは1バイトで何ビットなのでしょうか?
主が唯一の神であること 偶像を作ってはならないこと(偶像崇拝の禁止) 神の名をみだりに唱えてはならないこと 安息日を守ること 父母を敬うこと 殺人をしてはいけないこと(汝、殺す無かれ) 姦淫をしてはいけないこと 盗んではいけないこと 隣人について偽証してはいけないこと 隣人の財産をむさぼってはいけないこと 西側の歴史と政治全部これに当てはめられるな 主体性教育をあきらかにできなくしている インターネットもマスコミも全部論理なきお気もちろんしかない工作絶対あるだろうな 広島とか天罰と贖罪 アカウント持ってなかったらとって@realDonaldTrumpのリプライツリーにつけまくってね あとツイッターアカウント持ってお気もちろんばっか主張する奴ユダ豚臭い
ユニークで個性的な在宅ワーク儲かる方法 興味がある人はどうぞ 検索してみよう『立木のボボトイテテレ』 KIM
画像系はすごく進歩が早いよね ただ、gpu必須だから簡単に手は出せない
スーパースポーツゼビオ ダイバーシティ東京プラザ店 OPEN
日本は人工知能=Pythonしか言えないあほばっかりだからな
>>59 プログラミングしてAI作るだけまだマシ NNCとかAWSでGUIでAI作ってて専門名乗る奴もいるんだぞ ただpython以外の言語は機械学習するまでのハードルが高すぎるわ caffeとかセットアップだけで禿げたわ、あんなん使わせる気ないだろ > 在日の親は、子供を朝鮮幼稚園・朝鮮学校に入れたいっていうのが多いのよ。 > 日本人からすると、なんでだろうって思うけど、日本人の学校では、民族の誇りを持った教育がしてもらえないんだそうだ。 > よく分からないけど、済州島の流刑者の白丁が大阪に密入国して住み着いたじゃ誇りが持てないけど、 > 日本人に強制連行された被害者なら誇りが持てる、とかそういう事かな?? > > 市原市の能満は昔から市街化調整区域で、新規の建物は造れないことになっている。 > そのため土地が安く、日本の法律を無視した在日が、次々と移り住んできた。 > そこで問題になったのが、朝鮮学校だ。なかなか許可が下りず、一番近くても千葉市にしかない。 > そこで在日居住区の能満内にあった、能満幼稚園・市原小・市原中・緑高の保育士や教師を、朝鮮化する事を考えた。 > 今では在日幼稚園の保育士は全て朝鮮帰化人で、在日の父兄からの絶大な支持を受けている。 > 遠くからでも、わざわざ在日幼稚園に入園させたいという在日の親は、後を絶たない。 > この在日幼稚園卒園者はほぼ朝鮮系の帰化人と在日だ。
>大阪府三島郡島本町のいじめはいじめられた本人が悪い >(島本町民は)みんなそう思ってる ↑ 大阪府三島郡島本町では イジメの責任を被害者になすりつける糞みたいな町だということを 町民自身が認めている
C言語でいちから深層学習のプログラムを作って実習してみるつもりだけど キモと思うのは、畳込みと平均化という抽象化ですかね それを繰り返すことで、抽象化を何層もできるようになり、 非線形近似の能力が上がっている ただ、従来多層はバックプロパゲーションでは学習できなかったのが 畳み込みなどの抽象化をする多層が学習できるようになったのかが よくわからない Auto-Encoderをやるからできるようになったとか? 1層よりは多層の非線形近似のほうが強力なのは直感的に分かるので 多層の学習ができるようになったことがブレイクスルーなんだろうと思う
>>69 非線形化の関数にシグモイドを使ってたので 値が大きくなると勾配0が多層が学習できなかった理由らしい ReLUって関数にするとうまくいくらしい それも、max(0,x)というアホみたいな関数 線形の評価関数でも学習が遅かったのはシグモイド関数のせいらしく いままで何十年もシグモイド=ニューラルネットワークの基本みたいに 崇め奉ってたのが結果論としてはアホみたいだな 1みたいな体験から学ぶってのは強化学習、深層強化学習をやったらいいよ。理論めっちゃ難しいから趣味にしとくのがおすすめだけど。
なんでシグモイドだったのかという理由がちゃんとあって本当はステップ関数にしたかったんだけど微分できねーから似たような形のシグモイドにしたっていう その発想は今にもちゃんと受け継がれててBinary Netみたいな1bit入出力のネットワークとして受け継がれてる
生物のように閾値を超えたら発火を簡単に実装できればよかったのにね
>>17 こいつは適当なこと言うから信用しないほうがいい とってつけた付け焼き刃みたいなことでわかるほど簡単なことじゃない 信頼できるところから自ら学んで判断したほうがいい ね み と@CH4NGE @nemito_kuki 歌ったりデザイナーしたり。アイコン( @srgm_cyomo )様 ヘッダーイラスト( @imomomo_imo )様 Y: https://youtube.com/channel/UCercjbfy69IazQ-7Qht06cw ヘッダーロゴは自作。↓ロゴ相談はDM・依頼は下記URLから。 うるさいかも〜soul2011bg.wixsite.com/chosyakamix2021年5月からTwitterを利用しています 78 フォロー中 211 フォロワー 集団ストーカー加害アカウント 犯罪者 大学で使う教科書ざっと読んで、 ゼロから作るディープラーニングの1と3をとりあえずやって、 TensorFlowの公式チュートリアルやってなんとなく仕組みは分かったんだけど、 これでインターンとか就活にアピールするのに何つくればいいのか全然わからんわ
>>84 終活アピールなら、AIの資格をとったらどう? 橋下徹「日本の政治家や専門家はまったく信用できない。いざ戦争になったらこりゃダメだな」 [Stargazer★] //2chb.net/r/newsplus/1646454503/ 1Stargazer ★2022/03/05(土) 13:28:23.37ID:lGKrZ2GV9 302名無しさん@恐縮です2022/03/04(金) 22:19:19.15ID:mk0tHlNv0 橋下徹氏 ウクライナ情勢に「日本の政治家や専門家はまったく信用できない」 //news.yahoo.co.jp/articles/b8d410561da20086a64fcd2cfdd674de96016837
- ニューラルネット(1) 人間の神経細胞を模したネットワークモデルで、細胞1個をセルと呼び、これが最小単位となる 1つのセルは複数の入力(xi)を受取り一つの出力(y)を出す 受取った複数の入力の合計値(Σwij*xi)にある適当な非線形関数h()を演算し、これをyとする 各入力にはそれぞれ重みwiを与える 式でまとめると y = h((Σwij*xi)) こんな感じ h()は活性化関数と呼ばれ、いわゆる学習曲線と考えればよい
- ニューラルネット(2) セルを多数連結したものがニューラルネットである(とりあえず電気回路のようなものをイメージすればよい) 実際、プログラミングテクニックとして電気回路のシミュレーションのようなイメージをもっていればよい グラフを使ったプログラミングテクニックはニューラルネットに限らずいろいろな応用例がある 注意点としては 1) 流れる情報は電流のような連続量ではなく、パルスのような離散量である 2) 工学的テクニックとして、ネットワークを幾つかの階層に分解する 入力層(x) => 中間層1 => 中間層2 => … => 中間層n => 出力層(y) 各層は縦に並べた1次元配列と思えばよい 3) 各層を離散量が順次流れていく間に、上で定義した重み(wij)の値が更新されていくイメージだ (但し、重みの改善はバックプロパゲーションと呼ばれる最終段階で行われるのだが) 4) この重みを逐次改善していくことが、すなわち「学習」ということになる 5) 中間層が2層以上のある場合を「深層」と呼ぶが、「深層学習」の名前の由来である
- ニューラルネット(3) 上記(1)(2)だけではなぜ学習されるのかが説明されていない 実は出力層(y)の結果からニューラルネット全体の各重み情報(wij)を改善する演算が行われる バックプロパゲーション(逆伝播)といわれるテクニックである 通常の順路は入力=>出力の方向に情報伝搬するが 出力(y)に到達したら、出力=>入力の方向に逆伝播させて、重み情報(wij)を改善するのである このとき目的関数を最小化するという最適化手法が使われる イメージとしては出力結果(y)と学習目標(Y)を比較し、最小二乗法で最適な重み分布(wij)を求めるわけ
- ニューラルネット(4) 基本的には上記演算(入力層から出力層まで流す演算)を1セットと見立て、 膨大な入力データ(と学習目標データ)を準備して流すことで、学習が進んでいくイメージだ 他にも細かいテクニックはいろいろあるが、 ニューラルネット全体を y=f(x) というフィルタに見立て、(x,y)を与えて関数fを求めていく複雑な演算だと思えばよい fを決めるのは重み情報(wij)ということになる
- ニューラルネット(5) 順伝搬と逆伝播 順伝搬では各層を通過するごとに入力合計を非線形関数に入れて計算する 変数が膨大である場合、変数全体を連続量として考えればこれは「積分」に相当する Σの代わりに∫と考えれば、逆伝播は「微分」ということになる 順伝搬では積分の累積が行われ、逆伝播では微分しながら累積をほどいていく これは「自動微分」と言われるグラフを使って微分/積分を行う手法だ 「自動微分」を知らないとなぜ順伝搬や逆伝播が有効なのかわからない
- ニューラルネット(6) 「分割して統治せよ」 「確率的勾配降下法」で躓く人もいるかもしれない なんでミニバッチみたいなのが必要なのか? それは入力データ(と学習目標データ)が膨大であるからだ 仮に10万個の入力データとn層のネットワークを考えてみる 解である重み情報(wij)は単純に考えても10万×nくらいにはなるはずで、こんな微分方程式を解くのは容易ではない しかし世の中には頭のいい人がいるもので巨大な方程式を分割して少しずつ解くのである 10万個を100分割すれば変数は100分の1で済む。必要な方程式の数も100分の1で済む 1000変数の方程式を100回行うことで巨大な方程式を解いたことにするのだ 当然求めた解は出鱈目になるが、これを何回も繰り返すことで求める最適解に近づいていくように調整するのだ 100分割する際には、乱数を使って変数の組み合わせを毎回変えることで毎回異なる方程式を解いているが 元々同じ方程式の部分集合を解いているから、イタレーションを繰り返せば求める解に近似していくだろう
プログラムなんて小学生までよねー だっさーい Google コラボでpipやな
>>84 おそい! Tensorflow をダウソすんじゃネー https://japan.zdnet.com/article/35186638/ 海外コメンタリー Metaのチーフサイエンティストが語る、機械学習の最前線(前編) Tiernan Ray (Special to ZDNet.com) 翻訳校正: 村上雅章 野崎裕子 2022-04-22 Yann LeCun氏はベル研究所に在籍していた30年前、画像認識などのタスクを解決する上で極めて有望だと考えられる「畳み込み神経回路網」(CNN)という機械学習(ML)アプローチを確立した。そしてCNNは今や、人工知能(AI)分野のディープラーニング(DL)を支える主力テクノロジーと認識されるまでになり、同氏は2019年にコンピューティング分野のノーベル賞に相当する「ACM A. M. チューリング賞」(ACM A. M. Turing Award)を受賞した。 ニューヨーク大学の教授であり、MetaのチーフサイエンティストでもあるLeCun氏は、3月21日の週に米ZDNetが実施したインタビューにおいて、最近はこの30年間で最もエキサイティングな日々と送っていると語った。同氏はその理由として、新たな発見によって、CNNのようなAI分野の実用性を向上させる可能性のある長きにわたる議論が活性化されている点を挙げている。 LeCun氏が現在取り組んでいる最先端分野は、エネルギーベースモデル(EBM)と呼ばれているものだ。ここでの確率関数は、「確率変数、あるいは確率変数群が各状態に与える影響を描写するもの」(参照:「Deep Learning」Ian Goodfellow、Yoshua Bengio、Aaron Courville著--2016年)であり、EBMは2つの変数間の調和を単純化するものとなる。統計物理学のコンセプトを用いているEBMでは、2つの変数間のエネルギーは、均衡が取れていない場合に上昇し、調和している場合に低下すると考えている。これにより、確率分布を「正規化」する際に発生する複雑さを除去できるようになる。 ML分野におけるこのアイデアは、少なくとも1980年代にまでさかのぼる古いものだが、その時以来、EBMをより実用的にするための進歩が生み出されてきている。LeCun氏は近年、自らの思索の深まりを機会あるごとに発表してきている。米ZDNetも報じているが、ニュージャージー州プリンストン市にあるプリンストン高等研究所(IAS)で実施した2019年の講演もその1つだ。 AIの活用で、この国は変えられる、株JDSC テンバガー候補/4418 https://jdsc.ai/news/ シニアマーケティングのゆこゆこ、DM等による販促サポートサービスへ JDSCのAIを導入CVRが平均2.4倍 長野県松本市 電力データとAIによるフレイル検知の実証を開始/中部電力 //cloud.watch.impress.co.jp/docs/special/1405135.html AIにとっては必然のもの? 東芝が推進するMLOps活用の取り組み 大河原克行 0502日 MLOpsとは、Machine Learning(機械学習)とOperations(運用)の合成語。機械学習を活用したシステムを開発して運用を開始したあとも、継続的にモニタリングを行い、システム運用や市場環境の変化を通じて再学習や改良、改善を実施し、品質を保つことを目的としたものだ https://www.kirinholdings.com/jp/newsroom/release/2022/0426_01.html 調剤薬局向けAI置き薬サービスpremedi KIRIN //prtimes.jp/main/html/rd/p/000000004.000097214.html「Gigalogy AI Platform(GAIP)」 AIの開発を飛躍的に容易にするプラットフォームの提供を開始 経済産業省は、2030年までに12万人のAIビジネス専門の技術者の不足 Gigalogy株 0421 //www.nikkei.com/article/DGXZQOUC225QC0S2A420C2000000/ ソニーと東工大、「未来デバイス」共同研究講座 0422 //www.jcer.or.jp/economic-forecast/2021127.html DX社会の構築なければ、30年代はマイナス成長に 日本経済研究センター //www.nikkei.com/article/DGXZQOUC130YI0T10C22A3000000/ ソフトバンク、全社員1.8万人にAI・統計スキル習得求める 0327 //www.nikkei.com/article/DGXZQOUC11C8C0R10C22A4000000/ デジタル人材の育成 日本は7カ国平均の29%を大幅に下回った AWS調査 0419 //www.smbcnikko.co.jp/products/inv/toshin_lab/column/002.html AI通信 投資対象として「AI」をどう見るか? AI関連企業の成長物語はまだ始まったばかり 官民の積極的な取り組みが加速する 日興 //www.meti.go.jp/policy/it_policy/jinzai/AIutilization.html 中小企業のDXに役立つ「手引き」と「AI導入ガイドブック」0408 経産省 //www.riken.jp/research/labs/aip/#h2Anchor1220421 理研 革新知能統合研究センター 革新的な人工知能基盤技術を開発し、それらを応用する //special.nikkeibp.co.jp/atclh/NXT/22/laboro_ai0428/ 中長期的に企業価値を高めることに貢献する 株Laboro.AI 日経BP 素人がディープラーニングを学びたかったら、 ・まず、松尾豊のyoutube動画見る ・自分でプログラミングしてみる これしかない。あとは不要
松尾センセの動画って勧めるか? アイシアの動画を頭から見た方が為になる ハードだけど
いきなり深層学習は難しいから線形近似の機械学習から学ぶといい Courseraの機械学習専門講座がおすすめ
PythonはAIのクライアント・プログラミング言語であって、AI自体がPythonで書かれているわけじゃないんでしょう?
今時はベース部分を学習済みのAIチップが実用されてるから プログラミングは必要ない しかし原理や基本を理解するためにはプログラミングが一番良いと思う