xAI GrokChat with xAI's large language model (LLM).
Training language models to follow instructions with human feedback
Making language models bigger does not inherently make them better at following a user's intent. For example, large language models can generate outputs that are untruthful, toxic, or simply not helpful to the user. In other words, these models are not aligned with their users. In this paper, we show an avenue for aligning language models with user intent on a wide range of tasks by fine-tuning wi
Training Compute-Optimal Large Language Models
We investigate the optimal model size and number of tokens for training a transformer language model under a given compute budget. We find that current large language models are significantly undertrained, a consequence of the recent focus on scaling language models whilst keeping the amount of training data constant. By training over 400 language models ranging from 70 million to over 16 billion
Cramming: Training a Language Model on a Single GPU in One Day
Recent trends in language modeling have focused on increasing performance through scaling, and have resulted in an environment where training language models is out of reach for most researchers and practitioners. While most in the community are asking how to push the limits of extreme computation, we ask the opposite question: How far can we get with a single GPU in just one day? We investigate t
Universal Language Model Fine-tuning for Text Classification
Inductive transfer learning has greatly impacted computer vision, but existing approaches in NLP still require task-specific modifications and training from scratch. We propose Universal Language Model Fine-tuning (ULMFiT), an effective transfer learning method that can be applied to any task in NLP, and introduce techniques that are key for fine-tuning a language model. Our method significantly o
エスペラント - Wikipedia
エスペラント (Esperanto) は、ルドヴィコ・ザメンホフとその協力者たちが考案・整備した人工言語。母語の異なる人々の間での意思伝達を目的とする、国際補助語としてはもっとも世界的に認知され、普及の成果を収めた言語となっている[2]。 概要[編集] 創案者のラザロ・ルドヴィコ・ザメンホフは世界中のあらゆる人が簡単に学ぶことができ、世界中ですでに使われている母語に成り代わるというよりは、むしろすべての人の第2言語（橋渡し言語、リングワ・フランカ）としての国際補助語を目指してこの言語を作った。ザメンホフは、帝政ロシア領（当時）ポーランドのビャウィストク出身のユダヤ人眼科医で、ユリウス暦1887年7月14日（グレゴリオ暦同年7月26日）に Unua Libro（最初の本）でこの言語を発表した。 現在でも彼の理想を追求している使用者が多くいる一方、理想よりも実用的に他国の人と会話したり、他の国
日本語は特殊な言語である（かどうかWALS Onlineを使って調べてみよう） - 思索の海
はじめに 「日本語は特殊な言語である」系のお話には時々反応していて，下記のように記事にしたこともあるのですが， 日本語特殊論絡みで少しだけ - 思索の海 オノマトペと「日本語の脳」に関する日本語特殊論 - dlitの殴り書き 「言語を比べるのはなかなか難しい」とか「オノマトペや敬語が豊かな言語は日本語の他にもある」という話にある程度納得できても，「日本語にもちょっとぐらい変わったところがあるのでは…」ということが気になる人はいるのではないでしょうか。 というわけで，WALSという世界の言語に関するデータベースを使ってほんとうに日本語は特殊ではないのか調べてみましょう。 WALSとは “WALS”は“World Atlas of Language Structures”の略称で，世界の様々な言語がどのような特徴を持つのか，その特徴ごとに見ることができるデータベースです。現在，オンライン版を無
異世界転生したけど日本語が通じなかった（Fafs F. Sashimi） - カクヨム
Ham co lkurf niv lineparine men!? Fafs F. Sashimi 異世界に転生した主人公八ヶ崎翠、しかし言葉が通じなかった！？ 翠は彼の先輩であるインド先輩に以前学んだ言語学や語学の知識を駆使して、言葉を学んでいく。 この世界は戦争中で主人公はその戦乱に飲み込まれながらも、チート無し（？）言葉と知識だけで渡り歩くことになる…… ★リパライン語については以下を参照すると様々な資料があります。 → https://w.atwiki.jp/cgwj/pages/42.html ★なろう版にはルビがついていないので、ハードモードで読みたい人はそちらをおすすめします。カクヨム版を読んだあとにルビ無しのなろう版を読み直すと言語習得感が更に味わえます。 → https://ncode.syosetu.com/n4955ee/ ★リパーシェ化ブックマークレットを利用すると
セックスのときの「イク」は、世界的に見ると三つに大別されるという話
セックスのとき「イク」って他の国ではなんて言ってるの？セックスのときオーガズムにいたることを日本では「イク」と言ってますが、英語では「I’m coming」でcomeだから「クル」になる、というのはよく言われている話です。 (これに関する疑問はのちほど） ていうか唐突かよ。 すみません。 ふと気になったもんで。 じゃあ他の言語ではどうなのか？と思ったので調べてみました。 軽い気持ちで検索しはじめたものの、意外にもちゃんとした情報が載ってるサイトがない。 そのなかで、これはちゃんとしてるっぽいんじゃないか？と見つけたのがこちらのサイトです。 Improbable Research マニアックな研究を集めている団体のようです。 Behold, I am Coming Soon! A Study on the Conceptualization of Sexual Orgasm in 27 La
人類にとって一番の謎って言語だよな : 哲学ニュースnwk
2017年07月23日20:00 人類にとって一番の謎って言語だよな Tweet 1: 名無しさん＠おーぷん 2017/07/22(土)13:22:34 ID:cjg 誕生の経緯とかなぜ発達したのかとかも重要だけど どうして人類は言葉を生んだのか、どうやって生み出したのか、 そして言葉というものがないのにどう言葉を作ったのか なぜ言葉は世界中に存在するのか めちゃくちゃ笑えるコピペを貼るスレ『左手の薬指』 http://blog.livedoor.jp/nwknews/archives/4959392.html 2: 名無しさん＠おーぷん 2017/07/22(土)13:22:59 ID:WcQ ウホウホ 3: 名無しさん＠おーぷん 2017/07/22(土)13:23:09 ID:cjg >>2 ウホｗｗｗｗ 4: 名無しさん＠おーぷん 2017/07/22(土)13:23:34 ID:
「日本製のレースゲームで遊ぼうとしたら…イギリス人として大きなショックを受けた」 : らばQ
「日本製のレースゲームで遊ぼうとしたら…イギリス人として大きなショックを受けた」 人気レースゲームとして長い歴史を持つ「リッジレーサー」シリーズ。 最新作はスマートフォンからリリースされていますが、それを遊ぼうとしたイギリス人が言語選択の段階でショックを受けたそうです。 どんな画面だったのかというと……。 As an Englishman, this hurts... 「あなたの言語を選択してね」と促されていますが……。 そう、英語圏の国旗がアメリカの星条旗しかないのです！ イングリッシュの宗主国を自負しているであろうイギリス人のプライドは、ズタズタになっても不思議ではありませんね。 海外掲示板のコメントをご紹介します。 ●グランド・セフト・オート2では英語を表す旗として、イギリス国旗のユニオンジャックの代わりに、スコットランド旗やアメリカの星条旗で発売する寸前だったんだ。どうにか宣戦布告
ホウドウキョクのサイトクローズに関して - FNN.jpプライムオンライン
ホウドウキョクは2019年3月31日に更新を終了し、2019年5月31日にサイトをクローズしました。 長らくご愛顧頂きありがとうございました。 今後はFNNjpプライムオンラインをご利用ください。
東大・京大で『勉強の哲学』が一番売れている理由「勉強するとキモくなる」
「勉強とは何か？」を根源的に考えた一冊。一言なら「勉強とは変身である」になる。 巷に数多のノウハウ本ではない。意識高い系の自尊心をくすぐる本ではない。勉強するとはどういうことか、勉強することで何が起きるのかを、言語と欲望の問題にまで踏み込み、掘り下げる。 議論のバックグラウンドに、フーコーの権力システム、ドゥルーズ＆ガタリの脱コード化、さらにウィトゲンシュタインの言語観をも引き込んでいるが、咀嚼しきった上で原理的に考え抜く、その知的格闘が面白い。 勉強すると何が起きるのかを考える際、勉強する「前」はどうなっているかに着目する。自分が話す（＝考える）言葉やコードは、そのときに自分がいる環境に依存しているという。半径5mの仲間や学校、家族、手元の端末のSNS、マスコミ、社会などから、「こうするもんだ」というコードにノッて話し、考え、行動する保守的な状態だという。 それが、勉強することにより、慣
古代文字・ヲシテ語で書かれた学級日誌、担任教師がまさかの解読に成功→学生がヒエログリフで対抗
古代文字・ヲシテ語とエジプト文字のヒエログリフを使った学級日誌がTwitterで話題になっています。これを書ける生徒も読める先生もすごすぎ……！ 何この発想（画像提供：べいたん@Iari0aさん） べいたん（@Iari0a）さんが投稿したのは、授業の内容や先生への伝達事項などを記す学級日誌の画像。しかしこの学級日誌、全て古代文字として知られるヲシテ語とエジプト文字のヒエログリフで記されています。ヲシテ語は縄文時代から使われていた文字と言われていますが、後の時代に創作されたものとの見解もあるという文字で、日誌を解読してみたところ、書いてあるのは「ろく月いち日もく曜日 天候：くもり」といった基本情報や、授業は1限目に選択科目があった、体育をやったなどの内容で至って普通です。だって学級日誌だもの。 日誌に書かれていたヲシテ語の「たいいく」 驚くべきはこの日誌を担任の先生がきちんと解読できていたこ
独学で基礎から学べるオススメのプログラミング学習サイト3選をメリットと使い方を詳しく解説。 - いしだの話
こんにちは、石田祐希（@yuki1y1m）です。 ぼくはいま、大学1年生でプログラミングに興味があり猛烈に独学で勉強しています。 理系じゃなくても「プログラミングを学びたい！」という方は増えてきていますね。 ぼくも文系ながら、プログラミングというスキルには必要性を感じました。 プログラミングを学び始める人で多いのが一番最初に理解できなくて諦めてしまう方が多いです。 ぼく自身も本から入り理解できなくて一度挫折しているんです。 しかし、オンラインで学べる学習サイトが充実してきたことで文系の初心者でもしっかり基礎からプログラミングの仕組みを理解できるようになったので、ぜひ使って勉強してほしいのでご紹介します！ 「Progate」 Progateとは 学べる言語 こんな人にオススメ！ 「CODEPREP」 CODEPREPとは 学べる言語 こんな人にオススメ！ 「ドットインストール 」 ドットイン
マイクロソフト ほぼ同時に翻訳 人工知能使った新技術発表 | NHKニュース
アメリカのＩＴ企業マイクロソフトは、外国語で話した内容をほぼ同時に翻訳できる機能など、人工知能を使った新たな技術を発表しました。 このうち人工知能の分野では、外国語で話した内容をほかの言語の文字にほぼ同時に翻訳できる機能を披露しました。日本語を含む６０以上の言語に対応するということで、会議などでのプレゼンテーションの場面を想定した実演では、スペイン語で説明した内容がスライドの下の部分に英語の字幕ですらすらと表示されました。 また会社の従業員の顔を人工知能が認識して、登録されていない外部の人が部屋に入ると警告を出す技術も披露し、人工知能はセキュリティーの強化にも役立つとアピールしました。 こうした人工知能のサービスは、マイクロソフトが開発したクラウドからネットを通じて提供されるため、手持ちのパソコンやスマートフォンで利用できます。 マイクロソフトは、基本ソフト「ウィンドウズ」などソフトウェア
日本語が堪能な外国人は普段 何語で考えごとをするのか - 襟を立てた少年
日本語が堪能な外国人は普段 何語で考え事をするのか 僕は仕事中にこんなことを思いついてしまった。 「人は言語を通じて世界を見ている。だとすれば、言語を複数持つ人は思考ベースを複数持つということになり得るのか？それとも彼らに取って言語はチャンネルのようなもので、その時々に応じて切り替えているだけなのか？」という仮説だった。 例えば僕の親しい同僚でイタリア人がいるのだけれど、日本に５年以上住んでいて日本語は何不自由なく使えるし、おまけにイタリア語と英語とスペイン語を自由に操っている。そんな彼は普段何語で思考しているのか。 イタリア人だからイタリア語で思考する。のか？ そんな短絡的に考えていいのだろうか。 彼は日本に住んでいる。 だから基本的に思考も言語も日本語に引っ張られるのが自然だと思う。 具体的には「鈴木さんとみずほ銀行に行かなきゃ」ということを考えるとき、イタリア人の彼はわざわざ「And
初めてゲームプログラミングでやるべき言語 ver1 - ゲーム作ろうよ
概要 「プログラミングって初めてやるんですけど！」 「ゲーム作りたいんですけど！」 そんな人向けに初めて学ぶプログラミング言語は何かというのを考察してみる。 なお、ウェブならPHPかRuby、組み込みならC++やってアセンブラだと勝手に思っている。 言語と開発環境 とにかくこれから考察する言語と開発環境を挙げていきます。 HSP HSPエディタ 参考URL:http://hsp.tv/ C++ VC++ExpressEdition + DXライブラリ 参考URL:http://homepage2.nifty.com/natupaji/DxLib/ Ruby テキストエディタ + ActiveRuby + MyGame 参考URL:http://dgames.jp/ja/projects/mygame/ (自分はwinではサクラエディタ、linuxだとvim使ってます) HSP HSPの利点
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
Homepage
”敬語を使わない外国人”という解釈での吹替え、ほんとにもういいかげん改善してくだされ : ヤマザキマリ・Sequere naturam：Mari Yamazaki's Blog
