バイエルン方言注釈のガイドライン
バイエルン語コーパスの注釈に関する包括的なルール。
― 1 分で読む
目次
この文書は、バイエルン語コーパスの注釈ルールを含んでるよ。このコーパスは品詞(POS)タグを使用してて、単語が文の中でどのように依存し合っているかを示してる。目的は、このコーパスを扱う人たちが効果的に注釈を付けたり、言語を理解したりできるようにすること。
文書の構成
ガイドラインは、文の準備と注釈付けのプロセスに沿って整理されてるよ。まず、文をトークンに分ける準備の仕方を見て、次に一般的なPOSタグと依存関係をレビューする。最後にドイツ語に適用されるルールを確認して、バイエルン特有のルールに集中するよ。
一般的な注意事項
この文書のルールは柔軟だよ。ルールを適用するのが意味不明な状況に出くわしたら、フィードバックを求めていいと思う。また、特定の単語やフレーズの扱いが不明な場合は、話し合いを提案してね。
この文書で使われる表記
- POSタグ: 小文字の大文字で表示される。タグ付けされた単語はイタリック体。
- 依存関係: 特殊なフォントで書かれ、主な単語が下線付きで、従属する単語が太字。
前処理とトークン化
データを準備する際、元のフォーマット(太字やイタリック)を保たないよ。元の形式が重要な場合は話し合ってね。
文を選ぶときは、フルパラグラフを選んでから文に分けるのがベスト。記事のリストは通常スキップされるけど、完全な文が含まれている場合は除外しない。
誤字や句読点のミスは直さないよ。文を個々の部分に分けるのは一般的に簡単。
文レベルのメタデータには以下を含めるよ:
- sentid: 文の出所を示すユニークな識別子。
- text: 文自体。
- texten: 文が翻訳された場合の元のテキスト。
- genre: Wikipediaの記事やフィクションなどのテキストの種類。
- dialectgroup: 文が来る特定のバイエルン地域。
- location: 文に言及されている都市や地域。
- source: 文が見つかるURL。
- author: Tatoeba文の著者のユーザー名。
トークン化ガイドライン
文をトークンに分ける方法を考えるとき、通常はスペースと句読点に頼るよ。
トークン化の特別なケース
- "Silben-Trennung" のような複合名詞は分けない。
- 短縮語は一緒に保つ、例えば "Sonn-noun undcconj Feiertagenoun."
- 数字は単位や範囲から分ける、例えば "8num kgnoun" や "400num -adp 500num."
- 音声転写の外側のかっこは外すけど、他の句読点は残す。
複数語トークン
前置詞 + 限定詞
統合された前置詞と限定詞を部分に分けて、別のトークンとして扱うことが多い。例えば:
- "zum" は "zu" + "m" になる。
名詞句の短縮された限定詞や前置詞にも同じことが適用される:
- "z'Minga" は "z'" + "Mingapropn" に分かれる。
動詞/接続詞 + 代名詞
動詞の直後に1つ以上の代名詞が続く場合、それらを SpaceAfter=No を使って分ける。例えば:
- "gibts" は "gibtverb" と "spron" に分かれる。
他の融合トークン
他のケースでは一般的に SpaceAfter=No を使うけど、疑問があれば話し合ってね。
品詞タグ
品詞のタグ付けに関する詳細なガイドラインはリンクされてるよ。
構文依存関係
依存関係のガイドラインも利用可能だよ。
構文における難しいケース
節の関係
節が名詞や他の節を修飾しているかどうかを判断する際、節を外しても正しい文が残るかを確認してね。
副詞的かどうか
節を取り除いても意味のある文が残るかを考えて。
Ccompかどうか
従属節がその主語を持っている場合、それは補文節だけど、主節と主語を共有している場合はそうじゃない。
一般的な注釈決定
これらのルールは、標準ドイツ語を含むすべての関連方言に適用されるよ。
略語の扱い
意味が通じる場合は略語を分けるよ。例えば、「z.B.」は「zu」 + 「B」になる。
名前とタイトル
人名については、部分をフラットな関係でつなげるよ。
形容詞を副詞として使用する場合
副詞的に使われる形容詞には適切な関係を使って形容詞としてタグ付けするよ。
バイエルンの注釈決定
バイエルンは標準ドイツ語に似てるけど、考慮すべき独自の側面もあるよ。
名詞句
バイエルンでは、限定詞が人名の前に来ることがあるし、姓が名の前に来ることが多い。
バイエルンにおける所有
バイエルンでは、分析的な所有形を使うことが多く、属格を使わずに他の構造で所有を表現する。
形容詞の後置
強調のために形容詞の順序を入れ替えるフレーズがバイエルンでは認識される。
助動詞
特にバイエルンの構文に特有の助動詞にも焦点を当てるよ。
不定詞構文
不定詞フレーズは様々な形で「z(u)」のマーカーを使うことがある。
代名詞と屈折
特に助動詞がある場合に落ちる代名詞がバイエルンのスピーチで注記される。
バイエルンにおける否定の一致
ドイツ語とは異なり、バイエルンでは文に複数の否定マーカーが存在することが許可されている。
関係節
バイエルンでは、活用しない「wo」のような関係マーカーがよく使われる。
時間表現
時間に関連するフレーズについては、特定の注釈ルールを維持する。
結論
このガイドは、バイエルンコーパスの文の注釈をどうするかの包括的な概要を提供するよ。それぞれのセクションには、言語のさまざまな側面を扱うための具体的なルールが示されてて、注釈付けのプロセスでの一貫性と明確さを保証している。
これらのガイドラインに従えば、注釈者は将来の言語分析やバイエルン方言の理解に役立つ、しっかりしたコーパスに貢献できるよ。
タイトル: MaiBaam Annotation Guidelines
概要: This document provides the annotation guidelines for MaiBaam, a Bavarian corpus manually annotated with part-of-speech (POS) tags, syntactic dependencies, and German lemmas. MaiBaam belongs to the Universal Dependencies (UD) project, and our annotations elaborate on the general and German UD version 2 guidelines. In this document, we detail how to preprocess and tokenize Bavarian data, provide an overview of the POS tags and dependencies we use, explain annotation decisions that would also apply to closely related languages like German, and lastly we introduce and motivate decisions that are specific to Bavarian grammar.
著者: Verena Blaschke, Barbara Kovačić, Siyao Peng, Barbara Plank
最終更新: 2024-10-18 00:00:00
言語: English
ソースURL: https://arxiv.org/abs/2403.05902
ソースPDF: https://arxiv.org/pdf/2403.05902
ライセンス: https://creativecommons.org/licenses/by-sa/4.0/
変更点: この要約はAIの助けを借りて作成されており、不正確な場合があります。正確な情報については、ここにリンクされている元のソース文書を参照してください。
オープンアクセスの相互運用性を利用させていただいた arxiv に感謝します。
参照リンク
- https://universaldependencies.org/u/dep/nmod.html
- https://universaldependencies.org/de/dep/nmod.html
- https://universaldependencies.org/u/dep/nmod-poss.html
- https://universaldependencies.org/u/dep/appos.html
- https://universaldependencies.org/de/dep/appos.html
- https://universaldependencies.org/u/dep/acl.html
- https://universaldependencies.org/de/dep/acl.html
- https://universaldependencies.org/u/dep/acl-relcl.html
- https://universaldependencies.org/de/dep/acl-relcl.html
- https://universaldependencies.org/u/dep/det.html
- https://universaldependencies.org/de/dep/det.html
- https://universaldependencies.org/u/dep/det-poss.html
- https://universaldependencies.org/de/dep/det-poss.html
- https://universaldependencies.org/u/dep/case.html
- https://universaldependencies.org/de/dep/case.html
- https://universaldependencies.org/u/dep/amod.html
- https://universaldependencies.org/de/dep/amod.html
- https://universaldependencies.org/u/dep/nummod.html
- https://universaldependencies.org/de/dep/nummod.html
- https://universaldependencies.org/u/dep/flat.html
- https://universaldependencies.org/de/dep/flat.html
- https://universaldependencies.org/u/dep/conj.html
- https://universaldependencies.org/de/dep/conj.html
- https://universaldependencies.org/u/dep/cc.html
- https://universaldependencies.org/de/dep/cc.html
- https://universaldependencies.org/u/dep/punct.html
- https://universaldependencies.org/u/dep/advmod.html
- https://universaldependencies.org/de/dep/advmod.html
- https://universaldependencies.org/u/dep/root.html
- https://universaldependencies.org/u/dep/fixed.html
- https://universaldependencies.org/de/dep/fixed.html
- https://universaldependencies.org/u/dep/parataxis.html
- https://universaldependencies.org/de/dep/parataxis.html
- https://universaldependencies.org/u/dep/compound.html
- https://universaldependencies.org/de/dep/compound.html
- https://universaldependencies.org/u/dep/goeswith.html
- https://universaldependencies.org/u/dep/orphan.html
- https://universaldependencies.org/de/dep/orphan.html
- https://universaldependencies.org/u/dep/reparandum.html
- https://universaldependencies.org/de/dep/reparandum.html
- https://universaldependencies.org/u/dep/list.html
- https://universaldependencies.org/u/dep/dep.html
- https://universaldependencies.org/u/dep/nsubj.html
- https://universaldependencies.org/de/dep/nsubj.html
- https://universaldependencies.org/u/dep/nsubj-pass.html
- https://universaldependencies.org/de/dep/nsubj-pass.html
- https://universaldependencies.org/u/dep/obj.html
- https://universaldependencies.org/de/dep/obj.html
- https://universaldependencies.org/u/dep/iobj.html
- https://universaldependencies.org/de/dep/iobj.html
- https://universaldependencies.org/u/dep/obl.html
- https://universaldependencies.org/de/dep/obl.html
- https://universaldependencies.org/u/dep/obl-arg.html
- https://universaldependencies.org/de/dep/obl-arg.html
- https://universaldependencies.org/u/dep/obl-agent.html
- https://universaldependencies.org/de/dep/obl-agent.html
- https://universaldependencies.org/u/dep/expl.html
- https://universaldependencies.org/de/dep/expl.html
- https://universaldependencies.org/u/dep/expl-pv.html
- https://universaldependencies.org/de/dep/expl-pv.html
- https://universaldependencies.org/u/dep/vocative.html
- https://universaldependencies.org/de/dep/vocative.html
- https://universaldependencies.org/u/dep/csubj.html
- https://universaldependencies.org/de/dep/csubj.html
- https://universaldependencies.org/u/dep/csubj-pass.html
- https://universaldependencies.org/de/dep/csubj-pass.html
- https://universaldependencies.org/u/dep/ccomp.html
- https://universaldependencies.org/de/dep/ccomp.html
- https://universaldependencies.org/u/dep/xcomp.html
- https://universaldependencies.org/de/dep/xcomp.html
- https://universaldependencies.org/u/dep/advcl.html
- https://universaldependencies.org/de/dep/advcl.html
- https://universaldependencies.org/de/dep/advcl-relcl.html
- https://universaldependencies.org/u/dep/aux_.html
- https://universaldependencies.org/de/dep/aux_.html
- https://universaldependencies.org/u/dep/aux-pass.html
- https://universaldependencies.org/de/dep/aux-pass.html
- https://universaldependencies.org/u/dep/cop.html
- https://universaldependencies.org/de/dep/cop.html
- https://universaldependencies.org/u/dep/mark.html
- https://universaldependencies.org/de/dep/mark.html
- https://universaldependencies.org/u/dep/compound-prt.html
- https://universaldependencies.org/de/dep/compound-prt.html
- https://universaldependencies.org/u/dep/dislocated.html
- https://universaldependencies.org/de/dep/dislocated.html
- https://universaldependencies.org/u/dep/discourse.html
- https://universaldependencies.org/u/pos/ADJ.html
- https://universaldependencies.org/u/pos/ADP.html
- https://universaldependencies.org/u/pos/ADV.html
- https://universaldependencies.org/u/pos/AUX.html
- https://universaldependencies.org/u/pos/CCONJ.html
- https://universaldependencies.org/u/pos/DET.html
- https://universaldependencies.org/de/pos/DET.html
- https://universaldependencies.org/u/pos/INTJ.html
- https://universaldependencies.org/u/pos/NOUN.html
- https://universaldependencies.org/u/pos/NUM.html
- https://universaldependencies.org/u/pos/PART.html
- https://universaldependencies.org/u/pos/PRON.html
- https://universaldependencies.org/de/pos/PRON.html
- https://universaldependencies.org/u/pos/PROPN.html
- https://universaldependencies.org/u/pos/PUNCT.html
- https://universaldependencies.org/u/pos/SCONJ.html
- https://universaldependencies.org/u/pos/SYM.html
- https://universaldependencies.org/u/pos/VERB.html
- https://universaldependencies.org/u/pos/X.html
- https://github.com/UniversalDependencies/UD_German-GSD/
- https://github.com/UniversalDependencies/UD_German-HDT
- https://github.com/UniversalDependencies/UD_German-PUD/
- https://github.com/UniversalDependencies/UD_German-LIT
- https://github.com/UniversalDependencies/UD_Swiss_German-UZH
- https://github.com/UniversalDependencies/UD_Low_Saxon-LSDC
- https://github.com/UniversalDependencies/UD_English-GUM
- https://github.com/UniversalDependencies/UD_English-EWT
- https://bar.wikipedia.org/w/index.php?title=Minga&oldid=841494#Mingara_Beziak
- https://universaldependencies.org/u/overview/typos.html
- https://universaldependencies.org/de/index.html
- https://universaldependencies.org/nds/index.html
- https://universaldependencies.org/gsw/index.html
- https://de.wikipedia.org/wiki/Adverbialsatz
- https://universaldependencies.org/u/dep/ccomp.html#reported-speech
- https://www.ims.uni-stuttgart.de/documents/ressourcen/lexika/tagsets/stts-1999.pdf#page=57
- https://universaldependencies.org/workgroups/comparatives.html
- https://github.com/UniversalDependencies/docs/issues/767
- https://universaldependencies.org/v2/copula.html#guidelines-for-udv2
- https://universaldependencies.org/nds/#core-arguments-oblique-arguments-and-adjuncts
- https://universaldependencies.org/gsw/#core-arguments-oblique-arguments-and-adjuncts
- https://universaldependencies.org/de/#tags
- https://www.ims.uni-stuttgart.de/documents/ressourcen/lexika/tagsets/stts-1999.pdf#page=25
- https://universaldependencies.org/u/dep/nsubj-outer.html
- https://github.com/UniversalDependencies/docs/issues/223