RU2014111969A - Визуализация текста на естественном языке - Google Patents
Визуализация текста на естественном языке Download PDFInfo
- Publication number
- RU2014111969A RU2014111969A RU2014111969/08A RU2014111969A RU2014111969A RU 2014111969 A RU2014111969 A RU 2014111969A RU 2014111969/08 A RU2014111969/08 A RU 2014111969/08A RU 2014111969 A RU2014111969 A RU 2014111969A RU 2014111969 A RU2014111969 A RU 2014111969A
- Authority
- RU
- Russia
- Prior art keywords
- text
- actions
- objects
- service
- scene
- Prior art date
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T13/00—Animation
- G06T13/80—2D [Two Dimensional] animation, e.g. using sprites
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F40/00—Handling natural language data
- G06F40/30—Semantic analysis
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F40/00—Handling natural language data
- G06F40/40—Processing or translation of natural language
-
- G06T11/26—
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Health & Medical Sciences (AREA)
- Artificial Intelligence (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Computational Linguistics (AREA)
- General Health & Medical Sciences (AREA)
- General Engineering & Computer Science (AREA)
- Processing Or Creating Images (AREA)
Abstract
1. Способ визуализации текста, содержащий этапы, на которых:получают текст на естественном языке;проводят автоматический семантический разбор текста с целью получения структурированной семантической сети;обрабатывают результаты семантического разбора, получая объекты, субъекты, действия и последовательности действий;выбирают подходящую упомянутым объектам, субъектам и действиям локацию (экстерьер или интерьер);задают первоначальное размещение объектов;формируют первоначальную трехмерную сцену, используя упомянутые локацию, объекты, субъекты, действия и первоначальное размещение;определяют и последовательно записывают изменения сцены (перемещения, анимации, изменение свойств объектов) в соответствии с полученной в результате семантического разбора последовательностью действий, описанной в исходном тексте;формируют видеоролик или набор картинок, которые воспроизводят упомянутое изменение сцены в сформированной ранее трехмерной сцене;визуализируют упомянутый видеоролик или набор картинок.2. Способ по п. 1, отличающийся тем, что при формирования видеоролика добавляют синхронное аудиосопровождение.3. Способ по п. 1, отличающийся тем, что семантический разбор текста включает:разбиение текста на предложения;нумерацию слов в рамках предложения;выделение объектов, субъектов, действий и свойств;классификацию всех слов с помощью дерева понятий, позволяющего сводить синонимы к общим понятиям;однозначную идентификацию объектов в рамках всего текста.4. Способ по п. 1 отличающийся тем, что предоставляют пользователю возможность ручного редактирования полученной трехмерной сцены.5. Способ по п. 1 отличающи�
Claims (15)
1. Способ визуализации текста, содержащий этапы, на которых:
получают текст на естественном языке;
проводят автоматический семантический разбор текста с целью получения структурированной семантической сети;
обрабатывают результаты семантического разбора, получая объекты, субъекты, действия и последовательности действий;
выбирают подходящую упомянутым объектам, субъектам и действиям локацию (экстерьер или интерьер);
задают первоначальное размещение объектов;
формируют первоначальную трехмерную сцену, используя упомянутые локацию, объекты, субъекты, действия и первоначальное размещение;
определяют и последовательно записывают изменения сцены (перемещения, анимации, изменение свойств объектов) в соответствии с полученной в результате семантического разбора последовательностью действий, описанной в исходном тексте;
формируют видеоролик или набор картинок, которые воспроизводят упомянутое изменение сцены в сформированной ранее трехмерной сцене;
визуализируют упомянутый видеоролик или набор картинок.
2. Способ по п. 1, отличающийся тем, что при формирования видеоролика добавляют синхронное аудиосопровождение.
3. Способ по п. 1, отличающийся тем, что семантический разбор текста включает:
разбиение текста на предложения;
нумерацию слов в рамках предложения;
выделение объектов, субъектов, действий и свойств;
классификацию всех слов с помощью дерева понятий, позволяющего сводить синонимы к общим понятиям;
однозначную идентификацию объектов в рамках всего текста.
4. Способ по п. 1 отличающийся тем, что предоставляют пользователю возможность ручного редактирования полученной трехмерной сцены.
5. Способ по п. 1 отличающийся тем, что предоставляют пользователю возможность ручного редактирования результатов автоматического семантического разбора.
6. Способ по п. 1 отличающийся тем, что предоставляют пользователю возможность проведения семантического разбора вручную.
7. Система визуализации текста, содержащая:
веб-сервис, обрабатывающий запросы пользователя на визуализацию текста на естественном языке;
сервис семантического разбора, получающий структурированную семантическую сеть из текста;
базу данных;
сервис компоновки сцен, предназначенный для обработки результатов семантического разбора, получая объекты, субъекты, действия и последовательности действий;
менеджер выбора локации, выбирающий подходящую упомянутым объектам, субъектам и действиям локацию (экстерьер или интерьер);
менеджер размещения, задающий первоначальное размещение объектов;
менеджер действий, задающий последовательности действий; причем
сервис компоновки сцен, предназначен также для формирования первоначальной трехмерной сцены, используя упомянутые локацию, объекты, субъекты, действия и первоначальное размещение;
при этом
система также содержит:
контролеры объектов, которые определяют и последовательно записывают изменения сцены (перемещения, анимации, изменение свойств объектов) в соответствии с полученной в результате семантического разбора последовательностью действий, описанной в исходном тексте;
сервис рендеринга, обеспечивающий формирование видеоролика или набора картинок, которые воспроизводят упомянутое изменение сцены в сформированной ранее трехмерной сцене;
устройство пользователя, визуализирующее готовый видеоролик или набор картинок.
8. Система по п. 7 отличающаяся тем, что веб-сервис выполнен с возможностью учитывать статистику запросов, накапливать данные по частотным, временным и ресурсным показателям, вычисляемым в процессе перехода от текста к анимации, а также вести учет своей работы в виде лога.
9. Система по п. 7 отличающаяся тем, что веб-сервис выполнен с возможностью аутентификации пользователя.
10. Система по п. 7 отличающаяся тем, что содержит несколько веб-сервисов расположенных как на одном, так и на нескольких машинах.
11. Система по п. 7 отличающаяся тем, что дополнительно содержит сервис генерации звука, который генерирует диалоги, готовит наборы звуков, раздающихся в процессе анимации сцены и фоновый трек.
12. Система по п. 11 отличающаяся тем, что сервис генерации звука объединен с сервисом рендеринга и сервисом компоновщика сцен.
13. Система по п. 11 отличающаяся тем, что дополнительно содержит компонент-балансировщик, который оценивает существующие ресурсы компонентов системы и загружает их, распределяя нагрузку.
14. Система по п. 13 отличающаяся тем, что балансировщик организует последовательную обработку данных сервисом семантического разбора, сервисом компоновщика сцен, сервисом генерации звука, сервисом рендеринга.
15. Система по п. 7 отличающаяся тем, что сервис рендеринга выполнен с возможностью добавления звука и сжатия полученного озвученного ролика.
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| PCT/RU2011/000666 WO2013032354A1 (ru) | 2011-08-31 | 2011-08-31 | Визуализация текста на естественном языке |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| RU2014111969A true RU2014111969A (ru) | 2015-10-10 |
| RU2580022C2 RU2580022C2 (ru) | 2016-04-10 |
Family
ID=47756613
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| RU2014111969/08A RU2580022C2 (ru) | 2011-08-31 | 2011-08-31 | Визуализация текста на естественном языке |
Country Status (3)
| Country | Link |
|---|---|
| US (1) | US9129448B2 (ru) |
| RU (1) | RU2580022C2 (ru) |
| WO (1) | WO2013032354A1 (ru) |
Families Citing this family (32)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2013085409A1 (ru) * | 2011-12-08 | 2013-06-13 | Общество С Ограниченной Ответственностью Базелевс-Инновации | Способ анимации sms-сообщений |
| US10635669B1 (en) | 2014-01-27 | 2020-04-28 | Microstrategy Incorporated | Data engine integration and data refinement |
| US11386085B2 (en) | 2014-01-27 | 2022-07-12 | Microstrategy Incorporated | Deriving metrics from queries |
| US11921715B2 (en) | 2014-01-27 | 2024-03-05 | Microstrategy Incorporated | Search integration |
| US10255320B1 (en) | 2014-01-27 | 2019-04-09 | Microstrategy Incorporated | Search integration |
| WO2016123205A1 (en) * | 2015-01-28 | 2016-08-04 | Hahn Bruce C | Deep reading machine and method |
| JP6663444B2 (ja) * | 2015-10-29 | 2020-03-11 | 株式会社日立製作所 | 視覚情報と聴覚情報の同期方法および情報処理装置 |
| US10642896B2 (en) | 2016-02-05 | 2020-05-05 | Sas Institute Inc. | Handling of data sets during execution of task routines of multiple languages |
| US10650046B2 (en) | 2016-02-05 | 2020-05-12 | Sas Institute Inc. | Many task computing with distributed file system |
| US10795935B2 (en) | 2016-02-05 | 2020-10-06 | Sas Institute Inc. | Automated generation of job flow definitions |
| US10650045B2 (en) | 2016-02-05 | 2020-05-12 | Sas Institute Inc. | Staged training of neural networks for improved time series prediction performance |
| US10346476B2 (en) | 2016-02-05 | 2019-07-09 | Sas Institute Inc. | Sketch entry and interpretation of graphical user interface design |
| US10140259B2 (en) | 2016-04-28 | 2018-11-27 | Wipro Limited | Method and system for dynamically generating multimedia content file |
| US10909313B2 (en) | 2016-06-22 | 2021-02-02 | Sas Institute Inc. | Personalized summary generation of data visualizations |
| US10586399B2 (en) * | 2017-04-12 | 2020-03-10 | Disney Enterprises, Inc. | Virtual reality experience scriptwriting |
| US10679002B2 (en) * | 2017-04-13 | 2020-06-09 | International Business Machines Corporation | Text analysis of narrative documents |
| US10846318B1 (en) | 2017-04-18 | 2020-11-24 | Microstrategy Incorporated | Natural language visualizations |
| CN110083818A (zh) * | 2018-01-26 | 2019-08-02 | 尹岩 | 一种基于具身认知的根据自然语言生成动画的系统 |
| US11308312B2 (en) | 2018-02-15 | 2022-04-19 | DMAI, Inc. | System and method for reconstructing unoccupied 3D space |
| US11455986B2 (en) | 2018-02-15 | 2022-09-27 | DMAI, Inc. | System and method for conversational agent via adaptive caching of dialogue tree |
| WO2019161249A1 (en) * | 2018-02-15 | 2019-08-22 | DMAI, Inc. | System and method for visual scene construction based on user communication |
| US10607391B2 (en) | 2018-07-04 | 2020-03-31 | International Business Machines Corporation | Automated virtual artifact generation through natural language processing |
| US11200283B2 (en) | 2018-10-08 | 2021-12-14 | International Business Machines Corporation | Cohesive visualized instruction representation |
| US10853398B2 (en) | 2018-11-13 | 2020-12-01 | Adobe Inc. | Generating three-dimensional digital content from natural language requests |
| US11195050B2 (en) | 2019-02-05 | 2021-12-07 | Microstrategy Incorporated | Machine learning to generate and evaluate visualizations |
| CN111047672A (zh) * | 2019-11-26 | 2020-04-21 | 湖南龙诺数字科技有限公司 | 一种数字动漫生成系统及方法 |
| US11614970B2 (en) | 2019-12-06 | 2023-03-28 | Microstrategy Incorporated | High-throughput parallel data transmission |
| US11567965B2 (en) | 2020-01-23 | 2023-01-31 | Microstrategy Incorporated | Enhanced preparation and integration of data sets |
| US20210375023A1 (en) * | 2020-06-01 | 2021-12-02 | Nvidia Corporation | Content animation using one or more neural networks |
| CN113269855A (zh) * | 2021-06-08 | 2021-08-17 | 哈尔滨森美朴科技发展有限责任公司 | 一种文字语义转场景动画的方法、设备及存储介质 |
| CN115082292B (zh) * | 2022-06-06 | 2024-07-19 | 华南理工大学 | 基于全局属性编辑方向的人脸多属性编辑方法 |
| CN116193098B (zh) * | 2023-04-23 | 2023-07-21 | 子亥科技(成都)有限公司 | 一种三维视频生成方法、装置、设备及存储介质 |
Family Cites Families (18)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20040125124A1 (en) * | 2000-07-24 | 2004-07-01 | Hyeokman Kim | Techniques for constructing and browsing a hierarchical video structure |
| KR20020022504A (ko) * | 2000-09-20 | 2002-03-27 | 박종만 | 3차원 캐릭터의 동작, 얼굴 표정, 립싱크 및 립싱크된음성 합성을 지원하는 3차원 동영상 저작 도구의 제작시스템 및 방법 |
| US7016828B1 (en) * | 2000-10-23 | 2006-03-21 | At&T Corp. | Text-to-scene conversion |
| US7664313B1 (en) * | 2000-10-23 | 2010-02-16 | At&T Intellectual Property Ii, L.P. | Text-to scene conversion |
| KR100516504B1 (ko) * | 2003-09-30 | 2005-09-26 | (주)잉카엔트웍스 | 네트워크를 통하여 개인 휴대 단말기와 데이터 동기화를수행하기 위한 방법 및 그 시스템 |
| US7613719B2 (en) * | 2004-03-18 | 2009-11-03 | Microsoft Corporation | Rendering tables with natural language commands |
| US7599838B2 (en) * | 2004-09-01 | 2009-10-06 | Sap Aktiengesellschaft | Speech animation with behavioral contexts for application scenarios |
| US7512537B2 (en) * | 2005-03-22 | 2009-03-31 | Microsoft Corporation | NLP tool to dynamically create movies/animated scenes |
| US20090058860A1 (en) * | 2005-04-04 | 2009-03-05 | Mor (F) Dynamics Pty Ltd. | Method for Transforming Language Into a Visual Form |
| US7634727B2 (en) * | 2005-04-26 | 2009-12-15 | Microsoft Corporation | System for abstracting audio-video codecs |
| CN100514368C (zh) * | 2005-06-10 | 2009-07-15 | 松下电器产业株式会社 | 脚本生成装置以及脚本生成方法 |
| US20070146360A1 (en) * | 2005-12-18 | 2007-06-28 | Powerproduction Software | System And Method For Generating 3D Scenes |
| KR20080047847A (ko) * | 2006-11-27 | 2008-05-30 | 삼성전자주식회사 | 동적 영상물 재생 장치 및 방법 |
| US7756536B2 (en) * | 2007-01-31 | 2010-07-13 | Sony Ericsson Mobile Communications Ab | Device and method for providing and displaying animated SMS messages |
| WO2009085063A1 (en) * | 2007-12-21 | 2009-07-09 | Studio Gpu, Inc. | Method and system for fast rendering of a three dimensional scene |
| US20110040555A1 (en) * | 2009-07-21 | 2011-02-17 | Wegner Peter Juergen | System and method for creating and playing timed, artistic multimedia representations of typed, spoken, or loaded narratives, theatrical scripts, dialogues, lyrics, or other linguistic texts |
| US8601093B2 (en) * | 2010-02-10 | 2013-12-03 | DSNR Media Group Ltd. | Method and system for generation, adjustment and utilization of web pages selection rules |
| US20120072280A1 (en) * | 2010-09-20 | 2012-03-22 | Lin Jennifer W | Tracking Conversions |
-
2011
- 2011-08-31 WO PCT/RU2011/000666 patent/WO2013032354A1/ru not_active Ceased
- 2011-08-31 RU RU2014111969/08A patent/RU2580022C2/ru not_active IP Right Cessation
- 2011-08-31 US US13/497,613 patent/US9129448B2/en active Active
Also Published As
| Publication number | Publication date |
|---|---|
| WO2013032354A1 (ru) | 2013-03-07 |
| US9129448B2 (en) | 2015-09-08 |
| US20140160134A1 (en) | 2014-06-12 |
| RU2580022C2 (ru) | 2016-04-10 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| RU2014111969A (ru) | Визуализация текста на естественном языке | |
| US11971927B1 (en) | System and method for contextual data selection from electronic media content | |
| EP3824461B1 (en) | Method and system for creating object-based audio content | |
| US8737770B2 (en) | Method and apparatus for automatic mash-up generation | |
| US11574007B2 (en) | Device, system and method for generating an accompaniment of input music data | |
| US9075760B2 (en) | Narration settings distribution for content customization | |
| JP2015517684A (ja) | コンテンツのカスタマイズ | |
| US20140258858A1 (en) | Content customization | |
| JP2015212928A (ja) | 音声広告を挿入するための方法、装置、デバイス及びシステム | |
| JP6159989B2 (ja) | シナリオ生成システム、シナリオ生成方法およびシナリオ生成プログラム | |
| CN104731873A (zh) | 一种评价信息生成方法和装置 | |
| CN104462226A (zh) | 一种基于云技术的网络演唱平台的构建方法 | |
| CN110691271A (zh) | 一种新闻视频生成方法、系统、装置和存储介质 | |
| US20240371409A1 (en) | Method for generating subtitle, electronic device, and computer-readable storage medium | |
| CN106611603A (zh) | 一种音频处理方法及装置 | |
| CN112995756A (zh) | 短视频的生成方法及装置、短视频生成系统 | |
| CN104731874A (zh) | 一种评价信息生成方法和装置 | |
| US20210295820A1 (en) | Method and system for creating object-based audio content | |
| CN118762712A (zh) | 剧场音频作品的生成方法、装置、设备、介质和程序产品 | |
| JP2014010275A (ja) | 情報処理装置、情報処理方法及びプログラム | |
| CN120932650A (zh) | 音频处理方法、装置、存储介质及电子装置 | |
| CN110381336A (zh) | 基于5.1声道的视频片段情感判定方法、装置和计算机设备 | |
| KR20250048809A (ko) | 동기 통신을 위한 오디오 합성 | |
| Rucăreanu et al. | The Impact of AI in the Field of Sound for Picture. A Historical, Practical, and Ethical Consideration | |
| CN115484503B (zh) | 弹幕生成方法及装置、电子设备和存储介质 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| HE9A | Changing address for correspondence with an applicant | ||
| PD4A | Correction of name of patent owner | ||
| PC41 | Official registration of the transfer of exclusive right |
Effective date: 20190516 |
|
| MM4A | The patent is invalid due to non-payment of fees |
Effective date: 20200901 |