映像制作パイプラインで使用されるツールやミドルウェア

Tools and Middleware used in film production pipeline

(株式会社ポリゴン・ピクチュアズ / スタジオフォンズ)

(Polygon Pictures Inc. / Studio Phones)

今後の会合の状況を見つつ加筆修正を含めブラッシュアップを進めていく予定です。

■概要

■Overview

インフラ関連の技術は進展が早く、特にクラウドサービスの発展で、かなりの情報量がウェブサイト上に出ています。
代表的なものとしてはNETFLIXのテックブログがあります。(https://medium.com/netflix-techblog)
NETFLIXのテックブログは参考にしつつ、日々自社の仕組みの改善を重ねていますが、明らかな基礎体力の違いを感じるとともに、レベルの差を感じながらも、変革しないといけない意識を持ち続けています。

下記に、参考にしている資料やリンクなどを会合開催までに継続して掲載して行きたいと思います。ご参考にして頂き、会合にご参加頂けたらと思います。

under construction...

■リンク集

■Links

Python

Python

・Python
https://www.python.org

・PyQt
https://riverbankcomputing.com/software/pyqt
https://sourceforge.net/projects/pyqt

・PySide / PySide2
https://wiki.qt.io/PySide
https://wiki.qt.io/PySide2
https://github.com/pyside

・Luigi
https://github.com/spotify/luigi

・SQLite
https://www.sqlite.org

Python フレームワーク

Python Framework

・Tornado
https://github.com/tornadoweb/tornado

・Flask
https://github.com/pallets/flask

・Django
https://www.djangoproject.com

・Pylons
https://pylonsproject.org

・Bottle
https://bottlepy.org

・Web2py
http://www.web2py.com

・CherryPy
http://cherrypy.org

データフォーマット

Data format

・Alembic
http://opensource.imageworks.com/?p=alembic
http://www.alembic.io
https://github.com/alembic

・OpenEXR
http://www.openexr.com
https://github.com/openexr

・OpenVDB
http://www.openvdb.org
https://github.com/dreamworksanimation/openvdb

・Ptex
http://ptex.us
https://github.com/wdas/ptex

・OpenSubdiv
http://graphics.pixar.com/opensubdiv
https://github.com/PixarAnimationStudios/OpenSubdiv

・OpenImageIO
http://www.openimageio.org
https://github.com/OpenImageIO

・OpenColorIO
http://opensource.imageworks.com/?p=opencolorio
http://opencolorio.org
https://github.com/imageworks/OpenColorIO

・USD
http://graphics.pixar.com/usd
https://github.com/PixarAnimationStudios/USD

・MaterialX
http://www.materialx.org
https://github.com/materialx

・OSL
http://opensource.imageworks.com/?p=osl
https://github.com/imageworks/OpenShadingLanguage

データモデル

Data model

・h5serv
https://github.com/HDFGroup/h5serv

・HDF5
https://support.hdfgroup.org/HDF5/

・Google Draco
https://github.com/google/draco

DCCツール

DCC Tools

・Gaffer
https://github.com/GafferHQ/gaffer

・pyblish
http://pyblish.com

・NATRON
https://natron.fr
https://github.com/MrKepzie/Natron

Web / Database システム

Web / Database system

・Apache
https://httpd.apache.org

・nginx
https://nginx.org

・uWSGI
https://github.com/unbit/uwsgi
https://uwsgi-docs.readthedocs.io

・nodejs
https://nodejs.org

・MySQL
https://www.mysql.com

・MongoDB
https://www.mongodb.com

・Elasticsearch
https://www.elastic.co
https://github.com/elastic/elasticsearch

・TPC (TPC-C/TPC-E)
http://www.tpc.org
https://github.com/Percona-Lab/tpcc-mysql
https://github.com/Percona-Lab/tpce-mysql

・JDBC-Runner
http://hp.vector.co.jp/authors/VA052413/jdbcrunner/

フロントシステム

Front-end system

・Jupyter
http://jupyter.org

・Apache Zeppelin
https://zeppelin.apache.org

・Cloud Commander
http://cloudcmd.io

ストレージ / ファイルシステム

Storage / Filesystem

・Apache Hadoop
http://hadoop.apache.org

・GlusterFS
https://www.gluster.org

・Lustre
http://lustre.org

・ceph
http://ceph.com

メッセージング

Messaging

・Apache Kafka
https://kafka.apache.org

・ZeroMQ
http://zeromq.org

・RabbitMQ
https://www.rabbitmq.com

デプロイ / インテグレーション

Deployment / Integration

・Jenkins
https://jenkins-ci.org

・Travis
https://travis-ci.org

・Ansible
https://www.ansible.com

・Rez
https://github.com/nerdvegas/rez

・SCons
http://scons.org

・byteMyCode
http://bytemycode.com

・Buildout
https://github.com/buildout/buildout

・Coverity
https://www.synopsys.com/ja-jp/software-integrity/security-testing/static-analysis-sast.html

負荷テスト

Stress test

・Apache JMeter
http://jmeter.apache.org

・Gatling
https://gatling.io

・Locust
https://locust.io

・Tsung
http://tsung.erlang-projects.org

仮想化 / コンテナ

Virtualization / Container

・VMWare
https://www.vmware.com

・VirtualBox
https://www.virtualbox.org

・Docker
https://www.docker.com

・Kubernetes
https://kubernetes.io

・LXC
https://linuxcontainers.org

・Apache Mesos
http://mesos.apache.org

・Apache Spark
https://spark.apache.org

・Rancher
https://rancher.com

・Prometheus
https://prometheus.io

・Panamax
http://panamax.io

ディスパッチャー

Dispatcher

・Deadline
https://deadline.thinkboxsoftware.com

・Qube!
https://www.pipelinefx.com

・Tractor
https://renderman.pixar.com/product/tractor

・Torque
https://github.com/adaptivecomputing/torque

・afanasy
http://cgru.info/afanasy/afanasy

ドキュメント

Documents

・Sphinx
http://www.sphinx-doc.org

・Doxygen
http://www.stack.nl/~dimitri/doxygen/

統合開発環境 / ライブラリ / エディタ

IDE / Library / Editor

・Microsoft Visual Studio
https://www.visualstudio.com

・Eclips
https://www.eclipse.org

・Code::Blocks
http://www.codeblocks.org

・CodeLite
https://codelite.org

・PyCharm
https://www.jetbrains.com/pycharm

・Atom
https://atom.io

・Visual Studio Code
https://code.visualstudio.com

・boost
http://www.boost.org

・Intel TBB
https://www.threadingbuildingblocks.org
https://software.intel.com/en-us/intel-tbb

ユーザーインターフェイス

User Interface

・Qt
https://www.qt.io/

・imgui
https://github.com/ocornut/imgui

チケットシステム

Ticket system

・Redmine
https://www.redmine.org

・osTicket
http://osticket.com

その他

Others

・VFX Reference Platform
http://www.vfxplatform.com

・ACES
http://www.acescentral.com

技術的な参考サイト

Technical reference site

・NETFLIX Tech Blog
https://medium.com/netflix-techblog

・AWS SlideShare
https://www.slideshare.net/AmazonWebServices/

・AWS Blog
https://aws.amazon.com/blogs/

・Google Cloud Platform Blog
https://cloudplatform.googleblog.com

・ACM Digital Library
https://dl.acm.org

・arXiv
https://arxiv.org

・Ke-Sen Huang's Home Page
http://kesen.realtimerendering.com

・AWS DevOps
https://aws.amazon.com/jp/devops/what-is-devops/

※会合までに資料の内容を更新する可能性があります。

※There is a possibility to update the contents of materials by the meeting.