概要

GitHubのトレンドをまとめていきます。

12月は途中から仕事で時間がなくて死んでいました、1月はボチボチやっていきます

31日

jira_clone

jiraのクローン。再現度がクソ高い。ちょこちょこっと認証系を組み込めばメチャクチャ有用そう

https://jira.ivorreic.com/project

spiderfoot

情報を収集するツール。OSINTというらしい。サイバー攻撃の足掛かりとして使われる。

この記事で他にもツールがあるみたいだがOSSになっているのはspiderfootだけらしい

tidytuesday

tidytuesdayという火曜日配信のPodcast。

毎週デ何かしらのデータが共有される。 1月28日にはアメリカのサンフランシスコにある樹木のデータが共有されている。その先週はSpotifyの楽曲データ

これらのデータに触れる中で、R言語の学習者が現実世界でデータをうまく扱えるようにするのが目的らしい。

https://www.tidytuesday.com/

その他

30日

その他

29日

その他

28日

XSpotify

windowsで利用できるSpotifyのクライアントライブラリ。Macなら使ってみたかった

hackerEnv

ポートスキャン。ただのポートスキャンではなく、同時に脆弱性を見つけるらしい。

ポートスキャンでさえ場合によっては不正アクセスになるのにこんなん人のサーバーにやったら間違いなく不正アクセスになるやろなぁ、デモ動画は以下の通り。

中はただのシェルスクリプトで、すさまじいコードになってる

################    SSH       ###################################################################
				if [ "$ostype" = "Linux" ] || [ "$ostype" = "linux" ]
				then
					if [ "$name" = "ssh" ] && [ "${product}" = "OpenSSH" ] && [ "$version" = "2.9p2" ]
					then
						echo "SSH"
					elif [ "$name" = "ssh" ] && [ "${product}" = "OpenSSH" ] && [ "$version" = "3.9p2" ]
					then
						echo "SSH"
					elif [ "$name" = "ssh" ] && [ "${product}" = "OpenSSH" ] && [ "$version" = "4.7p1 Debian 8ubuntu1" ]
					then
						OpenSSH4_7p1
					fi
				elif [ "$ostype" = "Windows" ] || [ "$ostype" = "windows" ]
				then
					if [ "$name" = "ssh" ] && [ "${product}" = "ssh" ] && [ "$version" = "ssh" ]
					then
						echo "SSH"
					elif [ "$name" = "ssh" ] && [ "${product}" = "ssh" ] && [ "$version" = "ssh" ]
					then
						echo "SSH"
					fi
				elif [ "$name" = "ssh" ]
				then
					sshBruteForce
				fi

特にApache RedHatに関してはスクリプトが長い。https://github.com/abdulr7mann/hackerEnv/blob/master/hackerEnv#L1068

v

言語「V」。特徴

• GCがない
• C言語並にパフォーマンスが良い
• ビルドがめちゃくちゃ早い
• webフレームワーク・ORMが言語に組み込まれている
• 呼び方は"V"。

Please note that the name of the language is “V”, not “Vlang” or “V-Lang” etc.

とにかくシンプル・軽い・早いを売りにしてる

NewPipe

Android専用のYoutubeクライアントライブラリ。

動画のダウンロードができるんやがこれはアウトではないのか？

https://newpipe.schabi.org/#downloads

その他

27日

その他

26日

その他

25日

playwright

puppeteerと同じチームが作った、ブラウザの自動化ドライバ。シンプルなAPIで統一してChromium, WebKit, Firefox を操作できる

puppeteerとAPIが同じものが多く（page.screenshotやpage.evaluate）、puppeteerに慣れている開発者は触りやすいと思われる

まだ0.xなので仕事で使用するには注意が必要

backendlore

バックエンドを作る時の考え方を公開しているREADME。

nginx + Node.js + Redis + S3が主要な構成。

以下、一通り読んで気になった点。

• パフォーマンスが結構良いらしく、筆者は1日1億リクエストまで耐えうるのを観測したことがあるらしい
• RedisでもACID特性のACIは保証される。D(永続性)に関しては、定期的にs3にバックアップしているためカバーできている

envelope

こういうの好き

大真面目にサポートデバイス書いてるのも面白い

Currently supports Pixel 3a

その他

24日

その他

23日

city-roads

overpass APIとVue.jsを利用した、世界中の都市の道路を描画するwebアプリケーション

面白いのがプロトコルバッファで膨大な都市データをキャッシュしていること。こちらのディレクトリに処理が書かれている。

pbfというプロトコルバッファをエンコード/デコードするnpmライブラリを使っていて、JSON.parse/JSON.stringifyや他のプロトコルバッファのエンコード/デコードよりも早いらしい

https://github.com/mapbox/pbf

rasa

オープンソースのAIチャットフレームワーク?

コンテキストからユーザーの求める物を決定しアクションを決め、外部にアクションを送信するところまでサポートしている。

NLU: determines what the user wants and captures key contextual information

Core: selects the next best response or action based on conversation history

Channels and integrations: connect assistant to users and backend systems

こんなチャットができるらしい↓

https://rasa.com/docs/rasa/user-guide/rasa-tutorial/#rasa-tutorial

その他

22日

kubelabs

kubernetesをハンズオンで体験できるサービス。

何気なくみてたらWeaveScope というものを利用してクラスタを可視化していますね。こんな感じで表示されるらしい↓

https://collabnix.github.io/kubelabs/weave.html

WeaveScopeいれてみよ

the-book-of-secret-knowledge

おれの集めた最強のツール（）的な感じ。こういうリポジトリは結構みたので若干飽きた

tensortrade

株などのトレードに適した強化学習のフレームワーク。tensoflowから名前をとってる感じisある

まだアルファ版。discordで開発のやりとりをやっているらしく、そういう開発体制は面白そうだと感じる

go-ipfs

P2Pのファイル共有システムIPFSをgoで実装したリポジトリ。そもそもIPFSを聞いたことがなかった。

What is IPFS?

IPFS is a global, versioned, peer-to-peer filesystem. It combines good ideas from previous systems such Git, BitTorrent, Kademlia, SFS, and the Web. It is like a single bittorrent swarm, exchanging git objects. IPFS provides an interface as simple as the HTTP web, but with permanence built in. You can also mount the world at /ipfs. https://github.com/ipfs/go-ipfs#what-is-ipfs

GitとかBitTorrentとかのいいとこどりをしたファイル共有システムらしい。

IPFSの公式サイトいわく、現在のwebの仕組みと比較して以下が挙げられていた

• 非中央集権
• 効率的
• バージョン管理しやすい
• 多様な回復力を持つ（翻訳ママ）

https://ipfs.io/

その他

21日

その他

20日

onedev

DevOpsに特化したプロジェクト管理ツール。k8sの設定ファイルをGUIで書くことができたり、カンバン方式でissueを管理できたりなど。

https://github.com/theonedev/onedev#auto-refreshing-issue-boards

結構見た目と提供機能がGitLabと似ているところがある。が、まだ安定して使えるかどうかは怪しい。

actix-web

Techempowerのベンチマークで1位をとっていたRustのwebフレームワークactix-webが急に消滅したらしい。rust-jpのslackで聞いて驚愕しました。スター数もリセットされてとても悲しい。

数日中に方針を決めるようだが、最悪の場合個人のリポジトリに移動されるみたいなのでそうならないことを願いたい。「支援をしたい」や「今までありがとう」のようなissueがいろいろあがっている

neko

Docker内でブラウザを立ち上げて操作できるライブラリ。内部的にはwebRTC経由で操作している。

もともと Rabb.itというライブラリでも可能だったようだが、作者いわくrabb.itが利用できなくなっていたために作ったとのこと。

I made this because rabb.it went under and my internet can’t handle streaming and discord keeps crashing. https://github.com/nurdism/neko#neko

これの利用例としては、みんなで同じアニメをみたりとかできるわけですね。わりと面白そう。デプロイしてみようかな

推奨スペックはちょっと高めなので注意。 https://github.com/nurdism/neko#super-easy-mode-setup

the-art-of-command-line

様々なコマンドラインのtipsが載っているリポジトリ。

日本語版もある

適当に勉強になったものを選びました。まだまだ学ぶべきことはいっぱいありますねー

• 途中までコマンドを入力したけれど心変わりした時は、alt-#を打つと行頭に#が挿入され、コメントとして入力される(ctrl-a、#、enterでも同じ)。これは後でコマンド履歴から検索できる。
• Bashスクリプトでは、set -xでデバッグ出力を出せる(set -vは、実行されるコマンドや変数名やコメントなどをそのまま出力する)。特別な理由がない限り厳格モード(strict mode)を使い、set -eでエラー時(0以外の終了コード時)に強制終了するように。set -uによって未定義の変数の利用を検知、パイプのエラーも厳格に扱うためにset -o pipefailも使おう(これはちょっと微妙かも)。より複雑なスクリプトなら、EXITまたはERRシグナルに対してtrapも使おう。使う場面としては以下の場合のようにエラーを検知してメッセージを出力するとき:

その他

19日

その他

18日

JetBrainsMono

JetBrainsがつくったフォント。ただし日本語には対応していない。

日本語ってフォント作る上では文字数が多すぎるのかね 🤔

getflutter

Flutterで利用可能なUIライブラリ。

Buttonの種類だけでも、fab型やマテリアルデザインだったりとかいろいろあって面白い

https://docs.getflutter.dev/gf-button

その他

17日

その他

16日

その他

15日

nnjhtrkn

ファミコンのゲームのソースコード。

某プログラマが某有名ファミコンゲームのソースをgitに公開したの巻

で紹介されてトレンドになったらしい

ゲームタイトルはわからないがちくわと鉄アレイが出てくるゲームらしい。

tokenizers

研究用および本番環境ように最適化された「トークナイザ」。

トークナイザって自然言語処理で使用する分かち書きのモデルとかのことですかね？

Kotlin-Pokedex

Kotlinで作られたポケモンに関するAndroidアプリケーション。

ロードマップを見る限りまだ半ばみたい

Deep Java Library

JavaでできたDeepLearningのライブラリ

その他

14日

その他

13日

その他

12日

scalene

a high-performance CPU and memory profiler for Python

とのこと。こんな感じでソースコードのどこでCPU/メモリがどのような状態になっているかを可視化してくれているみたい。

Scalene prints annotated source code for the program being profiled and any modules it uses in the same directory or subdirectories. Here is a snippet from pystone.py, just using CPU profiling:

benchmarks/pystone.py: % of CPU time =  98.78% out of   3.47s.
         | CPU %    | CPU %    | 
  Line   | (Python) | (C)      | [benchmarks/pystone.py]
--------------------------------------------------------------------------------
  [... lines omitted ...]
   137   |   0.87%  |   0.13%  | def Proc1(PtrParIn):
   138   |   1.46%  |   0.36%  |     PtrParIn.PtrComp = NextRecord = PtrGlb.copy()
   139   |          |          |     PtrParIn.IntComp = 5
   140   |   0.87%  |   0.04%  |     NextRecord.IntComp = PtrParIn.IntComp
   141   |   1.46%  |   0.30%  |     NextRecord.PtrComp = PtrParIn.PtrComp
   142   |   2.33%  |   0.26%  |     NextRecord.PtrComp = Proc3(NextRecord.PtrComp)
   143   |   1.46%  |  -0.00%  |     if NextRecord.Discr == Ident1:
   144   |   0.29%  |   0.04%  |         NextRecord.IntComp = 6
   145   |   1.75%  |   0.40%  |         NextRecord.EnumComp = Proc6(PtrParIn.EnumComp)
   146   |   1.75%  |   0.29%  |         NextRecord.PtrComp = PtrGlb.PtrComp
   147   |   0.58%  |   0.12%  |         NextRecord.IntComp = Proc7(NextRecord.IntComp, 10)
   148   |          |          |     else:
   149   |          |          |         PtrParIn = NextRecord.copy()
   150   |   0.87%  |   0.15%  |     NextRecord.PtrComp = None
   151   |          |          |     return PtrParIn

And here is an example with memory profiling enabled, running the Julia benchmark.

benchmarks/julia1_nopil.py: % of CPU time =  99.22% out of  12.06s.
         | CPU %    | CPU %    | Memory (MB) |
 Line   | (Python) | (C)      |             | [benchmarks/julia1_nopil.py]
--------------------------------------------------------------------------------
     1   |          |          |             | # Pasted from Chapter 2, High Performance Python - O'Reilly Media;
     2   |          |          |             | # minor modifications for Python 3 by Emery Berger
     3   |          |          |             | 
     4   |          |          |             | """Julia set generator without optional PIL-based image drawing"""
     5   |          |          |             | import time
     6   |          |          |             | # area of complex space to investigate
     7   |          |          |             | x1, x2, y1, y2 = -1.8, 1.8, -1.8, 1.8
     8   |          |          |             | c_real, c_imag = -0.62772, -.42193
     9   |          |          |             | 
    10   |          |          |             | #@profile
    11   |          |          |             | def calculate_z_serial_purepython(maxiter, zs, cs):
    12   |          |          |             |     """Calculate output list using Julia update rule"""
    13   |   0.08%  |   0.02%  |      0.06   |     output = [0] * len(zs)
    14   |   0.25%  |   0.01%  |      9.50   |     for i in range(len(zs)):
    15   |          |          |             |         n = 0
    16   |   1.34%  |   0.05%  |     -9.88   |         z = zs[i]
    17   |   0.50%  |   0.01%  |     -8.44   |         c = cs[i]
    18   |   1.25%  |   0.04%  |             |         while abs(z) < 2 and n < maxiter:
    19   |  68.67%  |   2.27%  |     42.50   |             z = z * z + c
    20   |  18.46%  |   0.74%  |    -33.62   |             n += 1
    21   |          |          |             |         output[i] = n
    22   |          |          |             |     return output

https://github.com/emeryberger/scalene/blob/master/README.md#output

他にもpythonのプロファイラは結構あるみたいですね

	Time (seconds)	Slowdown	Line-level?	CPU?	Memory?	Unmodified code?
original program	7.76s	1.00x
cProfile	11.17s	1.44x	function-level	:heavy_check_mark:		:heavy_check_mark:
Profile	278.19s	35.86x	function-level	:heavy_check_mark:		:heavy_check_mark:
yappi	143.78s	18.53x	function-level	:heavy_check_mark:		:heavy_check_mark:
line_profiler	93.27s	12.02x	:heavy_check_mark:	:heavy_check_mark:		needs @profile decorators
memory_profiler	aborted after 30 minutes	>232x	:heavy_check_mark:		:heavy_check_mark:	needs @profile decorators
scalene (CPU only)	8.31s	1.07x	:heavy_check_mark:	:heavy_check_mark:		:heavy_check_mark:
scalene (CPU + memory)	9.11s	1.17x	:heavy_check_mark:	:heavy_check_mark:	:heavy_check_mark:	:heavy_check_mark:

https://github.com/emeryberger/scalene/blob/master/README.md#performance-and-features

broot

Rust製のファイルエクスプローラー。treeっぽく表示するが、depthやディレクトリあたりのファイル数をいい感じに制御してくれるみたい

https://github.com/Canop/broot#get-an-overview-of-a-directory-even-a-big-one

EbookFoundation/free-programming-books

無料で読めるプログラミングに関するリンク集。ジャンルも数も多く充実している。

日本語のものはこちら

何個かPDFを閲覧してみたが質の良いサイトが揃ってそう

• その他の話題 > 一般教養としてのGarbage Collection

• AWK > AWKの第一歩

alpinejs

軽量なJavascriptフレームワーク。Vue.jsからインスパイアされているらしい。ただし、いはゆるVue.jsでいうコンポーネントはscriptには一切書かずに、domの中に全て書くみたい。

サンプル（Dropdown/Modal）

https://github.com/alpinejs/alpine#use

<div x-data="{ open: false }">
    <button @click="open = true">Open Dropdown</button>

    <ul
        x-show="open"
        @click.away="open = false"
    >
        Dropdown Body
    </ul>
</div>

サイズも小さく（bundle sizeが3.72kB）作るものの規模次第ではあるがVue.jsが書ける人からすると結構アリでは？

覚えることはこれだけ↓

There are 12 directives available to you:

Directive
x-data
x-init
x-show
x-bind
x-on
x-model
x-text
x-html
x-ref
x-if
x-transition
x-cloak

And 3 magic properties:

Magic Properties
$el
$refs
$nextTick

https://github.com/alpinejs/alpine/blob/master/README.md#learn

jetbrain-activation-code

Jetbrain系のプロダクトで使えるアクティベーションコードがアップロードされているみたい（法に触れそうなので確認はしていない）

jetbrains activation code idea激活码 pycharm激活码 webstorm激活码 goland激活码 datagrip激活码 jetbrain软件家族激活码

まぁすでにJetbrainsが廃止してそうやけど

jexcel

Excel風表計算ソフトをJavascriptで実装したもの。みためは結構Excelに近い。

似たようなものに handsontableがありそちらはスター13kほど、触ってみると機能的にはhandsontableの方が多機能

postgres

Node.jsで使用できるPostgreSQLクライアントライブラリ、1日だけでスターが285も増えている（全体では1000ほど）

調べると、他にもnode-postgresというライブラリもある

https://www.sejuku.net/blog/81358

postgresでのサンプル↓

const postgres = require('postgres')

const sql = postgres({ ...options }) // will default to the same as psql

await sql`
  select name, age from users
`

良さとしては書き方がシンプルw、というかこういう構文(インスタンスの後にテンプレート文字列くっついたもの)みたことないんやがなんやこれ

await sql`
  select name, age from users
`

あと、外部ライブラリへの依存が0なのも地味に嬉しい

その他

11日

その他

10日

その他

9日

その他

8日

その他

7日

その他

6日

その他

5日

その他

4日

その他

3日

その他

2日

その他

1日

その他

See also

• ブラウザでキャッシュできてアクセス制限できるAWSでの静的ファイルの配信について考えてみた
• AWSとPR-Agentを組み合わせてPRのコードレビュー自動化を試してみた。
• slackみたいなメール受信・チャットアプリ転送基盤をAWSで作ってみた
• AWSの日毎のコストや当月のコストのサービス内訳をCloudWatchのダッシュボードでグラフとして表示する方法
• Nest.jsのアプリケーションをなんとかしてAWS Lambdaで動作させるようにした